岗位职责:
1、负责数据仓车和大数据平台的设计与研发;
2、负责数据可视化平台开发,进行图表、数据透视表及分析报告的开发;
3、负责Hadoop. Spark. HBase、 Hive、 Impala等大数据集群的部署及性能优化,进行分布式多结点群集系统建设和优化工作;
4、负责数据挖掘算法的设计及对海量数据进行挖掘分析;
5、参与业务数据、生产日志的抽取、转储、检索等相关工作;
6、根据大数据前沿技术的发展,将合适的技术方案适时引入业务场景;
任职资格:
1、全日制本科及以上学历,计算机相关专业;
2、2年及以上大数据开发经验;
3、熟悉Hadoop、Spark或storm等分布式系统的工作原理,具备较强的架构、性能优化能力;
4、熟练掌握MySQL、Oracle等数据库技术;
5、熟练掌握Linux操作系统,了解shell等脚本编程;
6、熟悉Java, Python, SQL, Hive, 等开发语言,有使用Matlab, 引入算法、模型等,进行数据分析挖掘的经验优先;
7、具有良好的团队协作和沟通能力;