职位描述
职位描述:
岗位职责:
1、负责大数据开发团队建设;
2、负责行业大数据产品架构设计与研发;
3、负责带领团队进行行业大数据产品关键技术攻关。
任职要求:
1、本科及以上学历,计算机、软件工程,数学相关专业优先;
2、5年以上大数据应用、开发经验;具备海量数据加工处理(etl)相关经验,对数据挖掘及机器学习有较为深刻的理解;
3、2年以上研发团队管理经验;
4、熟悉hadoop相关技术,对hdfs、mapreduce、hive、hbase有一定的使用和开发经验;
5、熟悉linux,熟练使用shell或python,进行脚本编写;掌握至少一种主流关系数据库开发技术:oracle、sql server、mysql等;
6、对数据结构和数据统计分析算法有较为深刻理解;掌握实时流计算技术,有spark、storm开发经验者优先。