职位描述
一、任职要求:
1、本科及以上学历,5 年以上相关工作经验;
2、负责大数据平台的功能设计和开发;
3、熟悉主流大数据计算引擎Hadoop、Spark、HBase、Hive、ES等分布式相关的技术及组件,深刻理解内部机制和原理
4、熟练掌握Java,具备迅速处理复杂数据的能力;
5、热衷于产品研发和技术创新, 具有很强的学习能力并有强烈的责任意识和开放的心态, 工作态度好,积极向上者为先;
6、具备大型分布式、高并发、高负载、高可用系统设计、开发及调优经验,有大数据平台 的软件开发、部署经验;
7、熟悉 Hadoop 生态圈技术栈,HBase、Hive、MapReduce 等;熟悉 Spark、Storm、Kafka、 Zookeeper、K8S 等开源组件,具备开源项目集成开发经验优先;
8、熟悉容器、人工智能、微服务等新技术,有互联网运营平台架构设计或大数据公司同类 平台或产品设计、开发经验者优先。
二、任职资格:
1、具备大型分布式、高并发、高负载、高可用系统设计、开发及调优经验,有大数据平台 的软件开发、部署经验;
2、熟悉Spark 分布式计算框架原理和编程模型,zookeeper 分布式协调服务的使用;
3、熟悉 Hadoop 生态圈技术栈,HBase、Hive、MapReduce 等;
4、熟悉Spring等后台开发框架,以及MySQL等关系数据库的设计与优化;
5、良好的编程能力:熟练掌握Java(或者Scala),具备迅速处理复杂数据的能力;
6、追求优秀的设计和代码质量,有良好的责任心和执行力,具备独立的分析、解决问题的能力 ;
7、有Hadoop、Spark、HBase深入源代码分析经验,熟悉数据仓库的技术架构和实施方法论,并支撑过实际业务场景优先。
8、负责大数据平台的设计、建模、代码开发和测试;
9、规划大数据平台的架构和部署需求,把握系统的高可用、扩展、安全、性能、伸缩性等;
10、及时与产品经理/项目经理沟通需求,分析梳理业务场景,协助需求并解决各种业务实现问题;
11、负责核心技术难题的攻关,攻克团队遇到的技术难题,持续对线上系统进行性能优化及稳定性提升;
12、参与对平台的运维和运营的支撑体系的制定和实施,对线上突发问题进行及时响应并解决;
13、交纳五险一金及享受公司正常福利待遇。
14、待遇:月薪=基本工资+年终奖 项目绩效奖金。项目绩效奖金具体收入与项目业绩挂钩。
15、性别不限 。
16、工作区域:上海总部(上海市宝山区罗泾飞云路121号)。