职位职责：
1、开发并维护智能数据平台，在规定日程内完成指定的相关任务；
2、负责Hadoop/Spark的功能部署和性能优化，解决并实现业务需求；
3、使用hive、spark、mapreduce进行数据处理，协助建立数据模型，对数据挖掘脚本进行优化；
4、对业务数据进行分析、建模，为业务部门的数据化运营提供支持；
5、依据公司业务需求，进行数据开发，为数据分析和运营等人员搭建友好高效的数据服务。
任职要求：
1、具备自学和独立解决问题的能力，熟悉数据治理相关理论知识;
2、了解基本linux系统知识，熟悉linux常用命令，能熟练编写shell脚本；
3、熟练掌握sql和python语言，熟练使用oracle、sql server、mysql数据库者优先考虑；
4、掌握大数据相关技术，如clickhouse/hadoop/hbase/spark/elasticsearch/flink, etc；
5、有大型可扩展分布式系统设计或者大数据处理系统设计经验更佳；