工作职责：

- 主要负责公司内部大数据平台的建设，包括各类结构化和非结构化数据的采集、数据加工处理、基础数据模型开发和维护等；

- 负责与内部客户进行需求沟通，完成需求分析、设计、开发以及项目管理工作；

- 负责跟进大数据前沿技术的发展，将合适的技术方案适时引入业务场景。

任职资格：

- 大学本科及以上学历，计算机相关专业或有相关职位经验；

- 3-5年及互联网大数据处理经验；

- 熟悉大数据开源技术，包含（不限于）Hadoop/Spark/Spark Streaming/Hive/Hbase/Impala /Sqoop/Flume/Kafka/ES分布式框架/计算/存储/检索等相关技术；

- 掌握SQL、HiveSQL、SparkSQL进行数据开发，较好的SQL性能调优经验；

- 掌握Python或Java一种开发语言；

- 掌握Sqoop和Flume进行结构化和非结构化数据采集；

- 有一定的Hadoop生态系统运维经验；

- 具备机器学习/数据挖掘实际工作经历的优先；有实时处理工作经历优先；

- 热爱技术，主动思考，有很好的技术敏感度、风险识别能力和全局意识。