主要工作内容和岗位职责描述：
1、数据中台一站式开发平台的设计和研发，涉及数据采集、作业调度、数据质量、元数据管理、指标管理等模块；
2、大数据平台服务组件的搭建和维护，能够持续优化并改进现有的技术框架，保证高可用、稳定、低延迟的优质服务体验；
3、参与海量数据处理和高性能分布式计算的架构设计，负责数据处理流程的设计和代码开发，撰写相关文档；
4、设计和研发AI训练框架和工具体系，提高算法开发优化效率；
5、研究大数据技术领域新进展，并应用到业务中。
专业能力：
1、本科及以上学历，计算机相关专业，7年以上相关工作经历；
2、精通Spark、kafka、Hive、Flink、HBase、HDFS等大数据组件，具有相关系统的调优、运维、开发经验；
3、熟练掌握java,scala语言，熟悉并行计算或者分布式计算，理解RDD，MapReduce、HDFS原理；
4、熟悉linux开发环境；熟练掌握python、shell中的一种；
5、精通数据结构和算法。包括数组，链表，堆栈，队列，树，哈希表，集合等，而常见的算法包括排序，搜索，动态编程，递归等；
通用能力（适用经理级以下专业序列员工，建议3-5项）：
1、擅于沟通和解决问题，乐于总结分享，有想法，有冲劲，有团队精神和主人翁意识和责任感；
2、具有良好的职业道德和个人修养，主动承担和敬业精神；