1、职责描述
(1).负责项目中的需求调研、DW设计、ETL开发、技术支持等工作；
(2).基于大数据离线+实时分析和数据开发；
(3).为数据仓库日常维护提供技术支持；
(4).参与ETL相关的性能调优和监控。
2、职位要求
(1).3年及以上数据仓库和数据集市开发经验，海量数据处理经验；
(2).精通etl开发及调度流程及数据仓库建模理论；
(3).精通ODPS、Kettle、DataX等数据开发平台和ETL工具；
(4).熟练hadoop生态圈技术（hbase/hive/impala/spark等）；
(5).熟练SparkStreaming流式计算，有参与开发过实时计算平台者优先；
(6).精通数据库开发，具有性能优化能力，对SQL优化、编写高效SQL等有丰富经验；
(7).熟练shell编程，有大型OLAP系统开发经验，有ClickHouse经验者优先；
(8).逻辑思维清晰，能承受高强度工作压力，具备良好的执行力及分析、解决问题能力。