职位描述
数据架构
数据挖掘
数据治理
1、搭建、维护数据服务系统。
2、根据需求对接数据源，整理数据及相关文档。
3、调研、测试、优化数据系统相关工具，包括mariadb, mysql, postgreSQL等数据库以及hadoop, hive, flink等其他大数据相关框架。
4、项目选型过程中，负责存储相关选型工作。
5、清理存储系统无用数据，降低成本，提高系统运行速度和稳定性。
任职要求：
1、本科及以上学历，数理、统计、计算机、电子等相关理工科专业。
2、熟练使用Python/Go/Shell/SQL等语言，能够快速完成数据相关的脚本开发。
3、熟悉JupyterNotebook/NoteBook/Pandas等工具，能够快速完成数据分析工作。
4、熟悉Ceph、MinIO、NFS、FTP等分布式/网络文件系统。
5、熟悉大数据领域常用组件，例如：Hadoop、Hive、Spark、Kafka、Flink等。