高级大数据工程师

职位描述

1、负责数据平台相关管理及开发工作，包括日常任务监控管理、运维监控、调优、数据治理等；

2、根据业务需求完成BI、数据产品与应用的数据研发，发掘数据业务价值，以数据驱动业务不断发展；

3、前沿技术研讨、ETL流程优化，根据业务需要适时引入新技术，提升平台效能；

4、完成公司安排的其它相关的汇报、技术投标等工作任务。

任职要求

1、5年及以上数据仓库建设相关工作经验，计算机、数学等相关专业，本科以上学历，

2、精通SQL，熟悉常用的关系型/非关系型数据库，了解国产化数据库如人大金仓、达梦等，具备丰富离线、实时数据处理经验，以及SQL性能优化经验；

3、熟悉java、shell等开发语言；

4、熟悉Hadoop、Hive、Spark、Flink、Kafka等相关技术，了解相关组件底层原理;

5、熟悉数据仓库、数据湖相关的建模理论、数据分层架构，维度模型设计等；

6、熟悉数据中台及DCMM、DAMA等数据工程方法论；

7、具备行业数仓项目搭建经验，带过团队进行相关数仓项目交付者优先。