大数据系统架构师(J12577)

职位描述

标签：数据开发、数据架构、数据建模、数据仓库、实时计算

岗位职责：

1.深入理解行业数据，理解和提炼标准，结合数据的技术特点设计数据模型和加工生产逻辑，并不断提炼共性需求，形成企业级统一数据模型；

2.主导项目数据架构、数据模型设计，确保项目建设满足架构原则、规范和标准，为项目建设提供数据架构设计支持； 3.负责数据源调研、入库、离线和实时数据处理的全流程开发工作，并保证数据质量；

4.制定数据湖仓相关技术规划、标准制定，并且推动团队遵循标准；

任职要求

1.本科及以上学历，7年以上工作经验；

2.熟悉Hadoop生态系统，熟悉Hive、HBase、Kafka、Spark、Flink、Hudi/Iceberg等组件的工作原理，熟悉MPP数据库如Clickhouse、Doris、StarRocks等;

3.熟悉Hive SQL语言，熟悉scala语言，熟悉java, python等至少一种编程语言;

4.较强的业务理解能力，善于抽象提炼企业领域数据模型，有丰富的数据仓库建设、数据模型设计经验；

5.熟悉数据治理（数据管理）的理论知识，例如DAMA、DCMM、数据资产管理白皮书等优先；

6.具备优秀的逻辑思维能力和自驱力，有良好的沟通能力和团队协作精神