AI 大数据中台工程师(J10699)

职位描述

1. 数仓与数据建模：基于维度建模（Kimball）/ Data Vault，构建企业级数据仓库与主题域（营销、供应链、研发、生产、售后、设备 IoT），沉淀指标体系与标签体系。

2. 数据采集与 ETL/ELT：打通多源异构数据（ERP/MES/CRM/IoT/医院与经销商系统/第三方），开发实时流 + 离线批的采集、清洗与加工管道，保障数据准确、及时、可回溯。

3. 数据治理与全生命周期管理：建设元数据管理、数据血缘、数据质量、主数据（MDM）、数据分类分级与脱敏机制，管理数据从采集、存储、使用到归档销毁的全生命周期。

4. 数据服务化（资产化）：将数据资产封装为 API / 数据服务，建设数据目录与资产地图，让数据"用起来"，支撑业务系统与 AI 智能体（Data / Ops / Service 等）调用。

5. 数据智能应用：与算法工程师协同，支撑需求预测、设备故障预警、经营分析看板等数据智能场景落地。

6. 架构演进与跨部门协同：设计可持续演进的数据架构，平衡"统一规范"与"业务灵活"；横向拉通 IT、财务、研发、生产、销售、售后等多部门推进中台建设。

任职要求

1.学历经验：本科及以上，计算机 / 软件 / 数据 / 统计相关专业；3 年以上数据开发 / 数仓 / 大数据平台经验，有数据中台从 0 到 1 经验者优先。

2.编程与数据库：精通 Python 与 SQL；熟练 MySQL、PostgreSQL；熟悉 Elasticsearch（日志 / 检索）；具备扎实的工程化与数据结构能力。

3.ETL 与建模：精通 ETL/ELT 开发与调度，熟悉维度建模 / Data Vault / 实体关系建模，能独立构建企业级数仓，完成数据清洗与质量校验。

4.大数据栈：熟悉 Hadoop 生态（HDFS/Hive）、Spark（离线）、Flink（实时）、Kafka；熟悉至少一种 OLAP/MPP 引擎（Doris / StarRocks / ClickHouse）。

5.采集同步：熟悉 DataX / Flink CDC / Canal / Sqoop / Flume 等离线 + 实时同步工具。

6. 数据治理：理解元数据、数据血缘、数据质量、权限与安全治理（Atlas / Griffin / Ranger / Great Expectations 等思想或工具）。

7.调度与运维：熟悉 Airflow / DolphinScheduler 调度；了解 Kubernetes / YARN / Zookeeper 等资源调度与集群管理。