高级数据开发工程师(大数据方向)

职位描述

1.参与自动驾驶数据中台，海量数据的收集，高性能处理和检索管理​

2.设计、开发和维护业内高性能分布式大数据计算引擎，支持自动驾驶领域结构化/非结构化数据的高效处理​

3.负责自动驾驶领域大数据计算加工/机器学习推理链路的开发和维护，持续不断提升计算加工效率​

4.负责大规模海量数据的特征提取、统计计算、数据分析与数据挖掘​

任职要求

1.本科及以上学历，熟悉自动驾驶数据闭环数据特征，精通数据仓库建模理论，3年以上的数仓建设经验。​

2.了解主流大数据处理框架及技术，如 Hadoop/Spark/Hive/Flink等，并熟练掌握其中两种以上；对大数据系统存储技术有一定了解，具备Elasticsearch、分布式文件存储(如HDFS/NFS) 和对象存储 (如S3/MinIO)使用开发实践经验。​

3.熟练掌握 python/java 中一种开发语言；掌握多种数据库技术(至少一种主流关系型数据库如MySQL/PostgreSQL)，具备数据合理选型能力，掌握MongoDB索引设计、复杂查询性能分析与优化等关键技术​

4.熟悉分布式对象存储/数据湖，熟悉Hudi、DeltaLake、Iceberg等至少一种数据湖技术，有生产落地经验者优先。​

5.熟悉数据仓库理论方法及ETL相关技术，对于数据的架构和设计有一定的思考，具备良好的数学思维和建模思维。​

6.良好的团队合作精神，具备较强的沟通能力和问题解决能力。​

7.业务理解能力强，对数据敏感，具有自动驾驶行业、汽车行业大数据相关经验优先。​

​