云平台研发(J57538)

职位描述

1. 负责车联网大数据平台的数据架构设计、数据治理、数据资产管理，确保数据质量和数据安全。

2.参与大数据平台核心模块的开发与优化，包括数据接入、存储、计算、处理、分析等，支撑海量车联网数据的处理需求。

3.负责实时数据流处理系统的设计与实现，如基于Flink、Kafka Streams等技术，满足实时业务场景需求。

4.进行数据仓库、数据湖的建设与维护，优化数据模型和ETL流程，提升数据处理效率。

5.与数据产品经理、数据分析师、算法工程师紧密协作，理解业务需求，提供高效的数据解决方案。

6.负责大数据平台的技术选型、性能调优和故障排查，保障平台稳定运行。

7.持续关注大数据领域前沿技术，进行技术预研和应用，推动平台技术创新。

任职要求

1. 本科及以上学历，计算机、软件工程、数学、统计学等相关专业。

2.3年以上大数据平台开发经验，精通Java/Scala/Python等至少一种编程语言，具备扎实的编程基础。

3.精通Hadoop生态系统，包括HDFS、YARN、MapReduce、Hive、HBase等组件，并有实际项目经验。

4.熟悉Spark、Flink等大数据计算框架，具备实时流处理系统开发经验。

5.熟悉数据仓库理论和实践，具备数据建模、数据治理经验。

6.熟悉Kafka、Flume等数据采集和传输工具，对数据管道有深入理解。

7.熟悉Linux操作系统，具备Docker、Kubernetes等容器化技术的使用经验者优先。

8.有车联网、物联网或大型互联网大数据平台开发经验者优先。

9.具备良好的沟通能力、团队协作精神和解决问题的能力，对数据敏感，有较强的数据分析和问题解决能力。