数据平台开发工程师

职位描述

1. 负责设计并构建数字安全部门数据采集到云端处理、挖掘、标注的全链路数据闭环系统架构与流程

2. 开发数据工具与平台，实现从海量数据中自动清洗、挖掘高价值场景

3. 负责推动自动标注系统的应用与优化，开发数据筛选、清洗等核心处理算子，提升数据产出的质量和处理效率

4. 构建数据质量评估体系，并对处理后数据进行有效治理与管理，确保其可高效支撑下游模型训练

任职要求

1. 计算机科学、机器学习、人工智能等相关专业本科及以上学历

2. 具备扎实的数学与编程基础，熟练掌握 C++、Python 等编程语言，熟悉常用数据结构和算法

3. 熟悉大数据技术栈（如 Spark/Flink/Kafka）、云原生相关技术（如 Docker/K8s）、任务调度平台（如 Airflow/Argo Workflows）以及数据标注与挖掘方法

4. 具备数据清洗、自动化标注、场景提取、智能检索等相关实践经验

5. 发表过智能辅助驾驶仿真评测相关的学术论文或拥有相关专利者优先。