项目实习-到餐-软件开发（数据开发及工程开发）

职位描述

1、参与大规模数据清洗、处理及分析流程的设计与开发，编写高效数据清洗脚本，确保数据质量和处理效率；

2、完成数据清洗规则实现、异常数据修复及结构化数据转换；

3、优化数据处理性能，解决高并发、海量数据场景下的技术挑战；

4、协同产品、算法等团队，推动清洗方案落地并输出标准化文档；

5、参与数据质量监控工具开发，实现自动化清洗流程。

任职要求

1、掌握hadoop、hive、spark、flink一种或者几种平台或组件的开发经验；

2、掌握数据仓库、ETL开发相关技术和原理，有实时计算经验优先；

3、掌握JAVA、Python或Scala语言之一，对数据结构和算法设计有较为深刻的理解；

4、较强的学习、分析和解决问题能力，良好的团队意识和协作精神，有较强的内外沟通能力。