数据后端工程师

职位描述

1. 负责设计和实现复杂的后端服务, 管理数据处理相关基础设施和集群，支持数据处理和管理需求。

2. 构建和维护高效的数据预处理流程, 包括数据的提取、清洗、转换和加载。

3. 设计并优化数据存储解决方案，高效管理数据及其生命周期，提高数据访问效率和处理性能。

4. 熟练应用各种中间件和技术栈, 对后端服务和数据处理流程进行性能调优, 确保处理速度和数据质量。

5. 与算法和其他团队高效协作, 根据业务需求和技术发展, 持续评估和改进数据处理策略和工具。

任职要求

1. 计算机或相关领域本科及以上学历, 至少3年以上的后端开发和大数据处理经验，有成功设计和实施大规模数据处理系统经验的优先。

2. 精通Python，熟悉Go，有良好的开发编程习惯，强大的分析和问题解决技能。

3. 深入理解大数据技术和工具，包括但不限于 Hadoop, Spark, Flink, Kafka, Doris。

4. 深入理解系统组成和网络原理，熟悉并熟练应用Kubernetes、容器化、云原生技术。

5. 熟悉关系型数据库和 NoSQL 数据库的设计和优化，包括但不限于MySQL、PostgreSQL、Cassandra，具备在高负载环境下处理性能调优的经验。

6. 良好的团队合作意识和沟通能力，能够承担一定的技术指导和项目管理责任。

7. 对新技术保持热情和关注，具有较强的学习能力，愿意接受挑战和面对变化。