大数据高级研发工程师

职位描述

团队介绍：字节跳动推荐架构国际化团队大数据方向，负责国际化推荐场景大数据的设计和开发，为业务提供标准化高性能的特征计算，保障系统稳定和高可用。

1、为大规模推荐系统设计和实现合理的数据系统；

2、生产系统的trouble-shooting，设计和实现必要的机制和工具保障生产系统整体运行的稳定性；

3、打造业界领先的流式计算框架等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施。

任职要求

1、对大数据系统有深入的了解，在生产环境有TB级别Flink实时计算系统开发经验，深入掌握Flink DataStream、FlinkSQL、Flink Checkpoint、Flink State等模块，有Flink源码阅读经验优先；

2、熟悉常见消息队列原理和应用调优，有Kafka、Plusar、RocketMQ等项目源码阅读经验优先；

3、熟悉Java、C++、Scala、Python等编程语言，有强悍的编码和 trouble-shooting能力；

4、乐于挑战没有明显答案的问题，对新技术有强烈的学习热情，有PB级别数据处理经验加分；

5、有数据湖开发经验，熟悉Hudi、Iceberg、DeltaLake等至少一项数据湖技术，有源码阅读经验优先；

6、熟悉其他大数据系统经验者优先，YARN、K8S、Spark、SparkSQL、Kudu等；

7、有存储系统经验加分，HBase、Casscandra、RocksDB等。