高级数据获取工程师

职位描述

岗位定位

实现航司运价数据获取、清洗、存储的体系化建设，直接驱动机票 B2B 分销业务的稳定和效率提升，能从机票全业务体系角度思考问题，对机票数据稳定性和准确性提供保障方案

核心职位

1. 负责机票业务自营航司数据全链路体系化建设、建立并完善可扩展的数据策略及存储体系，支撑公司B2B分销业务的核心竞争力；

2. 主导数据获取 - 清洗 - 应用的全链路建设，确保数据的有效性、稳定性、及时性（SLA≥99.5%），并通过数据质量监控、告警、复盘机制，持续降低数据异常对业务的影响；

3. 基于采集数据搭建业务赋能体系，包括价格监控、竞品分析、供需预测、动态定价等应用场景，与产品、运营、算法团队深度协作，将数据能力转化为可量化的业务增长（如 GMV 提升、毛利优化、转化率提升）；

4. 搭建并完善爬虫业务的规范化、体系化管理，包括技术标准、开发流程、 合规边界、风险评估、团队能力建设，确保数据获取业务在合法合规前提下高效运转；

关注行业技术趋势与竞争态势，持续优化数据获取策略，保持公司在机票数据领域的技术领先性与业务敏感度。

任职要求

1. 本科及以上学历，计算机相关专业，7 年以上数据获取/爬虫开发经验，有独立负责过千万级日采集量的分布式爬虫系统从 0 到 1 建设与落地经验，有团队管理经验优先；

2. 精通 Python/Java 至少一门语言，深入理解爬虫架构设计、反爬对抗、数据清洗、任务调度等核心技术，有复杂场景（JS 逆向、APP 抓包、验证码识别、IP 代理池）的实战经验；

3. 具备强烈的业务视角，能从数据中洞察业务机会，有将数据能力产品化、应用化的成功经验，而非仅停留在"把数据抓回来"的执行层面；

4. 有旅游行业数据经验优先（航司官网/B2B、OTA平台、票价监控、供应链数据），熟悉航空业数据标准（IATA、ATPCO、OAG 等）者优先；

5. 具备合规意识与风险把控能力，熟悉国内外数据相关法律法规（如 GDPR、网络安全法），能在合规边界内最大化数据价值。