高级大数据工程师

职位描述

1.负责支撑各业务线数据仓库、数据中台、数据中心、数字基座等方案设计、编写工作

2.负责支撑各业务线相关大数据项目的招投标工作，项目验收工作

3.对接客户需求，为客户提供大数据项目的解决方案策划、咨询实施、产品搭建等售前、售中、售后一系列服务或培训服务

4.参与大数据产品架构设计、相关文档评审

5.指导团队数据开发工程师、算法工程师的开发工作

6.参与大数据部分核心技术攻坚工作

任职要求

1.5年以上Java、Hadoop开发及管理经验，有传统数仓、数据中台、大数据相关分析产品的开发落地经验

2.有分布式系统分析及架构设计经验，有大型计算集群的基础设施开发维护经验

3.熟悉Java EE相关框架原理，如spring cloud、spring boot、ssh、ssm等

4.熟悉Apache Hadoop平台及相关生态技术，包括MapReduce、HDFS、Spark、Strom、ZooKeeper、HBase、Hive、Flume、Sqoop、Mahout等技术的原理和实施

5.熟悉机器学习常用框架sklearn、tensorflow、keras等

6.熟悉Linux 操作系统和大型关系型数据库MySql、Oracle等，熟悉python、shell、sql、hql等编程语言

7.有大数据项目交付、招投标相关经验优先

8.良好的文档编写能力，学习、沟通能力，富有强烈的责任感和团队意识