二、Hadoop平台架构师
工作职责：
1. 负责搭建、维护与管理Hadoop平台，以及Haddop平台上的数据存储、维护与优化。
2. 参与基于Hadoop中间件的设计开发工作。
3. 参与离线处理流程和实时处理流程的设计开发工作。

任职要求：

1. 精通分布式数据处理，有三年以上的Hadoop相关开发经验（Hive，Spark，HBase，Sqoop，Flume等）。
2. 熟悉数据仓库逻辑架构，熟悉ETL流程、元数据管理、数据质量监控等数据仓库主要环节。
3. 熟悉Java、Python等开发语言，精通MapReduce，能编写Hive UDF，熟悉shell脚本。
4. 有较强的ETL性能优化及问题分析、解决能力。
5. 对技术有激情，对代码有苛刻要求。
6. 有良好的快速学习能力和团队协作能力。
7. 有高度责任感和敬业精神，善于沟通，积极主动，能够以目标为导向理解工作中相关任务的处理优先级关系。

职位类别： 高级软件工程师

举报