职位详情
岗位职责:
1、负责基于Hadoop生态系统建设,包括但不限于基础集群的搭建与维护、离线计算平台、实时流计算平台、模型算法平台的架构与研发;
2、深入了解业务背景,能抽象业务需求,对数据应用提供数据存储、数据服务、查询引擎、元数据管理的架构设计
3、系统核心部分代码编写;
4、跨团队/部门协作,系统分析并解决各类大数据平台相关的运行或数据问题;
5、打造有行业竞争力的系统,能够支撑快速发展的数据业务。
任职要求:
1、三年以上经验,熟悉大数据处理相关产品架构和技术(如Hadoop/Hive/HBase/Kafka/zookeeper);
2、熟悉生产大数据平台任务调度,开发;
3、具有扎实的Java基础,逻辑思维缜密;
4、熟练操作linux系统,熟悉shell脚本;
5、熟悉 ElasticSearch;
6、有较强的逻辑思维能力,善于分析、归纳、快速定位并解决问题。