职位描述:
工作职责:
1. 负责搭建高性能HBase数据服务平台,专注于HBase系统的性能优化、故障分析,对HBase系统的功能进行扩展、提供丰富的业务访问接口
2. 负责hadoopspark生态下的大数据存储及分析平台的搭建和维护。
3. 负责外部数据的爬虫,抽取、清洗、转化,负责企业分析数据的ETL和入仓操作。
任职资格:
1. 计算机类相关专业本科以上学历。
2. 2年以上大数据开发经验,有高性能分布式平台开发经验。
3. 熟悉Hadoop、Hive、HBase、Spark等开源项目,至少精读过其中某一个的源码,对Key-Value具有深入理解,有实际项目实施经验者优
4. 1年以上HBase、MapReduce生产环境实践经验者优先。
5. 熟悉sqoop等ETL工具,熟悉数据仓库理论并有实践的经历。
6. 良好的沟通能力、团队合作精神。认真负责、具有高度责任感。优秀的学习能力。