职位描述:
岗位职责:
1. 负责数据仓库基础设置和平台的架构、搭建、开发及维护工作; 优化数据存储和计算平台, 确保数据平台的可靠运行
2.了解数据业务需求, 提出解决方案, 制定开发计划并执行
3.解决海量数据不断增长面临的挑战, 提高数据仓库性能, 解决业务需求.
岗位要求:
1. 深刻理解数据仓库思想, 具有数据仓库、数据集市架构设计、开发实施经验.
2.了解Hadoop生态系统, 有海量数据接入、分发、计算开发经验, 熟悉分布式计算和大规模数据处理的相关技术, 有2年以上基于Hadoop/HIVE/Hbase/impalapark等应用开发经验
3.熟练应用主流关系型数据库, 精通SQL, 有一定的SQL缩写和优化调优经验
4.有互联网公司大数据量下实时查询, 即席查询系统架构经验优先
5.有推荐系统、机器学习相关经验优先, 了解数据挖掘算法优先