职位描述:
1.结合公司大数据分析平台的规划,搭建以hadoop技术体系为核心的集群环境。
2.结合业务的实际数据情况,设计、开发基于hdfs/hbase/hive的数据查询分析
4.负责Hadoop数据分析模块与其它系统/模块之间的衔接,为BI提供基础数据分析
3.辅助运维人员管理Hadoop集群环境,不断提高系统运行效率;
任职要求:
1、精通java语言,两年以上海量数据分布式系统的开发经验;
2、熟悉hadoop框架,熟练应用map-reduce;
3、熟悉Java、Shell,可以熟练使用Linux操作系统,了解Linux集群技术者优先;
4、有“用户画像”或者推荐引擎相关数据挖掘经验者优先;
5、有Spark、Storm、Pig等开源组件的使用经验者优先;
6、热爱技术,有良好的自我管理能力;
7、具有较强的团队意识与良好的沟通能力,高度的责任感,对工作积极严谨,勇于承担压力,较强的学习能力以及快速解决问题的能力。