职位描述:
一、岗位职责
1负责海量数据处理分布式平台以及大数据分析系统的研发
2根据业务和产品情况对数据模型进行设计和开发,对数据模型进行优化
3负责业务需求的需求理解、数据开发,提供面向业务的数据服务
4参与相关数据分析工具平台的研发
5应用大数据技术完成离线分析和实时数据分析工作
6数据分析代码库的建设及优化
7线上已有架构的运维
二、任职资格
计算机软件开发或相关专业
最少5年工作经验,2年以上大数据研发经验
1、有扎实的Java基础,熟悉spring/mybatis/redis/maven,熟悉一种以上数据库并熟练运用SQL;
2、具备良好的J2EE、SOA、Database、nosql等广泛的知识体系;
3、熟悉主流Web应用服务器,如Tomcat、Nginx等,熟悉Linux开发环境,了解常用工具使用;
4、深刻理解Hadoop大数据平台架构原理,熟悉HDFS/MapReduce,能熟练运用MapReduce程序处理数据;
5、熟悉 Storm / Spark / Kafka 等实时计算技术栈,有过实际项目经验;
6、熟悉Hive / Pig / Hbase / ZooKeeper,对Hadoop、Hive源码有研究更佳;
7、有Hadoop集群的搭建、维护和优化经验;
8、有算法, 数据建模挖据, 智慧旅游系统方面经验尤佳。
能力素质
1、热爱技术,对技术有不懈的追求,喜欢研究开源代码;
2、做事积极主动,具有高度的责任感与团队合作精神,主动学习新技术,有良好的沟通能力。