职位描述:
岗位职责:
1、了解整个Hadoop生态体系,对Hadoop、Spark有实际开发和使用经验;
2、使用前沿的集群资源管理技术进行基于Yarn、Mesos资源调度资源利用率极致优化。
任职资格:
1、良好的程序开发能力,较强的Debug能力,能够抓住影响集群运行效率的核心问题,设计实现相应解决方案,解决问题;
2、较强的沟通和表达能力,具备良好的团队合作精神和主动沟通意识;
3、具有以下一个或多个领域的理论背景和实践经验:Yarn调度开发、Mesos调度开发、MapReduce效率优化、Spark效率优化等;
4、熟悉Javacala/Python编程语言一种,具有Linux平台使用经验优先;
5、具有200节点以上集群资源调度开发经验等相关项目经验者优先。