岗位描述
岗位职责:
1、主导大数据平台的规划建设,包括数据采集、数据开发、治理、运维管理等平台系统;
2、参与代码编写及开发指导,帮助开发团队解决核心问题,并编写技术文档,对通用技术实现复用;
3、跟踪大数据相关技术最新发展趋势,根据业务场景需求进行技术选型测试验证、技术难题攻关;
4、负责公司大数据平台的维护优化,保证系统的稳定性和健壮性。
任职要求:
1.本科以上学历,6年以上大数据平台架构设计和研发经验,精通大数据领域的技术栈如Hadoop、Spark、Flink、Presto、HBase、Elasticsearch、Janusgraph、Greenplum等;
2.具备深厚的大数据及分布式计算理论基础,对MapReduce、HDFS、Yarn执行原理及使用调优有深入见解;
3.有生产环境大数据平台的落地案例,有百级或以上节点规模集群、百TB级以上数据规模的系统调优经验;
4.熟悉Java/python/scala/shell等编程语言,具备在linux系统下的部署维护大数据组件经验,能够快速解决生产环境的问题;
5.熟悉业界有影响力数据仓库和大数据领域的产品、解决方案形态和技术,熟悉OLAP、OLTP引擎和DB,熟悉主流数据整合、治理技术和工具;
6.具备优秀的团队意识和沟通能力,有责任心,有较强的学习能力和钻研精神,对平台和系统有自己的思考。
联系人:王妍
yan.wang@bessystem.com