岗位描述
岗位职责
1、参与公司分布式基础平台相关研发工作,覆盖大数据引擎、云原生基础设施、资源调度和平台工程能力建设;
2、参与 Spark、Presto、Doris、Hadoop 等大数据生态相关组件的技术选型、部署优化、性能调优、功能扩展和二次开发;
3、参与大数据引擎核心组件研发,包括数据采集适配、任务调度、引擎监控、性能分析、ETL 工具等能力建设,提升大规模数据处理效率和平台稳定性;
4、参与 Kubernetes 集群、云计算服务及云原生平台能力建设,围绕资源隔离、调度优化、部署交付、弹性伸缩、配置管理、监控巡检、故障自愈等场景,提升平台自动化和稳定性;
5、参与 CPU、GPU 等计算资源的统一管理、调度与使用效率优化,支撑大数据、AI 计算及业务系统等多类场景;
6、参与分布式系统架构优化、性能优化、稳定性建设和工程化落地,持续提升基础平台的可靠性、可扩展性和研发效率;
7、跟进大数据、分布式计算、云原生、容器化、资源调度等前沿技术发展,参与新技术预研和业务落地。
岗位要求
1、硕士及以上学历,计算机、软件工程、网络工程、自动化等相关专业;
2、计算机基础扎实,熟悉操作系统、计算机网络、数据结构与算法、数据库或分布式系统相关基础知识;
3、熟悉 Go、Python、Java、C/C++ 中至少一种编程语言,具备良好的编码和调试能力;
4、对分布式系统、大数据引擎、云原生基础设施、资源调度、平台工程中的一个或多个方向有兴趣和实践基础;
5、熟悉 Spark、Presto、Doris、Hadoop、HDFS、YARN、OLAP、分布式存储等大数据相关技术者优先;
6、熟悉 Kubernetes、容器、容器网络、资源隔离、服务部署、弹性伸缩、可观测性、自动化运维等云原生相关技术者优先;
7、有大数据引擎、数据库内核、分布式计算、Kubernetes、云原生平台、CPU/GPU 调度等相关实习或项目经验者优先;
8、具备良好的学习能力、逻辑分析能力、责任心和工程质量意识,愿意深入复杂技术问题并推动问题解决。