岗位描述
岗位职责
1. 参与公司大数据开发的设计、开发与维护工作,包括数据采集、清洗、存储、处理及可视化等环节;
2. 协助开发和优化分布式计算任务(如Spark/Flink任务),提升数据处理效率;
3. 配合团队完成数据建模、ETL流程开发及数据质量监控;
4. 结合AI+DATA,建设AI的数据基建,包括但不限于Data Agent、Data Mcp与Data Engineer Agent。
岗位要求
1. 计算机科学、软件工程、数学、统计学等相关专业本科及以上学历;
2. 熟悉至少一门编程语言(Java/Python/Scala),具备良好的编码习惯;
3. 了解大数据生态基础技术(如Hadoop/Spark/Flink/Kafka等),有相关学习或项目经验优先;
4. 熟悉SQL语言,了解MySQL/PostgreSQL等关系型数据库或NoSQL数据库(如Redis/MongoDB);
5. 对数据敏感,具备较强的逻辑分析能力和问题解决能力;
加分项:
- 有开源项目贡献、大数据竞赛或实际项目经验者优先;
- 有大模型与数据相关的项目经验优先。