大数据开发工程师

【岗位职责】
1、参与公司数据产品、数据平台及具身智能机器人数据平台的建设与持续优化，参与数据项目从需求分析、架构设计、开发实施到上线交付的全流程工作。
2、熟练运用 Python 进行数据开发、数据处理脚本及自动化工具开发，高效处理海量结构化、半结构化及非结构化数据。
3、熟练使用 Hadoop 生态及主流大数据计算框架，包括 Spark、Flink 等，负责离线/实时数据处理任务的开发、部署、监控及性能调优，持续提升数据处理效率与平台稳定性。
4、参与具身智能机器人相关数据处理体系建设，负责机器人运行过程中产生的图像、视频、点云、语音、关节状态、位姿、IMU、力/力矩、传感器日志等多模态时序数据的采集、解析、清洗、同步、转换、存储及质量治理。
5、参与机器人训练数据管线建设，支持机器人数据的自动化采集、数据切片、轨迹处理、数据筛选、质量检测、标注数据管理及训练数据集生成，为感知、规划、控制及具身智能模型训练提供高质量数据支撑。
6、参与数据链路及数据服务接口的设计、开发与调试，配合模型、机器人及软开团队完成数据接口对接，保障机器人端、数据平台及应用平台之间数据交互的高效性、准确性
【任职要求】
1、本科及以上学历，计算机、大数据、软件工程、人工智能、自动化、机器人、统计学等相关专业，具有3-5年及以上数据开发、大数据开发或数据平台相关工作经验。
2、熟练掌握 Python 编程语言，具备扎实的代码能力，能够独立完成数据处理脚本、数据服务及自动化工具的开发与调试；熟悉 Pandas、NumPy 等常用数据处理工具或框架。
3、熟练使用 Hadoop 生态及主流大数据技术，包括但不限于 Spark、Flink 等，具备丰富的离线/实时数据处理项目经验，能够独立完成数据任务开发、性能分析及调优。
4、熟悉数据仓库、数据湖等数据架构设计理念，掌握星型/雪花模型等数据建模方法，具备海量数据存储、处理、治理及性能优化经验。
5、熟练掌握 SQL，能够编写复杂查询语句，具备 MySQL、Oracle 等关系型数据库的开发及优化能力；熟悉 Linux 系统及 Shell 脚本开发。
6、具备海量非结构化数据或多模态数据处理经验，熟悉图像、视频、音频、日志、时序数据等一种或多种数据类型的存储、解析及处理方式。
7、对具身智能及机器人技术具有一定了解，能够理解机器人数据从采集—上传…