岗位描述
岗位职责
1.协助构建 AI 数据目录,对各个渠道收集的各类原始数据进行分类管理。
2.参与数据采集、清洗(去重、脱敏等)、质检、标注及结构化处理,协助形成不同行业、场景的数据集。
3.学习深度学习模型、LLM、多模态模型的数据处理方案,参与数据增强、样本均衡、噪声过滤等工作。
4.协助搭建自动化数据处理流水线,参与数据集版本管理、权限管理与迭代更新机制。
5.协同模型开发、评估团队,协助迭代优化数据策略,定位数据缺陷,补充核心场景样本。
岗位要求
1.计算机、数据科学、人工智能、自动化等相关专业。
2.熟练掌握 Python 编程语言,熟悉 Pandas、Numpy、OpenCV 等数据处理工具库。
3.熟悉计算机视觉数据、多模态数据、大模型训练数据的特性,了解数据标注规范与质检标准。
4.有深度学习模型、大模型(LLM/多模态)数据处理项目经验者优先。
5.了解 AI 数据安全、数据脱敏、隐私保护相关规范。