岗位描述
岗位职责
1、服务动线监控与问题闭环管理:负责线上服务动线的日常监控,执行异常Case的抽样检查,识别用户体验断点;对异常问题进行深入分析与根因定位,输出结构化分析报告;跟进问题处理进度,协调相关团队推动问题闭环,提升服务链路稳定性与用户满意度;
2、模型与智能链路质检体系建设:参与模型交互内容的质检标准制定与持续优化; 搭建线上智能服务链路的监控机制,设计关键指标与预警规则;负责质检任务的创建、标注团队的组织与管理,确保打标任务高效执行;对标注结果进行回收分析,提炼典型问题,反哺模型优化与策略迭代;
3、大模型数据集生产与质量保障:参与大模型训练数据集的策划与人工标注管理,确保数据覆盖全面、标注规范;负责大模型评测数据集的人工质检工作,保障评测结果的准确性与可信度;协同算法团队,基于质检与用户反馈数据,协助模型效果评估与迭代优化;持续提升模型在实际对客交互场景中的准确性、安全性与用户体验。
岗位要求
1、本科及以上学历,计算机科学、数据科学、统计学、语言学等相关专业,1-3年大模型数据标注、评测或相关数据工作经验者优先;
2、熟悉大模型基本原理与研发流程,了解常见的自然语言处理(NLP)任务(如文本分类、问答、生成式任务等),具备相关数据处理经验者加分;
3、具备扎实的数据处理能力,熟练使用Python(Pandas、Numpy等库)、SQL等工具,能独立完成数据清洗、转换、分析等工作;
4、具备较强的逻辑思维与细节把控能力,能精准制定标注与评测规范,高效完成质量管控工作;
5、具备良好的文字表达能力,能清晰撰写技术文档、操作手册,准确传递需求与标准;
6、具备一定的问题分析与解决能力,能快速定位数据生产、评测过程中的问题并提出优化方案;
7、具备良好的沟通协作能力与团队管理意识,能高效对接内外部团队,推动工作落地。