千问事业部-大模型产品评测策略专家-北京/杭州

岗位描述
1. 制定所负责业务线的评测策略，与产品、算法目标对齐，明确评测优先级与节奏；
2. 设计并维护评测标准与Rubrics体系，建立科学、可量化的评估框架；
3. 产出深度评测报告与Bad Case归因分析，输出可落地的改进建议，驱动产品迭代；
4. 开展评测数据洞察与Insight分析，从评测结论中提炼业务价值与趋势判断；
5. 组织行业专家参与评测，把控人评质量，推动专家逆序率持续下降

岗位要求
1. 本科及以上学历，专业不限，计算机语言学、人工智能优先；
2. 1年以上大模型评测或NLP质量评估经验，有垂域评测经验优先；
3. 具备评测集设计、标注规范制定与质控的完整经验；
4. 较强的数据分析与报告撰写能力，能将评测结论转化为业务语言；
5. 具备行业专家资源组织经验，能独立开展主观评测活动；
6. 良好的跨团队协作能力，能与产品、算法团队高效沟通并建立信任