评测技术研究员

【岗位职责】
1.依据年度任务与评测方案，落地数据集专项评测实施工作，开展数据集评测样本归集、清洗、核验、统计分析，支撑数据集评价方法验证迭代；
2.在数据集评测研究专家指导下，参与数据集评价指标、基准集、评测规范的落地细化，编制数据集评测用例、执行脚本、操作文档及评测报告，严格落实评测标准；
3.负责数据集评测试验环境部署调试、评测工具与平台日常运维，完成基准数据集、测试样本库的整理更新，保障数据集评测工作稳定开展；
4.配合重大数据集测评项目、比对验证试验，承担现场实测、过程台账记录、异常样本上报，协助复核评测结果，保证评测过程留痕可追溯；
5.落实数据集评测质量管控相关流程与资料归档，支撑资质配套材料整理，配合开展行业交流、案例归集，助力数据集评测成果落地应用。
【任职资格】
1.硕士研究生及以上学历，计算机、人工智能、数据科学、软件工程、电子信息等相关专业；
2.熟悉数据集评测、数据质检、标注体系验证或AI数据相关技术，能够承担数据集评测相关执行类技术工作；
3.熟悉各类AI数据集形态与业务应用场景，掌握数据集质量核验、分布分析、偏差校验、合规核查等评测试验方法，可按方案完成数据集测试实施；
4.了解数据集评测相关标准、技术规范及质量管控要求，能够严格遵照流程开展测评，如实记录试验情况，保障评测过程规范、结果可追溯；
5.具备良好的文档编写、试验复盘与沟通协作能力，能够撰写数据集评测用例、测试记录及评测报告，工作细致严谨，恪守科研诚信；
6.拥有数据集基准构建、标注质量审计、数据合规核查、测评平台实操经历，或参与过数据集评测项目、相关行业标准研制者优先。