评测研究专家

【岗位职责】
1.跟踪数据集评测领域前沿技术、行业标准与应用痛点，独立开展数据集质量、合规性、适配性等细分方向专题研究，输出技术研判与调研报告，支撑测评规划和新场景数据集评测方案设计；
2.聚焦数据集质量校验、样本分布核验、标注误差溯源、偏见风险识别等核心评测技术攻关，参与数据集评价指标、基准测试集、评测流程规范的试验验证与迭代优化，论证评测方案技术可行性；
3.支撑数据集评测试验环境、专用校验工具研发，负责评测基准数据集的构建、多维度校验与效果验证，沉淀可复用的数据集评测组件、测试用例与试验方法；
4.作为核心技术骨干承担重点数据集测评、比对验证试验，负责数据集评测方案细化、测试流程落地、异常样本定位溯源，编制数据集专项技术分析报告，支撑客观评测结论形成；
5.参与数据集评测质量细则、复核规则编制，承担数据集盲测复核工作，参与行业技术研讨交流，沉淀数据集评测典型案例，推动数据集评测方法在行业落地应用。
【任职资格】
1.硕士研究生及以上学历，计算机、人工智能、软件工程、电子信息、数据科学等相关专业；
2.具有5年及以上数据集评测、数据质量审计、标注核验、数据合规核查相关技术研究或项目实施经验，能够独立承担数据集评测专项研究与技术攻关工作；
3.熟悉各类AI数据集的构建逻辑、应用场景与风险特征，掌握数据集质量评估、分布校验、偏见检测、基准集验证等评测研究方法，可独立设计数据集评测技术方案、解决评测中的关键技术问题；
4.熟悉数据集评测相关标准、技术规范与质量管控体系，具备数据集评测项目方案论证、试验复核、评测结果研判经验，严守测评独立性、公正性原则；
5.具备较强的专项研究、试验设计、跨团队协同能力，能够独立撰写数据集评测研究报告、技术方案，具备良好的技术汇报与行业交流能力，工作严谨；
6.主持或核心参与过数据集基准体系建设、数据集评测科研课题、数据集评价标准研制，或有测评实验室数据集评测能力建设、资质配套技术支撑经验者优先。