Agent评测工程师

岗位职责：
1.模块拆解与评测方案设计：独立拆解现有Agent工程架构，梳理推理、规划、工具调用、多轮对话、BI解析、本体问答等核心模块，制定分层、可量化、可落地的专项评测方案与指标体系。
2.评测数据集建设：负责各场景评测数据集的规划、构建、清洗、迭代，补齐当前评测数据缺失问题，覆盖通用、专业、边界、高难场景，保证评测客观可信。
3.评测体系与评测Agent搭建：搭建自动化常态化评测机制，独立开发/搭建评测Agent，实现批量自动化测评、结果对比、回归评测，提升评测效率与标准化程度。
4.问题定位与能力牵引优化：输出版本评测报告，精准定位模型与模块短板，给出明确优化建议，联动算法、工程团队落地迭代，持续牵引智能体效果提升。

任职要求:
1.211/985硕士及以上学历，计算机、人工智能、大数据等相关专业，有大模型、NLP、Agent算法评测相关经验。
2.理解智能体基本架构与核心能力，能够独立拆解模块、设计评测方案、自建评测数据集。
3.熟练使用Python，熟悉大模型常见评测思路、指标与工具，有自动化评测、评测Agent搭建经验优先。
4.自驱力强、独立闭环：能主动发现问题、自主规划评测迭代，逻辑清晰，可通过评测反向驱动算法与工程优化。

加分项：
1.有Agent、ChatBI、任务型智能体从零到一评测体系搭建经验。
2.有顶会论文、开源项目，或在竞赛中取得成绩优先。