岗位描述
岗位职责
1、负责商业问答机器人的评测体系搭建与持续迭代,覆盖诊断、RAG、审核、盯盘、素材及投放等场景,制定评测标准、设计评测流程与指标体系;
2、负责评测集的全流程管理(产出、标注、质检),识别 badcase 并抽象共性问题,与研发协同推动模型调优闭环;
3、跟踪评测结果趋势,定期输出评测报告,为产品迭代和模型优化提供可量化的决策依据。
岗位要求
1、2年以上商业化效果广告运营或产品优化经验,熟悉广告投放链路、常见效果问题及优化手段,了解主流广告平台基础功能;
2、大专及以上学历,了解大模型基本原理;有大模型评测/提示词工程/标注管理经验者优先;
3、逻辑清晰,数据敏感,能从 badcase 中提炼规律而非停留于单点反馈;
4、沟通协作能力强,能与研发高效对齐评测结论与优化方向。