岗位描述
一、岗位职责
负责通用AI大模型以及其应用的评测、落地以及平台化能力建设,包括但不限于:
1. 通用AI大模型评测基准的构建:建立覆盖文生文、多模态理解、多模态(音视频/3D/图/视频生成)生成等多模态的评测基准,设计全面、准确的多维度指标,构建自动化评测工具链,并随着模型能力的演进持续探索全模态的评测基准。
2. 评测数据的自动化生产能力构建:基于数据泛化等能力,构建领域增强型评测数据集生产链路,支持多模态场景的自动化数据扩增与效果验证。
3. 自动化评测与归因分析:探索并实现各个模态大模型的自动化评测与模型缺陷归因机制。
二、岗位要求
1、熟练掌握python编程语言;
2、理工科相关专业(如数理相关学科、计算机学科相关背景人员等)以及
文科相关专业(如汉语文学、哲学、教育学、历史学、新闻学、传播学、广告学等)优先;
3、具有大模型评测/调优经验经验优先;
4、具有良好的逻辑思维能力, 数据分析能力,善于分析和解决问题。
三、工作地点
成都