锦鲤求职岗位描述
岗位职责
1、参与 AI 模型评测相关工作，包括大语言模型、多模态模型、计算机视觉模型等方向的测试与效果分析。
2、协助建设和维护模型评测流程、测试工具或自动化评测平台，支持模型接入、任务执行、结果统计和报告输出等工作。
3、根据业务需求参与测试数据准备、测试用例设计、评测执行和结果整理，帮助团队了解模型在不同场景下的表现。
4、对图像识别、OCR、视频理解、视觉问答、多模态理解等相关模型进行测试验证，发现问题并协助定位原因。
5、参与模型效果对比和简单分析，支持模型选型、版本对比和产品优化。
6、关注 AI、大模型、多模态等相关技术发展，结合实际工作持续优化测试方法和工具能力。
岗位要求
1、本科及以上学历，计算机、软件工程、人工智能、电子信息、数学、自动化等相关专业优先。
2、熟悉 Python 或其他常用编程语言，能够编写测试脚本、数据处理脚本或自动化工具。
3、了解软件测试、自动化测试、数据分析或 AI 模型测试中的一种或多种相关工作内容。
4、对大语言模型、多模态模型、计算机视觉、机器学习等方向有兴趣，有相关学习或项目经验优先。
5、了解常见模型评测指标或测试方法者优先，如准确率、召回率、F1、mAP、BLEU、ROUGE 等。
6、有图像识别、OCR、NLP、大模型应用、自动化测试平台、数据标注或测试工具开发经验者优先。
7、具备较好的问题分析能力和沟通协作能力，能够与算法、研发、产品等团队配合推进工作。
8、工作认真细致，具备一定的学习能力和执行力，愿意持续学习 AI 相关技术。
加分项：
1、有使用 AI 编程工具辅助开发、调试或测试的经验优先。
2、有模型评测、算法测试、自动化测试、数据处理或测试平台建设经验。
3、了解模型评测、Benchmark、LLM-as-Judge、Agent 测试等相关方向。
4、有实际参与 AI 产品、算法项目或测试开发项目经验。