混元大模型评测算法研究员（北京）

职位描述

1.负责通用AI大模型相关的评测与应用的规划、落地以及平台化能力建设，包括但不限于：；

2.通用AI大模型评测基准的构建：建立覆盖文生文、多模态理解、多模态（音视频/3D/图/视频生成）生成等模态的评测基准，设计全面、准确的多维度指标，构建自动化评测工具链，并随着模型能力的演进持续探索全模态的评测基准；

3.评测数据的自动化生产能力构建：基于数据泛化等能力，构建领域增强型评测数据集生产链路，支持多模态场景的自动化数据扩增与效果验证；

4.自动化评测与归因分析：探索并实现各个模态大模型的自动化评测与模型缺陷归因机制。