DataAgent评测实习生（武汉）

职位描述

岗位职责：

- 参与DataAgent评测体系的搭建与完善，包括评测维度定义、评测集构建、评估标准制定等

- 参与自动化评测方案的设计与落地，支持评测流程搭建、脚本协同及结果回收

- 参与业务数据的治理工作，统一标签与统计口径，确保进入Agent的数据可信可用

- 建立线上评估机制，将线上真实流量转化为评测资产，定位模型层（Prompt/微调）、知识层（RAG）、工具层（API/SQL生成）的根因，协同算法团队制定针对性优化方案；

- 参与DataAgent评测体系的搭建与完善，包括评测维度定义、评测集构建、评估标准制定等

- 参与自动化评测方案的设计与落地，支持评测流程搭建、脚本协同及结果回收

- 参与业务数据的治理工作，统一标签与统计口径，确保进入Agent的数据可信可用

- 建立线上评估机制，将线上真实流量转化为评测资产，定位模型层（Prompt/微调）、知识层（RAG）、工具层（API/SQL生成）的根因，协同算法团队制定针对性优化方案；

任职要求

岗位要求：

- 了解大语言模型（LLM）基本原理，会使用主流AI Agent工具（如Langfuse、LangChain等）

- 逻辑缜密，细心负责，具备数据整理与纠错能力，能将复杂问题拆解为清晰的评测与分析框架

- 对大模型评测、Agent搭建、数据策略有较强兴趣，愿意持续跟踪前沿技术

- 了解大数据技术架构，熟悉常见数据结构和算法，以及大数据生态圈相关组件者优先