模型评测产品经理 - AI创新业务

职位描述

团队介绍：字节跳动AI创新业务团队，在这里你将有机会参与到行业前沿产品的规划设计，开拓自己的行业视野，与先进团队共同成长。

1、负责猫箱APP AI核心体验的评测体系建设，包括角色对话、语音、图像、多分支剧情及记忆系统等；

2、制定多模态评测标准，搭建“自动评测＋人工标注”机制，建设评测数据集、Benchmark及工具化Pipeline；

3、结合数据分析与体验走查，定位影响用户留存和沉浸感的模型短板，推动算法持续优化；

4、设计A/B实验，评估模型迭代对互动时长、留存率、角色收藏率等核心指标的实际影响；

5、协同算法、标注、数据、内容及产品团队，推动评测结论落地，形成模型迭代闭环。

任职要求

1、本科及以上学历，5年以上产品经验；具备内容质量、推荐策略、体验度量或对话AI相关经验；

2、能将主观体验拆解为可量化、可追踪的指标，有从0到1搭建评价标准的经历；

3、具备扎实的数据分析与实验设计能力，掌握SQL、Python或相关分析工具；

4、逻辑清晰、推动力强，能够连接算法技术与业务体验；

5、深度关注AIGC，熟悉角色扮演、互动叙事或AI陪伴产品，对优质陪伴和故事体验有独立判断。