AI助手评测专家 - PICO

职位描述

团队介绍：作为一家拥有自主创新和研发创造能力的科技品牌，PICO致力于成为领先的世界级XR平台，成就开发者与创作者，共同为全球消费者创造更美好的生活体验。我们开创性地将虚拟现实扩展到了多个领域，为运动、视频、娱乐等消费级场景带来了全新体验；并广泛应用在教育、医疗和企业培训等商用场景，给全球企业级用户提供了多元化的VR解决方案。

1、负责AI助手相关算法（包括但不限于意图、路由、RAG、Planner、记忆、语音等）的测试架构设计与核心测试方案的开发，实现对算法进行全面的客观基准评测；

2、负责跟随XR产品软硬件项目流程测试并交付AI助手相关算法需求，建立准入和准出标准，构建AI助手算法的云端协同的端到端测试体系和数据闭环，保障并持续提升用户端到端体验；

3、负责跟踪AI助手相关算法前沿技术进展，保障算法及其测试方案的业界领先性；

4、负责持续提升研发测试效能，提升本领域的自动化率和AI工具应用率；

5、负责以导师身份培养初级员工，建立并维护本领域的测试技术体系。

任职要求

1、本科及以上学历，计算机、人工智能、自然语言处理或相关专业，硕士学位优先；

2、5年以上AI算法测试经验，有0到1设计并实现AI算法质量体系的经历，熟悉大语言模型（LLM）、对话系统或NLP相关技术原理；

3、精通测试理论，精通云服务测试，有较强的云端协同的端到端测试方案设计与技术实现能力，善于问题抽象与跨团队技术协作；

4、熟练使用Python或C/C++进行算法测试工具开发，熟悉LLM常用工具链，可以快速搭建自动化评测框架，开发测试工具，高效构建大规模评测数据集；

5、具备较强的问题攻坚能力，有较强的自驱力和技术钻研精神。

加分项

1、有AR/VR、手机、车端智能助手测试经验者优先。