资深AI产品经理(大模型评测方向)(J17158)

传音控股| 上海
社招硕士
发布于 2024-12-16

职位描述

1、负责设计和建立全面、科学的大模型评测体系,涵盖性能、效果、安全性、可用性等多维度的指标与方法,持续追踪行业领先的大模型; 2、负责定义自研语音助手大模型和智能体的能力标准,构建评测体系和评测工具,对线上用户实际使用体验进行分析和跟踪; 3、负责横向与友商语音助手进行对比评测,分析产品优劣势,为产品迭代优化提供指导方向; 4、与模块产品、数据生产、标注、算法、测试团队通力合作,推动提升领域模型效果,牵引产品体验和能力提升;

任职要求

1、本科及以上学历,研究生学历优先,有AI相关技术背景、评估和数据分析背景优先; 2、具备AI、搜索、策略等3年以上评测经验,至少一年大语言模型方向评测工作经验; 3、对预训练、SFT、提示词工程等大模型技术原理有深入理解; 4、具备对用户体验的理解和认知,能从用户实际使用视角分析和发现问题; 5、具有头部互联网或者大模型公司工作经验优先;

相关职位推荐