岗位描述(节选)
【岗位职责】
团队介绍:火山引擎是字节跳动旗下云和AI服务平台,将字节跳动快速发展过程中积累的增长方法、技术能力和应用工具开放给外部企业,通过云和AI技术,推进企业智能化转型,激发增长潜能。
1、负责汽车Agent日常评测体系的建设和执行,在评测负责人指导下完成评测集建设、版本评测、问题分析和质量闭环;
2、围绕真实车载用户任务设计和维护E2E评测案例,覆盖车控、导航、多媒体、信息服务、复杂Agent任务等核心场景;
3、负责评测案例的持续建设,包括:
1)从真实用户反馈和线上数据中提取高价值场景;
2)将历史负面案例转化为可持续回归的评测案例;
3)补充不同车辆状态、乘员状态、执行条件和异常条件下的风险案例;
4)建立不同车型、版本和模型之间可比较的稳定评测集;
4、参与版本评测执行,完整记录“用户表达→Agent理解/决策→系统执行→实际结果”,判断任务是否真正完成,而非只评价模型回……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。