岗位描述(节选)
加入天猫技术质量团队,你将面向导购、搜索、营销、商家经营、客服等核心业务场景中的各类 AI Agent,对端到端业务效果负责。
这个岗位不止是“给 Agent 打分”,而是深入 AI 应用链路,通过指标设计、评测集管理、自动化评测、执行轨迹分析、问题挖掘和数据回流,定位影响业务效果的关键问题,并推动 Prompt、Skill、记忆、知识库、工具链及 Agent 架构持续优化,建立“应用构建—效果评测—问题归因—数据回流—针对性优化—回归验证”的完整闭环,以评测驱动 Agent 演进,让 AI 应用在真实业务场景中取得可衡量、可持续的效果。
具体你将负责
1. Agent 端到端业务效果评测与优化
面向天猫业务 Agent,设计覆盖任务理解、规划决策、知识获取、工具调用、任务执行及最终业务结果的端到端评测方案。
建立多维度评测指标与判定标准,包括任务完成率、结果正确性、业务规则符合度、工具……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。