岗位描述(节选)
1. 负责阿里集团评测平台的整体架构设计与核心能力建设,覆盖基座模型、Agent与Skills等评测对象,支撑文本/生图/音频/视频等多模态模型,Agent以及集团内各类Skills的评测需求。
2. 搭建评测诊断、归因分析与报告生成能力,沉淀一套可复用的评测分析方法论;针对评测失败原因、得分分布、执行轨迹与Badcase做深度归因,为基座模型、Agent与Skills的能力迭代提供依据。
3. 跟进业界模型与Benchmark的最新进展,制定评测实施计划与应急预案,推进评测任务落地、验收评测结果并产出高质量分析报告,把评测元信息、结果与报告沉淀为可管理、可检索的数据资产。
4. 与领域专家团队协作,支撑评测集的制作、验收与上架,配合完成敏捷评测与全面评测,提升评测全链路的自动化程度与工程效率。
5. 支撑集团内各类Agent及竞品接入EVA+自动化评测体系,开发Agent接入诊断与提效工……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。