岗位描述(节选)
1. 评测体系建设与项目管理
• 统筹评测任务的排期、分工与交付管理,确保多条线并行推进、按时交付。
• 制定并迭代评测任务的 SOP,建立质量管控机制(一致率监控、数据验收等)。
• 管理评测团队,负责质量验收、能力培养、效率提升等。
2. Rubric 设计
• 主导toC场景(agentic search、多轮能力等) rubric 的设计与终审。
• 提炼通用 rubric 范式,沉淀为可复用的模板。
• 主动识别效率瓶颈与质量风险,推动标准化和自动化改进。
3. 跨部门协同与需求对接
• 作为接口人,与算法等团队对接评测需求,明确评测目标、验收标准与交付节奏。
• 将算法团队的改进需求转化为可执行的评测方案。
• 利用AI 辅助工具提升标注效率。
4. 深入分析模型在真实场景任务中的 bad case,精准归因问题来源(……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。