岗位描述(节选)
1. 按照产品架构和业务要求,设计覆盖功能与非功能需求的评测策略,负责 AI/算法类产品的效果符合设计预期,保障系统稳定性;
2. 面向复杂推理、Agentic Workflows 等前沿能力构建高难度评测集;开发支持万级并发、对接训练集群的评测流水线,实现 Checkpoint 边训边评与分钟级反馈;规模化落地LLM-as-a-Judge,解决开放式生成量化难题;对 Bad Case 做算法级归因,将洞察反馈 AI Research 团队,指导数据配比与合成数据生成;
3. 研究评测相关新技术方法,攻克评测复杂技术/算法问题;
4. 能结合AI行业发展趋势,制定合适的评测技术发展规划,提升团队技术视野和技术影响力。
【任职要求】
1. 3 年以上互联网或传统行业算法/开发/测试经验,具备 1 年以上 AI/算法类产品评测经验(大模型 / 推荐 / 搜索 / NLP);有基座模型评测工程……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。