岗位描述(节选)
1、建立并迭代数据评测体系:针对数据效果与模型效果进行高质量验证与评价,设计科学的评测指标、流程与方法,输出可信的评测结论;
2、深度分析评测结果,定位数据与模型的核心问题,将评测结论有效反哺数据供给与生产策略,形成"评测—反馈—优化"闭环。
【任职要求】
1、本科及以上学历,计算机、人工智能、统计学等相关专业,3年以上数据评测、数据标注质量管理或模型评估相关经验;
2、具备扎实的数据 know-how:熟悉数据采集、清洗、标注全链路,能快速判断数据质量与缺陷根因;
3、具备模型 know-how:理解主流大模型/深度学习模型的训练与评测方法,有 Badcase 分析、模型效果归因的实战经验;
4、掌握至少一种评测指标设计方法(如人工评估、自动评测、对抗评测),有搭建评测集或评测平台的经验者优先;
5、逻辑清晰、自驱性强,具备跨团队推动能力,能将评测结论转化为可执行的改进方案。