岗位描述(节选)
1. 高质量数据挖掘:负责重点领域高质量网页挖掘算法的设计与优化,提升有价值数据的召回率与准确率。针对特定类型数据源(如专业知识库、代码仓库、学术论文、多模态内容等)研发定向挖掘策略,构建可持续扩展的数据获取能力。
2. 多模态合成数据生成:设计并构建 LLM / VLM / Omni 等多种模态的 SFT(监督微调)与 RL(强化学习)合成数据生产链路。研究合成数据的可控生成、多样性增强、难度调度与分布对齐方法,提升合成数据对模型能力的增益。
3. 数据处理算法研发:研发新一代数据处理算法,包括但不限于网页解析、质量评分模型、数据去重与去污染、图像预处理、跨模态对齐等。推动算子的工程化落地,形成标准化、可插拔的数据处理组件。
4. 数据质检与配比优化:构建数据质量验证算法,覆盖完整性、准确性、安全性、知识密度等多维指标。研发数据改写、数据清洗、数据配比优化等方法,保障训练数据分布合理、质……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。