岗位描述(节选)
1. 负责联网搜索基础设施建设,包括网页抓取、采集调度、站点适配、反爬策略、代理管理、失败重试、增量更新、数据合
规与链路监控。
2. 建设网页内容理解与数据处理链路,支持 HTML、PDF、Word、表格、图片、动态网页等多源内容的解析、正文抽取、去
噪、去重、质量评估与结构化处理。
3. 负责离线通用索引构建体系,建设面向大规模网页和异构数据的倒排索引、向量索引、结构化索引、混合索引、增量索引
和索引质量评估能力。
4. 建设垂类搜索能力,面向企业知识、行业数据、内容、商品、业务系统等场景,设计领域数据 Schema、召回策略、排序策
略、过滤规则和结果展示策略。
5. 建设搜索质量优化与数据回流链路,包括 Query 日志、点击行为、用户反馈、Badcase 归因、人工标注、训练数据构建、
离线评测、在线 A/B 实验……
完整岗位描述与官方投递入口,请登录后在岗位详情页查看。