检索调研环境自适应抓取算法的研究与实现.pdfVIP

第 卷第 期 年 月 科学技术与工程 检索调研环境自适应抓取算法的研究与实现 郝孟涛黄川 刘金刚 计算机科学联合研究院首师大中科院计算所 百度在线网络技术北京有限公司 中科院计算所 北京 摘要检索调研环境是按照搜索引擎线上检索端模块搭建的供策略研发工程师进行策略调研的线下实验环境 验证策略 生效最直接的方式是检索结果评估 策略调研效果评估的一个重要方式是搭建两套调研环境原始环境和策略升级后环境 用一批抓取这两个环境然后对抓取结果送评通过人工对比打分由策略研发工程师对送评结果分析决定是否上线 策略 这应该是一个快速迭代的过程但每个环节都有可能拉长迭代周期 调研环境的稳定性