服务需求及技术要求.docxVIP

服务需求及技术要求 一、融媒体大数据服务系详细技术需求表 序号 项目名称 项目内容及描述 数量 备注全网资源线索汇聚服务 采集汇聚门户网站的新闻资讯，如国信办发布的允许发布新 闻的新闻机构网站；以及国内主流的商业新闻网站和地方政 府网站发布的资讯；采集汇聚客户端、微博、微信公众号发 布的即时信息。 1 数据采集范围 指定数据采集服务数量： 重点新闻网站类：中央重点新闻网站、地方重点新闻网站及其他重点新闻门户网站，范围涵盖网信办所公布的《互联网 1 项 新闻信息稿源单位名单》，总数 350 家以上； 新闻客户端类：覆盖不少于 100 个主流新闻客户端； 微博类：覆盖不少于 2000 个主流微博账号； 微信公众号类：覆盖不少于 4000 个主流微信公众号； 此类数据源均支持按采购人需求进行调整。 要求采集数据源频率主要包括： 线索资源采 1、重点新闻网站“即时新闻”或者“滚动新闻“频道的新 2 集数据源频 闻数据采集轮训时间需达到 5 分钟之内更新一次； 1 项 率 2、需根据特殊的应用场景，提高部分网站、微博、微信数 据源采集频率，轮询时间提速到 2 分钟之内更新一次； 1、信息过滤处理要求针对特定的稿件所涉及到每个元素均 3 采集数据准 确性 是干净的，必须去除广告、相关链接等干扰信息； 2、微信数据结构化，去除多余的HTML 格式、二维码等； 1 项 3、网站数据结构化，按栏目进