SmartEye-网络内容监控系统v4.ppt

SmartEye－网络内容监控系统 业务背景 不良内容的无序增长 每天互联网产生约1000个新的色情网站，300,000个新的网页 每5分钟就有一个新的色情图片上传，每30分钟一个色情视频上传 不良内容通过网站、邮件、P2P软件无序传播 导致 漏网之鱼太多，造成监管手段的“马后炮”效应，出了事才发现，牵累ISP/IDC 人工干预的过滤工作不堪重负 SmartEye “慧眼”：业务概要 业务目标： 对网内用户访问的 WAP/WWW网站是否存在低俗/不良/反动内容（文字、图片、视频）进行监测和阻断 对IDC托管内容（文字、图片、视频）是否存在低俗/不良/反动内容进行监测和阻断 技术指标 文字漏检率和误检率控制在5%以内 图片漏检率和误检率控制在10%以内 实时阻断和多种及时干预手段（内容重定向、DNS封堵、舆情预警、IP/备案跟踪等） SmartEye技术实现 监控“云” 基于千万网民实时行为和境外内容跟踪，同步海量的不良内容数据样本库 文本样本 图像样本 离线分析：爬取分析 文本SVM快速分类 图像DNA比对/图像理解 在线分析：分光镜像分析 － 关键词过滤 － 可疑图像/视频快速检测 － URL地址库过滤 IDC、WAP网关 监控点 在线/离线联动 在线发现可疑目标，离线进行确认 SmartEye系统架构 SmartEye “慧眼”：主要功能 不良信息的识别 关键字识别 语义分析识别 图像HASH比对识别 图像DNA识别 音频识别* 视频识别* 不良信息的干预 警告信息 干扰 阻断 系统管理后台 统计分析 统计分析报告 网络热点 关键字设置 阻断策略设置 黑名单 白名单 升级管理 用户多级权限管理 领先的在线分析功能－关键词识别 基于链路旁路镜像的分析系统，实时侦测每一页面内容，无需依赖URL地址库，不影响现有WAP/WWW业务 实时页面分析 可实时阻断，如替换页面内容或发送短信/彩信告知用户 领先的离线分析功能－文本分类语义识别 同样的“五月天”关键词： 通过支持向量机（SVM）训练可准确区分 正常 不良 领先的在线分析功能－在线图像/视频快速识别 基于图像URL和图像数据哈希值的快速比对 基于肤色的快速可疑图像过滤 视频自动快照采样功能，进行精确匹配 领先的离线分析功能－图像DNA识别 图像DNA识别 无论不良图片如何裁剪、变形、旋转、变色、加字、加水印、修改，均能通过图像DNA数据识别来定位到样本库中的原图。 领先的离线分析功能－图像理解 计算机视觉过滤（Computer Vision Based Filtering）：更为先进的部位识别功能，对未入库的图像进行识别 通过大量样本上的HaaR分类器训练 精准定位最可疑的低俗不良内容 不良信息的干预 警告信息 通过系统在用户上网时或上网过程中发布警告信息，劝阻其立即停止访问低俗不良信息 阻断 针对访问不良信息的行为采用封堵或屏蔽技术，屏蔽不良信息 干扰 干扰用户的访问低俗信息的行为，即将用户的请求按比例丢弃，降低其业务质量 统计分析功能－统计分析报告 统计互联网访问行为 可统计网内所有IP的全部互联网访问行为 报告定制功能 可订制多种不同形式的报告 访问IP 所访问站点（以URL形式显示） 类别（以色情、低俗等形式显示） 灵活的数据统计功能 按照时间（日期范围、每天、周、月） 屏蔽量（页面、对象访问数量等） 输出展现形式(文本、表格、图表等 统计分析功能－网络热点实时监测 基于千万网民样本实时分析敏感词动态，10秒内发现趋势热点，可辅助人工监测 开放的平台－可灵活实现与第三方系统对接 层次化、模块化设计，各组件可灵活组合 对外开放标准的接口 可定制第三方系统接口 专业硬件设备 链路旁路分光，支持GE / 10GE / 2.5GPOS / 10GPOS /40GPOS。 部署位置灵活，可位于GGSN后、省骨干/城域出口或IDC出口，支持分光、镜像。 同类产品功能对比 SmartEye 其他 中文分词 有 有 关键字比对 有 有 全文语意分析 有 无 图片样本比对 有 有 图片样本库 有 有 图片DNA比对 有 无 图片快速比对 有 无 系统自我学习 有 无 可扩展性 是 否 集群支持 有 无 支持千兆链路 有 有 支持万兆链路 有 无 典型应用 SmartEye系统通过采用实时在线旁路监测的方式对网络中传播的涉及黄赌毒的文字、图片等不良信息进行监测，并且可以根据预置策略对不良信息进行拦截和封堵。 IDC机房 WAP网关中心 短信中心、彩信中心 部署方案－IDC 访问请求 访问请求 访问请求 访问请求 用户 用户 用户 用户 分光 网站 网站 核心交换机 接入交换机 电信运营商IDC SmartEye 采集设备 处理引擎 部署方案－WAP