至察盾大数据分析解决方案.pdfVIP

至察盾大数据分析解决方案 2016/07/ 18 一、基本理念 即使是在Alpha Go 已经能够战胜世界顶级棋手的今天，我们仍然清晰的意识到计算 机智能和人类智能之间的根本差别：一方面，计算机对规则的推理能力远不及人类但可 以为人类的归纳推理提供辅助；另一方面，计算机按照既定规则执行操作的效率已经远 远超过人类自身。运用先进的人工智能技术，对和信息安全相关的错综复杂的大数据进 行分析，对构建全新信息安全基础设施具有开创性的意义；同时，这一工作所产生的方 法和工具也可以扩展应用于拥有大数据的其它领域。 基于这一认识，我们以人工智能为武器，面向大数据分析，开发了强大的“至察盾”引 擎，构建了利用计算机智能辅助推理、高效执行规则的一组工具。 二、大数据的基本特征和挑战 所谓“大数据”，是指涉及数据资料量规模巨大到超过人工或计算机的常规处理能力而 难以在一定时间内管理、处置并表达为人类可解读的形式的信息。大数据具有四个维度 的特征： • 数据量（Volume ）：大数据的“大”不单是指数据的绝对容量，还特指数据不做抽 样，即观察和追踪数据的全部变化； • 变化度（Velocity ）：大数据反映实时的行为； • 复杂度（Variety ）：大数据通常包含多种形式的数据，文字、图像、语音、视频以 及通过数据融合所构造的缺失片段； • 真伪参杂（Veracity ）：获取的数据的质量可疑，对精确分析构成挑战。 大数据还常常是网络空间的交互所造成的产物，即所谓的“数字足迹（digital footprint ）” ；大数据分析几乎不可避免要采用机器学习的方法，即机器无需认识原因而 能够自动构造和追踪模式。 相比传统的局部、孤立和相对小型数据集合的分析技术，大数据分析能够发现海量 数据内部的隐藏和深度关联信息，因此在觉察商业趋势、研判疾病和灾害风险、维护公 共安全和打击犯罪等众多领域，正在起到传统数据分析工具所无法企及的作用。 1 电话：010-8231-9123 地址：北京市海淀区学院路35 号世宁大厦301 邮箱：sales@zshield.net 邮编：100191 志翔科技通过设计开发大数据分析引擎的实践过程，总结出两个重要的基本原则： 1. 数据分析的目标要明确 由于上述四个维度的特征，大数据的内容十分庞杂，同样一组数据可以从不同的 多个角度去分析，每个角度都可能导致巨大的计算量，因此必须紧密围绕业务的需 求，确立直接针对应用的分析目标。这一方面要求对使用者的业务类型、流程、需要 有清晰的理解，还要求大数据分析的产品要么针对特定行业特定需求，要么是可以用 于定制上层应用的一组引擎。我们开发的“至察盾”则具有后者的特点。 2. 综合运用人机智能的思路要清晰 以机器学习、统计推理、非线性系统辨识为核心的人工智能技术是大数据分析的 基石。我们充分意识到计算机在处理既定规则方面超越人类的效率和在构建规则的推 理方面弱于人类的特点，确立了“借助计算机辅助推理，依赖计算机执行规则” 的设计 思路，自主研发、灵活配置上述基础科学工具，分别构建建模和规则引擎，最大限度 发挥计算机智能高效排查和匹配规则的潜力，简化人工干预的工作量和工作强度。 三、至察盾：志翔科技的大数据解决方案功能部署 1. 志翔科技的概要 北京志翔科技股份有限公司由多位安全领域的业界精英共同创办，是国内首家基于 “观”、“察”、“行”等大数据技术，专注于网络空间数据安全与大数据业务风险管控的高科 技公司。公司拥有完全的自主知识产权，产品国际领先而且全部国产化。志翔科技总部 位于北京中关村，在北京和南京设有研发中心。志翔科技坚持自主创新，建立民族品 牌，公司核心团队成员大部分毕业于清华大学，包括多名硕士和博士。 2. 以至察盾为中心的大数据解决方案体系结构 志翔科技所开发的“至察盾”大数据挖掘分析系统，其设计初衷是作为系统安全的一个 解决方案，对应于处理无边界安全防护环境中通过安全探针所抓取的海量安全事件数 据。同时，由于处理大数据的主要单元模块：大数据清洗引擎、自动建模引擎、规则引 擎和可视化引擎，具有一定的通用性，也可以用于支撑具有大数据特征的并非系统安全 2 电话：010-8231-9123 地址：北京市海淀区学院路35 号世宁大厦301