2015年审计研究报告.docVIP

审计研究报告 第期 审计署审计科研所 2013年11月19日 国家审计领域大数据技术应用 及其影响展望 大数据的多元异构、跨领域关联基本特征 国家审计领域大数据技术应用展望 大数据技术给国家审计带来的积极影响展望 政策建议 国家审计领域大数据技术应用 及其影响展望 审计署审计科研所 隋学深 大数据产生于新一代信息技术相互融合创新之时，是信息技术中具有颠覆性的技术变革。大数据技术将对未来国家审计信息化进程产生重要影响，将会给国家审计领域带来一场深刻变革。 一、大数据的多元异构、跨领域关联基本特征 “大数据”的特征可以归纳为4个V：容量（volume），数据规模很大，比传统存储和分析解决方案所管理的数据大几个数量级的巨型数据集。大数据中的数据不再以GB、TB为单位来衡量，而是以PB、EB、ZB为计量单位；多样性（variety），以电子邮件、社交媒体、视频、图像、博客、传感器数据以及“影子数据”（如访问日志和web搜索历史记录）等不同格式生成的异构、复杂和多样化的数据；生成速度（velocity），数据是高速产生并高速计算处理的，数据是生成为一个可实时查询的连续数据流，可根据需求提供有用信息，而不是批量生成；价值（value），能够从基于机器学习、统计模型以及图算法的深入、复杂的数据分析中获取可对未来趋势和模式提供预测性分析的重要洞察力。这些预测性分析要胜过传统商业智能查询和报告的结果。数据本身具有潜在价值，且价值比较分散。 我们认为，大数据是基于多元异构、跨领域关联的海量数据分析所产生的决策流程、商业模式、科学范式、生活方式和观念形态上的颠覆性变化的总和，这是在“4V”特征基础上，对大数据特征更为全面和精炼的概括。在大数据发展的高级阶段，学术团体、企业和政府将通过大量异质数据和数据产品产生科学、社会、经济等方面的新价值，这将带来质变效果[1]。 二、国家审计领域大数据技术应用展望 任何行业或企业推行大数据化过程中，数据、技术和分析应用都是三个重要的要素，我们分别从这三个要素出发来分析国家审计大数据化变革的路径。 从数据来源看，国家审计大数据应该是以审计对象为主题跨领域的全数据模式。国家审计的大数据构成不应仅局限于被审计单位信息系统提供的数据资源，还应运用自动化传感器、自动记录设施，环境监测、交通监测、生产监测、安防监测等前端设备，对需要关注的被审计对象的相关信息进行主动采集，全程记录需关注的有价值信息。不应仅仅局限于被审计单位的内部数据信息，还应包括与其相关的所有外部数据，如来自互联网运营商、电信运营商、政府、银行、商场、交通枢纽等机构的数据。 从数据结构来看，国家审计大数据应该是多元异构、保持数据原始特征、具有较强混杂性的数据。传统的数据主要是数据库类结构化的信息，而大数据包含了非结构化、半结构化和结构化等数据形式。有些半结构化、非结构化原始数据不能确保是完整的、清洗过和没有错误的，从而具有相当程度的混杂性，但这些看似杂乱无章的原始数据信息中常常隐含着最宝贵、最有价值的原始信息，传统的数据清洗和预处理过程往往将这些宝贵的信息内容过滤掉了。 云存储是向用户提供以互联网为基础的在线存储服务。用户无需考虑存储容量、存储设备类型、数据存储位置以及数据的可用性、可靠性和安全性等繁琐的底层技术细节，只要根据需要付费，就可以从云存储服务提供商那里获得近乎无限大的存储空间和企业级的服务质量。从目前典型的云存储系统来看，云存储系统由位于互联网上的大量存储资源以及将这些存储资源组织为可供用户透明访问的资源池的一整套资源管理与访问控制技术所组成[2]。 云存储技术在审计中应用，将避免一线审计人员自己携带服务器，搭建数据存储环境的情况，同时也应该增强审计云存储环境的服务能力，使得数据类型转换等审计现场遇到的问题，都能由审计云存储系统来完成，一线审计人员只需上传审计分析数据，就可以通过云计算技术利用相应软件、模型实现对数据的查询和分析，云存储是云计算系统的重要组成部分。 云计算技术实现了通过网络给用户提供所需的计算能力、存储能力、软件和信息服务等。云计算技术可以使审计人员能够有效利用审计数据私有云拥有的大规模数据和超级计算机集群建立的庞大运算系统，并且能够通过互联网取得需要的各种审计软件和服务。可以免去审计人员在审计现场搭建审计数据分析环境的任务，并且可以通过“聚集供应”模式对所有审计软件、相关数据进行整合、集成，从而打破审计数据分析的空间约束，有效克服系统、数据类型和软件间的不兼容，真正实现审计技术的信息化和网络化[3]。 大数据技术应用的价值并不仅在于拥有超大规模的数据资源，其更大的价值是能通过对大数据的分析，挖掘出大数据中隐藏的具有重大价值的信息，我们可以把大数据比喻成拥有着巨大价值的宝藏，大数