大数据思维下建立例外事项小数据库思考.docVIP

大数据思维下建立例外事项小数据库思考 　　摘 要 大数据是互联网信息时代的发展趋势，小数据是大数据的基础，二者相辅相成，相得益彰。本文通过探讨大数据与小数据之间的关系，建立内控测试例外事项数据库的目的与意义，简述用大数据思维建立例外事项Excel小数据库的程序和方法，以及数据库的使用方式。 　　关键词 大数据 数据库 建设程序 　　大数据思?S是目前企业关注和热议的话题，正在影响或改变传统的企业模式。运用大数据新型技术从海量的数据库中提取可用数据，通过对结构性和非结构性数据进行全面、关联和快速分析，精准预测未来发展趋势，已成为互联网信息时代的共识和不争的事实。大数据的运行，离不开数据资源的支持，没有各类数据库资源的汇集，大数据就无数据来源。因此，在大数据思维下建立相应的小数据库，不仅是大数据有效运行的基础，更是应用大数据新型技术的保障。 　　一、对数据、信息和数据库的理解 　　百度百科和360百科均把数据（data）解释为，数据是对客观事物存在事实或观察的结果和逻辑归纳，是表示客观事物未被加工和处理、原汁原味的原始素材。数据是计算机信息技术的术语，是信息的表现形式和载体，可以是符号、文字、数字、语音、图像、视频等。信息是数据的内涵，数据是信息的表达。数据本身并无意义，只有对实体行为产生影响时才成为信息，数据和信息不可分离。① 　　笔者认为，数据是对各类事物诞生、发展和消亡等各个时序节点全过程运行轨迹，用各种各样能被人和机器等认识、甄别和记忆，用不同的语言文字、影像图形、符号标识等进行描述汇总和统计分析的一维或多维记录。单个记录的汇集可以形成一组或一个纬度，多个纬度的聚集便可形成一个库。记录数量按照“积水成渊、积土成山”规则，即可形成大、中、小等不同层级的库。由于记录的是各种类型的信息，通常这些信息又被称为数据，所以这些信息数据记录形成的库就被称为数据库。 　　不言而喻，数据量小的是小数据库，数据量大的是大数据库（介于中间的是中控数据库）。单个或多个小数据库的汇集可以形成大数据库。由此可知，小数据库是大数据库的基础，大数据库是小数据库的集合，没有小数据库就形成不了大数据库，没有小数据就形成不了大数据。 　　二、大数据与小数据之间的关系 　　网络技术的不断进步和信息载体飞速发展，为大数据的崛起提供了机遇和平台。数据库是按照一定的数据结构，集成、记录、存储和管理数据资源的仓库，结构性和非结构性信息层级分明，使用方便、操作简单。 　　（一）大数据和小数据之间存在层级关系 　　数据库可以分为三个层级：第一层级是集团层面，处于数据库的顶层；第二层级是地区公司层面，处于数据库的中层；第三层级是地区公司所属层面，处于数据库的底层。大数据是小数据的集合，集团层面可视同为大数据。小数据是业内不同部门各相关数据的集成，地区公司所属层面可视同为小数据。小数据是大数据的基础和来源，没有小数据就没有大数据；大数据是小数据的汇集，没有大数据，小数据就没有价值取向，二者相辅相成，相得益彰。 　　（二）大数据和小数据之间的数据取值不对称 　　大数据的数据来源于小数据，而小数据是各行业部门投入大量的人、财、物资源，把长期积累的各类资源转换成数据资源的结果，是企业内部劳动成果和辛勤付出的平台和血汗，一般只限制在有权限的内部使用，不会轻易外传。由于受考核指标的影响，不同层级的单位上报数据时，在考虑和权衡自身利弊的情况下，基本都会对关键指标进行加工和处理，对下真实可靠，对上却受到怀疑。这种背景下的大数据，因其数据取值不对称，就具有了一定的欺骗性。 　　（三）大数据和小数据的数据使用都有权限限制 　　大数据背景下，业内数据属于内部资料，一般不会对外开放。业外人员要想获得相应的数据，必须经过逐级审批，且有限制权限。比如，人事、财务、合同、采购和审计等部门的非内部人员想获取相关数据，如同非内部人员想查看淘宝、微信、银行或医院等相关数据一样，一般只能在对外开放的平台上查看对外披露的数据，但这些数据都经过了加工和处理。要想收集到最原始的数据进行数据分析和预测，必须有相应的权限，并且经过允许。由此可知，大数据只是供内部有权限人员使用的平台，外部想实现数据挖掘、采集、筛选和运算，用大数据分析和预测，基本无能为力。 　　三、建立内控测试例外事项数据库的目的与意义 　　在大数据背景下，集团公司作为国有大型企业，已经建立了一系列的数据体系。由于受使用权限等影响，人事、财务、合同、采购和审计等部门的非内部专业人员一般无法获取相应的数据资料。建立业内小型数据库，能够扩大非内部专业人员的使用范围，为非专业人员提供一个通畅的查询平台。由于各业务之间存在一定的瓶颈，加上内部之间互相涉密，系统间使用的框架、平台和接口不统一，限制了大数据分析者运用大数据算法进行挖掘