大数据金融（上篇，共上中下3篇）.pptxVIP

DASHUJUJINRONG大数据金融主编：王子晗曾薇

第一章大数据时代1大数据产生和发展的背景2大数据概念的界定3大数据时代的变革和大数据应用4大数据技术5大数据思维了解时代的变化趋势。了解大数据产生和发展的背景。了解大数据的概念、特征与价值。掌握大数据的来源与数据处理方法。了解时代的变革包含的领域和应用。学习目标

1大数据产生和发展的背景

第一节大数据产生和发展的背景一、技术进步(一)信息基础设施完善(二)互联网的发展(三)云计算技术的进步(四)物联网以及智能终端的普及(五)区块链技术的发展

第一节大数据产生和发展的背景一、技术进步(一)信息基础设施完善自1977年光纤通信投入以来,光纤带宽迅猛增长,信息传输能力大幅跃升。这为信息的大规模存储、传输与分析奠定了物质基础。(二)互联网的发展20世纪80年代,美国大力发展信息产业。自20世纪90年代起,美国迅速抓住计算机产业的机遇,掀起互联网信息时代的开端。过去20年里,互联网加速全球信息化改造,各行业企业深挖红利,迅速拓展用户数量带动市场高速增长,为世界的数字化发展积累了丰厚的数据基础。(三)云计算技术的进步云计算是分布式计算的一种,也叫作网格计算。基于虚拟化等技术,信息存储与计算可以通过网络共享的软硬件与多终端应用设备按需供给。现阶段的云服务已不单单是一个分布式计算系统,是由分布式运算、效用设计、负载均衡、并联运算、网络存储、热备份冗杂以及虚拟现实化等计算机技术混合发展和跃升后的产物。

第一节大数据产生和发展的背景一、技术进步(四)物联网以及智能终端的普及物联网即“万物相连的互联网”,是在互联网基础上延伸和扩展的网络,即将各种信息传感设备都和互联网融合在一起所构成的一种大互联网,可以实现在任何时间、任何地点,人、机、物之间的互联互通。基于传感器技术的物联网,能持续集中收集海量信息,是大数据的重要来源之一。(五)区块链技术的发展区块链,是由一个又一个区块所构成的链,在每一条区块中存储着相应的信息,并根据各自所产生的时间序列连接而成链。这个链条被保存在所有的服务器中,只要整个系统中有一台服务器可以工作,整条区块链就是安全的。这种服务器设备在区块链体系中也被叫作节点,主要提供信息存储和计算力支撑。

第一节大数据产生和发展的背景一、技术进步数字经济时代的“算力”,其技术基础由大数据、云计算、人工智能、区块链等数字化技术综合形成,主要包含五个方面:01计算速度,芯片、服务器、计算机、超算系统都体现这方面的技术实力;02从海量数据中挖掘有价值信息的能力,涉及各种算法、统计方法、模型等;03数据存储量,这取决于所有硬件设备数量与性能;04通信能力,包括5G基站数量、数据通信的速率、延滞、宽带、安全性、功耗等;05云计算服务能力,包括所有数据中心服务器设备的数量等。

第一节大数据产生和发展的背景二、时代发展、产业升级数字经济以数字化知识和信息为关键生产要素、以现代信息网络为重要载体、以通信技术的高效使用,为社会效益提高和国民经济结构优化带来巨大推动力。数字经济是以新型数字技术和产品为依托,继农业经济、工业经济之后的新经济形态,其包括三个层次:提供核心动能的信息技术及其装备产业深度信息化的各行各业应用跨行业数据融合应用的数据增值运用二、时代发展、产业升级萌芽期(1980—2008年）成长期(2009—2012年)爆发期(2013—2015年)大规模应用期(2016年至今以及以后)

第一节大数据产生和发展的背景四、未来发展基础背景随着大数据作为战略技术的重要性越来越突出,人们越来越深刻地认识到制约大数据发展最大的短板之一就是:数据治理体系尚未建立。大数据时代未来的真正到来,依赖于数字经济的发展与数字基础设施建设、数字产业与技术创新能力建设、数字法治建设、数字服务发展、数字生态建设等形成良性循环。依赖于上述数字环境的支撑,构建标准化、规范化的数字生态圈,也能促进数字环境的改进和数字化公共产品的发展,满足大数据时代客户对高效、低成本、方便、快捷、多模块、灵活、互动、智能、自动、安全的数字化体验需求。

2大数据概念的界定

第二节大数据概念的界定一、大数据的概念麦肯锡全球研究院发布的报告中提出:大数据是指其大小超出了典型的数据库采集、存储、管理和分析能力的数据集。互联网数据中心(IDC)提出:大数据是为更经济地从高频变化的、大容量的、不同结构和类型的数据中获取价值而设计的新一代架构与技术。大数据是指所涉及的资料数据量规模巨大到无法通过常规软件与传统主流数据处理技术,在合理的时间内获取与处理的,海量、高速增长、结构多样、时效强的信息资产;也是指需要新处理模式才能具有更强决策力、洞察力和运营优化能力的,各类统计建模、算法、人工智能等大数据分析处理技术与方法。

第二节大数据概