关于数据的思维d资料讲解.ppt

* 5.4 挖掘数据的潜在价值——数据仓库 销售 数据库 产品 数据库 订单 数据库 库存 数据库 财务 数据库 物料 数据库 人力资源 数据库 A部门员工： 我想录入订单数据… B部门主管： 我想查询库存数据… C部门主管： 我想汇总本月销售清单… CEO： 我想改进企业管理… BPR！ CEO的需求是抽象的、综合的、非事务性的…… * 5.4 挖掘数据的潜在价值——数据仓库 OLTP：联机事务处理，OLAP：联机分析处理。 数据仓库 （Data Warehouse） 事务处理数据环境 信息分析数据环境 抽取、转换和清洗 知识 事务处理 策略 数据挖掘 事务处理 OLTP！ OLAP！ 客户数据库 库存数据库 销售数据库 物料数据库 转化 * 5.5洞察未来——大数据 * （用电脑、平台电脑、手机等）在互联网上发布的信息（新闻，博客，微博等） 接入互联网的数码传感器（位置、运动、震动、温度、湿度、污染等信息） 遍布互联网络的摄像头 …… 大数据从何而来？ 5.5洞察未来——大数据 * 第一，大量化。2011年达1.8ZB 第二，多样化。来源多样，数据类型多样 第三，价值密度低。沙里淘金，技术活 第四，快速化。信息产生快，处理快 大数据有何特点？ 5.5洞察未来——大数据 * 1 公共服务：职业人群划分，生活和工作习惯统计，健康状况统计→提出改进建议 2 犯罪预防：地理区域划分，犯罪密度统计，犯罪类型统计 3 个人行为追踪：锁定目标，从空间和时间上搜索目标相关信息 4 商业领域：内容推荐，市场分析…… 5 其他领域，太多了…… 大数据能干什么？ 5.5洞察未来——大数据 * 大量数据如何存放？2020年数据量将达35ZB,刻成9GB一张的光盘，高度相当于地球到月亮之间往返3次 数据如何快速分析处理？用云计算？ 隐私如何保证？安全如何保证？ ……………… 大数据的技术挑战？ 5.5洞察未来——大数据 * 大数据真实地记录了每时每刻世界上的客观存在。 1、开启一扇窗：分析过去、洞察未来，颠覆因果推理。 2、开创新的产业模式：原料是大数据，加工手段是各种新兴的数据处理技术，产品是知识 3、新的起跑线：抓住它就是抓住了一次前所未有的机遇！ 大数据的战略意义？ 5.5洞察未来——大数据 * 第一讲 计算思维 第二讲 问题求解 第三讲 算法类问题中的思维 第四讲 系统类问题中的思维 第五讲 关于数据的思维 课程总结 希望大家通过本课程能够开启思维之泉，感受计算机科学的内在之美，提高思维能力、扩展思维宽度，与计算机心连“芯”,奔向人类美好的明天! * 谢谢大家! 人有了知识，就会具备各种分析能力， 明辨是非的能力。 所以我们要勤恳读书，广泛阅读， 古人说“书中自有黄金屋。 ”通过阅读科技书籍，我们能丰富知识， 培养逻辑思维能力； 通过阅读文学作品，我们能提高文学鉴赏水平， 培养文学情趣； 通过阅读报刊，我们能增长见识，扩大自己的知识面。 有许多书籍还能培养我们的道德情操， 给我们巨大的精神力量， 鼓舞我们前进。 * 一、人工管理阶段:特点数据的管理者：人数据面向的对象：某一应用程序数据的共享程度：无共享,冗余度极大数据的独立性：不独立，完全依赖于程序数据的结构化：无结构数据控制能力：应用程序自己控制二、文件系统阶段:特点数据的管理者：文件系统数据面向的对象：某一应用程序数据的共享程度：共享性差,冗余度大数据的独立性：独立性差数据的结构化：记录内有结构，整体无结构数据控制能力：应用程序自己控制三、数据库系统阶段:特点数据的管理者：数据库管理系统数据面向的对象：整个应用系统数据的共享程度：共享性高，冗余度小数据的独立性：具有高度的物理独立性和逻辑独立性数据的结构化：整体结构化，用数据模型描述数据控制能力：由数据库管理系统提供数据安全性、完整性、并发控制和恢复能力 * 以一定的组织方式存储在一起的、能为多个用户所共享的、与应用彼此独立的、相互关联的数据集合。 * 1.数据定义：DBMS提供数据定义语言DDL（Data Definition Language），供用户定义数据库的三级模式结构、两级映像以及完整性约束和保密限制等约束。DDL主要用于建立、修改数据库的库结构。DDL所描述的库结构仅仅给出了数据库的框架，数据库的框架信息被存放在数据字典（Data Dictionary）中。 2.数据操作：DBMS提供数据操作语言DML（Data Manipulation Language），供用户实现对数据的追加、删除、更新、查询等操作。 3.数据库的运行管理：数据库的运行管理功能是DBMS的运行控制、管理功能，包括多用户环境下的并发控制、安全性检查和存取限制控制、完整性检查和执