数据库原理与设计：大数据与数据库.pptxVIP

大数据与智慧城市什么是大数据？什么是大数据？具有4V特性的数据：Volume(巨大的数据量):Variety(数据类型多):文本/图片/视频 等非结构化/半结构化数据Velocity(处理速度快):要求系统在短时间内做出反应Value(价值密度低):单条数据无价值,无用数据多,综合价值大 非结构化数据相对于结构化数据而言,不方便用数据库二维逻辑表来表现的数据即称为非结构化数据,包括所有格式的办公文档、文本、图片、XML、HTML、各类报表、图像和音频/视频信息等等。大数据的例子2003年，奥伦·埃齐奥尼（Oren Etzioni）准备乘坐从西雅图到洛杉矶的飞机去参加弟弟的婚礼……..但奥伦·埃齐奥尼是美国最有名的计算机专家之一， 运用10万亿条飞行数据记录开发了预测飞机票价格的Farecast的系统，平均节省50美元/张。2008年微软公司以1.1亿美元的价格收购了FareCast公司。大数据的例子甲型H1N1流感结合了导致禽流感和猪流感的病毒的特点，在短短几周之内迅速传播开来。官方预测有一两周的延迟，滞后两周的后果将是致命的。谷歌公司为了测试这些检索词条，总共处理了4.5亿个不同的数字模型。在将得出的预测与2007年、2008年美国疾控中心记录的实际流感病例进行对比后，谷歌公司发现，他们的软件发现了45条检索词条的组合，一旦将它们用于一个数学模型，他们的预测与官方数据的相关性高达97%，关键是实时的。大数据的产生目前世界上90%以上的数据是最近几年才产生的。 自2000年斯隆数字巡天开始工作，它位于墨西哥的望远镜前几周收集到的数据就远远超过了天文史上所获得的数据总和。 预计2016年在智利投入使用的大型视场全景巡天望远镜（Large Synoptic survey Telescope）能在五天内就获得同样多的信息。大数据的产生中国贵州在建世界最大的射电望远镜— 500米口径球面射电望远镜，建成后反射面的大小相当于30个足球场，与以往数据处理的区别?作为特指的大数据，其中的“大”是指大型数据集，一般在10TB规模左右；多用户把多个数据集放在一起，形成P B级的数据量；同时这些数据来自多种数据源，以实时、迭代的方式来实现。1KiB(Kilobyte)=1024B?,210, ,千字节1MiB(Megabyte)=1024KiB, 220,兆字节1GiB(Gigabyte)=1024MiB, 230,吉字节1TiB(Terabyte)=1024GiB, 240,太字节1PiB(Petabyte)=1024TiB, 250,拍字节1EiB(Exabyte)=1024PiB, 260,艾字节1ZiB(Zettabyte)=1024EiB, 270,泽字节1YiB(Yottabyte)=1024ZiB, 280,尧字节与以往数据处理的区别?数据增加对精确性的要求降低，有时：2+2=3.9有什么不可以？数学家无法测量一片树叶的周长？成绩90分一定比89分优秀吗？身高175cm、年龄22岁精确吗？与以往数据处理的区别?重点关注“是什么？”然后是“为什么？”重点关注“相互关联性”然后是“时间上的因果关系”与以往数据处理的区别?过去由于技术能力的限制，只好用抽样的方式进行统计分析但是抽样可能导致巨大的误差，所以必须想办法用随机的方式选取抽样的对象但是「完美的随机抽样」是非常难做到的所以过去的「抽样」虽是捷径，但是难以继续延伸扩展，只能供最初的目的使用，无法用新的观点加以分析 例子：中国人大代表选举？与以往数据处理的区别?5%的数据适用于传统数据库85%的数据来源于传感器的自动输入。以人的生命数据为例说明传感器与大数据传感器与大数据被测量类别被? 测? 量热工量 温度、热量、比热；压力、压差、真空度；流量、流速、风速机械量 位移（线位移、角位移），尺寸、形状；力、力矩、应力；重量、质量；转速、线速度；振动幅度、频率、加速度、噪声被测量类别被? 测? 量物性和成分量 气体化学成分、液体化学成分；酸碱度（PH值）、盐度、浓度、粘度；密度、比重状态量 颜色、透明度、磨损量、材料内部裂缝或缺陷、气体泄漏、表面质量 传感器与大数据位移结石的位置、皮肤厚度、皮下脂肪厚度、心脏位移、心室尺寸等振动心音、声音、呼吸音、血管音、震颤、等力血压、心肌力、眼球内压、胃内压、肌收缩力、咬合力、血压、眼压、心内压、颅内压、胃内压等流量血流量、呼吸气体流量、出血量、尿流量等温度皮肤温度、直肠温度、呼吸温度、血液温度、中耳内部温度等化学成分02、CO2、CO、H2O、NH3、Na＋、K＋……生物成分蛋白质、细菌、病毒等放射线X射线、同位素剂量等生物电心电、脑电、肌电、眼电、胃电、神经电、离子通道电等与以往数据处理的区别?过去人访问数据库，将来可能根据用户的意图主动推送；问题1