DJ数据处理与数据库ssm分析.pptx

大学计算机;;;; 6.1 数据与数据处理 6.2 多媒体数据处理 6.3 数据库技术基础 6.4 结构化查询语言简介 6.5 数据仓库与数据挖掘 6.6 万维网数据库技术;结构化数据: 即行数据,一般存储在数据库,可以用二维表结构来逻辑表达实现的数据。如:所有关系数据库中的数据均为结构化数据。 非结构化数据: 不便于用数据库二维逻辑表来表现的。如:各种格式的办公文档、文本、图片、各类图像和音频/视频信息等。 半结构化数据: 用来统称介于上述二者之间的数据。如:HTML文档就属于半结构化数据，数据的结构和内容混在一起，没有明显的区分; “大数据”带来的“冲击”;大数据的特点 ;大数据的价值 对大数据价值挖掘利用的研究趋势分布的预测 ; 6.1 数据与数据处理;数据中心是一整套复杂的设施，不仅仅包括计算机系统和其它与之配套的设备（如:通信和存储系统），还包含冗余的数据通信连接、环境控制设备、监控设备以及各种安全装置。 ——维基百科;数据中心的“能量” 北京市交通运行监测调度中心，每日新增30GB 国家气象信息中心，每日新增数百TB 百度数据中心，每日新增10TB，处理100PB 智能电网数据中心，以国网信通在北京五个小区为例。共有 353个采集点，日采集1.2万个参数，包括频率、电压、电流等， 15分钟采集一次，一天就能产生34GB。;数据中心发展趋势 亚太地区已经成为全球数据中心市场增速最快的地区，尤其以中国和印度市场最为突出。众多国际巨头，如Google，Apple，Facebook纷纷计划在亚太地区筹建新的数据中心。 2012年全球数据中心规模达到255.2亿美元，增速为14.6%，整体态势已趋于放缓。 我国数据中心规模增速比较明显，但能耗问题也日益突出。截止2014年初，全国规划建设大型数据中心超过200个，服务器总数超过700万台。;数据空间（Data Space） 数据空间就是一个实体所拥有的所有数据的集合，包含与某个组织或个体相关的一切信息。 实际上是指主体数据空间，数据空间中的所有数据对于主体来说都是可以控制的。 数据空间也是一种不同于传统数据管理的新的数据管理理念，是一种面向主体的数据管理技术。 ;数据空间作为一种新型数据管理技术，面临着诸多挑战: 完备的数学模型是数据管理技术的基础 数据空间的个性化和多样性问题 数据空间需要什么样的管理系统，是像传统的关系数据库那样以集中的、庞大的系统软件形式呈现出来,还是以服务的方式分布在不同的机构和位置，这就涉及数据空间系统架构 其它问题：数据清洗和数据质量问题、数据空间不确定性问题; 6.1 数据与数据处理 6.2 多媒体数据处理 6.3 数据库技术基础 6.4 结构化查询语言简介 6.5 数据仓库与数据挖掘 6.6 万维网数据库技术;位图和矢量图 位图，是由数字阵列信息组成，阵列中的各个数字来描述构成图像的各个点（称为像素）的强度与颜色信息。 矢量图，又称为图形或向量图。一般是指用计算机绘制的画面，是一组描述点、线、面等图形的大小、形状及位置、维数的指令集合。;位图图像;位图图像;每个方格为一个像素。将方格变小，则图像的分辨率增加。（上图分辨率20×15） 上述方法处理的图片黑白分明，没有层次，如果用1个字节对应1个像素，则从黑到白分为256级。; 图像的颜色 灰度图像 2的8次方=256种黑白变化色; 图像的颜色 彩色图像 颜色深度（位数） 可以是：8bit, 16bit, 24bit, 32bit, 48bit,……. 采用RGB彩色空间（R,G,B） 一般写成（0~255，0~255，0~255）; 6.2 多媒体数据处理;3个8位无符号整数为24bit，可以产颜色，而人眼只能识别1000万种颜色； 超过24bit的颜色称为真彩色。 计算图像大小 照片:2592×3888×24=？bit 数据太大了，怎么办？ ;矢量图形 矢量图形在每次显示时，都需要根据算法指令重新计算生成。 line（x1,y1,x2,y2,color） circle（x,y,r,color） 图形的显示过程是按照图元的顺序进行的； 图像的显示过程是按照位图图像中所安排的像素顺序进行，与图像内容无关。 ;图形与图像的关系 形成图形的过程称为矢量化，矢量化有利于对图形的各个部分实施控制，可以方便地对图形进行移动、缩放、叠加和扭曲等变幻与修改，可以任意放大而不失真，而位图放大到一定程度后，则会出现“马赛克”现象，或者边缘产生“锯齿”。 ;图形与图像的关系 图形实际上是图像的抽象，这种抽象会丢失原始图像的“细节”信息，从而导致不如图像显示那