农业大数据术前沿与应用.pptx

农业大数据技术前沿与应用内 容一、大数据概念二、大数据的关键技术三、大数据技术在农业中的应用四、面临的问题和调整一、农业进入大数据时代 “大数据”,主要是来描述和定义信息爆炸时代产生的海量数据，并命名与之相关的技术发展与创新。互联网行业是大数据应用的领跑者，目前，大数据正在加速向农业领域拓展。基础架构主要应用关键分析开源的项目农业的新变化 随着传感器、智能移动设备、互联网等的发展，数据呈现爆炸式增长。数据无处不在数据无时不有数据无物不生数据无人不感地域性季节性多样性周期性农 业农业大数据（Big data）是指在现代农业生产、经营、管理等各种活动中形成的，具有潜在价值的、海量的、活的数据。是现代农业建设、发展、管理的“基准线”。农业进入大数据时代目前，中国每年产生并被存储的数据总量超过800EB（1018字节），相当于全人类讲过的话160倍。KB（103字节） ? MB (兆，106字节)? GB (吉，109KB ）? TB (太，1012字节) ? PB (拍，1015字节) ? EB (艾，1018字节)? ZB (泽，1021字节) 农业每年产生的数据量约为8000PB （1015字节）农业自然资源数据3500PB农业生产数据2500PB农业管理数据1200PB农业市场数据800PB农业数据每年将以50%-80%的速度增长气象数据资源环境数据农业统计数据生物信息数据 生长监测数据（数据来源：ZDNET《数据中心2013：硬件重构与软件定义》年度技术报告）1.农业大数据的类型（1）气象数据全球气候观测系统（Global Climate Observing System）2012年每天新增超过250GB，政府间气候变化专门委员会（IPCC）第四次评估报告中采用了超过了29,000个观测资料序列，第五次报告中使用的数据量达到了2.3PB。（2）生物信息数据1984年，由NIH创办的基因数据库（GenBank）；截止2011年4月，在传统数据存储区，共有1.35亿条序列记录，包含1265亿个碱基对；在WGS（Whole Genome Shotgun）分区内包含1914亿个碱基对，6272万个基因组序列。全部数据若是装订成册，将载满700多辆卡车。（3）资源环境数据对地观测（遥感）技术农业资源研究提供空间数据，而且，遥感监测一直向高时空分辨率、高光谱、多频段方向发展，数据生产能力越来越强；美国NASA和USGS研究生产的包括GLS1975、1990、2000、2005和2005（EO-1）五个子集的一套Landsat卫星影像，总数据量超过5TB；（4）作物生长监测数据土壤水分监测-5个指标实时监测仪器、设备全天候监测，随着设备种类的增长、价格的降低，监测点将成指数级增长，所产生的数据，将快速增长。仪器监测每10分钟采集1次数据（60多个指标*5万次/年）+市场监测数据+统计监测数据+视频监测数据 ?15G/年视频监测生长监测-16个指标气象监测-24个指标土壤养分监测-15个指标（5）农业统计数据农业部统计报表 农业综合调查制度农村经营管理情况统计报表制度全国乡镇企业统计报表制度 农业资源环境信息统计报表制度全国土壤肥料专业统计报表全国植保专业统计报表农业机械化管理统计报表制度种子管理机构报表种子企业报表……953个品种，全国1000家市场，每日价格等11个指标的信息，每天超过1000万个数据……农业大数据思维大数据最大的作用在于给人们带来了思维上的转变万物皆比特，一切皆数据!数据文化：尊重事实、强调精准推崇理性 数据制度：数据立法、用数机制尚数环境 数据治理：事前管理、科学决策数据创新 资源配置：精准化、智能化、高效化二、前沿技术 农业大数据的发展对传统的数据处理技术体系提出了巨大的挑战，需要我们在数据采集、数据标准、数据处理、数据分析、数据展现等方面做全新的技术升级。1.数据精准获取技术可穿戴式的信息获取技术可植入、可嵌入式数据获取技术微型移动信息获取技术生物传感、微纳米传感器、便携式传感器等新型设备。汇交标准传输标准存储标准采集规范2.数据标准化技术数据增值的关键在于整合，但整合的前提是数据标准的统一。农业领域数据标准化变得极为迫切，信息采集、传输、存储、汇交的标准规范亟需大量出台。农业基准数据库亟需建立。农 业 基 准 数 据 库传输速率编码标准传输方式传输冗余……存储格式存储方式存储安全数据结构……采集内容采集方式采集时间采集地点……汇交方法汇交内容汇交分类汇交范围……大数据数据标准化标准体系框架3.农业大数据分析处理技术建模技术：农作物生长与产量形成机理建模；农产品消费行为与消费量变化动态建模；基于多代理系统进行农业智能仿真模拟；关联分析：专家会商系统结合；专家智慧动态引入；仿真模拟智能化和自适应；仿真过程