原创力文档- 1、本文档共50页，可阅读全部内容。
- 2、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。
- 3、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。
方案架构与案例研讨
意图与关联充满的BigData世界Etu帮您具体整合来呈现
大数据(BigData)时代来临StructuredDatabaseSpreadsheetFileinrecordformatSemi-structuredXMLDocsLogsClick-streamEquipment/Device,RFIDtagUnstructuredWebPagesE-mailMultimediaInstantMessagesDocumentsBigDataPeopleDevicesSensors移动互联网MobileInternet物联网InternetofThings4新量级、新处理模式、新企业智能
BigData要解决的问题Volume海量的数据规模Variety多样的数据类型StreamsRealtimeNeartimeBatchTBPBEBStructuredUnstructuredSemi-structuredAlltheaboveValueVelocity快速的数据流转巨大的数据价值
6SocialMediaMachine/SensorDOC/MediaWebClickstreamAppsCallLogLog什么是半结构化/非结构化数据
BigData带来的挑战不同“看”数据的方式需要更高性价比的数据计算与储存方式不同的数据管理策略超越企业现有IT的数据解决能量
不同“看”数据的方式8可视：结构化资料15%未视：半/非结构化数据85%DB/DW主管们看的战情数位仪表板，其实是残缺的…
10万GB10万TB需要更高性价比的数据计算与储存方式9数据库数据仓库计算更快存储更省
85%半/非结构化的Log/Webpage/Email/PDF/Image/Full-text/MS-Officefile不同的数据管理策略当我们想要扩充时，才发觉：架构只能scale-up，scale-out不易处理时间过长，time-to-value受限成本过高，cost-efficiency受限15%结构化的DB/DW遗憾残缺
每天几百GB、几TB的资料，且持续成长中储存Storing在收数据的同时做必要的前置处理(pre-processing)，并区分数据处理的优先等级(prioritizing)计算Processing如何有效的避免因硬件毁坏所导致的资料损毁管理Managing如何从中挖掘出所关注事件的pattern或behavior分析Analyzing超越企业现有IT的数据解决能量11
大数据的储存与处理/运算大数据储存大数据处理数据分享数据检索数据分析数据展现分布式软件架构并行计算框架分布式存储横向扩容(Scale-out)架构
什么是大数据处理(BigDataProcessing)/category.screen?category_id=PLANTSJSESSIONID=S1FF9ADFF2http://http://http://http://Logfile:1.5TB/dayHitCountWordCount
什么是大数据处理(BigDataProcessing)/category.screen?category_id=PLANTSJSESSIONID=S1FF9ADFF2http://http://http://http://http://http://m=indexf=viewp=24hours=nlifemod=storefunc=style_showSR_NO=DEAO450--[15/Nov/2011:00:07:45]GET/flower_store/product.screen?product_id=FL-10httpflower_store/category.screen?category_id=PLANTSJSESSIONID=SD7SL1FF9ADFF2Mozilla/5.0(X11;U;Linuxi686;en-US;rv:0)GeckoCentOS/0-0.1.el4.centosFirefox/0160416674--[15/Nov/2011:00:07:58]GET/flower_store/product.screen?product_id=K9-BD-01HTTP/1.1flower_store/category.screen?category_id=FLOWERSJSESSIONID=SD7SL1FF9ADFF2
文档评论（0）