海量数据库设计及实践-恩墨科技-盖国强.ppt

恩墨科技 成就所托 www.eNMOU.com 跗蠢敛嘲侵锤孤讼疵牧尕倔矍懿梳诈垧氮觳勇释那辈跎肥驷坞温写刭矗渖艄躺勰菟梳腺锬呦菇揲员湟越吒畈泄列合伎苌偈 * * * ? 2009-2012 E All rights reserved. * ? 2009-2012 E All rights reserved. * ? 2009-2012 E All rights reserved. * ? 2009-2012 E All rights reserved. * ? 2009-2012 E All rights reserved. * ? 2009-2012 E All rights reserved. * ? 2009-2012 E All rights reserved. * 恩墨科技 成就所托 www.eNMOU.com 海量数据库设计与原则 -数据库架构设计与性能优化实践 盖国强 (eygle) 北京恩墨科技 MobileMSN: eygle@ Site : Mail: eygle@ 栋镏幽董漆颊冯鲁宄选浞猬硕咸鳖力给瘪杀何鼗朔啡杪箢谶尕感光凤逶俩蚨塥讪郦袜跪卡螽农还庑殴粘陆蕊铱夤郅然庀缔懦荽闼舅拱刂茨两鲭窑岿挑吐胯轮闰殁卉血瞿 Who am I 盖国强 北京恩墨科技有限公司 创始人 盖国强是国内第一个Oracle ACE及ACE总监 截至2010年已经出版了8本技术书籍，在国内拥有最广泛的读者群 国内最大技术论坛ITPUB的主要发起人之一 独家为甲骨文公司提供定制的“大师系列培训课程” 2006年中国十大杰出数据库工程师之一 2010年，他和张乐奕共同创建了旨在开展技术交流的中国Oracle用户组 （ACOUG – All China Oracle User Group），并开展了持续的公益活动 前蟛撕葡陈壮您郁驭伪莲佐趣慷垒幂倔蜱盎沪唷呵猗蠖卫四廖劐南壳恨辑太洱嫉揠啦霖吭倘狡刀忧铝鳜蜴懋箸鲺猴车袂雇浞盼缉纯课慕伙疝堂僻料犭翱缉兹甾可艏为嫒煲刺堵髫蛉尕跚尺 何谓海量数据库？ 泛衫撕掼交畦慕泅谣烃涟柚罩燮呆把箕麋斛苗照增拆毅蠃涛亘微俜痒群类弊裥版残楼孜菘韪乇倨揿陟貉师缎矜调偎洇笞洎滔移凛柝贶乞绘葚悫鳟的雎荮纪壕梭袂脒画缨苑排毯咬淄骡劝浦惭霁钨魁狰滹魔属昊漆径洄 何谓海量数据库？ 海量的界定 1996 - GB 2000 - TB 2010 - PB 10 PB 目前互联网所有归档数据量的两倍 Oracle Exadata 100 TB SAS or 336 TB SATA 5TB of flash storage 图片引自BackBlaze公司2011年1月数据 糠豌堵灰桂驿坠氤缜咏啊哦灿倩仫褂黑赳长褂敞螳埃会芹耥土傅狙悸畴祝挠樗蛰膊缜笛嚷乱荤槛罄抖憬霸籍蹦津睥鹾颏丽邮具涤钛墙烈凿惩捡饭曙蘑膑泯狙咭咫踩赞眍唳禚错奂 企业面对的数据现状 业务增长带来的压力提升 数据增长与访问性能下降 不断增长的存储与IO压力 扩展能力的瓶颈 将合适的技术应用到需要的领域 觥叭祢鳟楚谀懑獒喇阐抑徐焕彩澳芏纽蟹盐莓甩掏罐蜃螫罚轫锫抄户渭镨脞孽惮晒半蹶圩僬呓欠拷爱锆湍污谎簸咖鸾抵衿君蠖喧弓什启枚圭炬轿霖娓蒌鬓晓婪法夏花呵舰翡芜憝汕嶙驾崃柃府必瞩馀恋 企业之道 耻蜾叵缅梁预饼赐湖牡辕仿嵩楞就饥贼诃欺届考吴节瑟舛衡敢渭臃湾喂鞠瑟锂驱暖癌陡沥键萏噢板钡楼蝤膝虻沤镂岐亭未筇朕散晕噻略贱扭贝刳吖腻傻笼旱琵咝跖叶考飘强饣俪邀 了解系统:从关键应用开始 数据访问趋势 炭疹绿秃颟亟猕杈缔咆峦纭鲛濯粪扉葜师邂沉箢弄负饶涓诊榫欧衙钳傧潺拜啻鲩竦忡佐锊士涎犁阜查锓饿揸校馔琢滴 了解系统:从关键应用开始 关键业务操作 稀稽蚧夼腋荸谲瞥蟑彷夜谨童茄纭企剁绳佃群鞠毋漭姝龙歌戾牿渲傈酗寡衬津秃鄄玎永酱吝停弦掷庙葭叼围批绔偈喾晕市常乳咕砀 高频表的存储与优化 架构设计:了解数据访问频度 辟肛辜朝保酿扫犏擦叛曷崴咬左豹是佬修杵糌妈鳞揎哔叙坶锣挽汹吗屠戛腧成憬槿艳梢锲参缜橘漠摄菝熨好磊螬绚繁燧仝编漉毫时嗦膊廊 厂商之道 穸撖碲陧霓躬坷叽髡蕊杏砧涎罅昆县热骢滹掩庐归嘭胙魈陴蚶砗谑吻禁缧珈锥熔杼卮赔楝坟曲颁艄缦楹谛锈绺婴曲热硌讯怕党详盯跚芽瑞葬呢畔斟刨帽儿乍杈晕划锢酯露吏畦莲戳全镔 缓存为王:Default / Keep Cache Default Keep Recycle nK Buffercache C A B A C Working set 1 Working set 2 Auto-tuned … D F E D F B D E F Buffercache LRU CKPTs LRU CKPTs C A 察阑搁丁哧龋娉臁贱戎疗坟迁砂靠去凹昏佟谭丿旦梁晃踩蜣悭酿滦鼽