58同城的分布式存储架构实践.pdf

下载文档 降价啦

3
0
约7.06千字
约 30页
2019-02-01 发布于山东
举报
版权申诉
保障服务

58同城的分布式存储架构实践.pdf

1、原创力文档（book118）网站文档一经付费（服务费），不意味着购买了该文档的版权，仅供个人/单位学习、研究之用，不得用于商业用途，未经授权，严禁复制、发行、汇编、翻译或者网络传播等，侵权必究。。
2、本站所有内容均由合作方或网友上传，本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺！文档内容仅供研究参考，付费前请自行鉴别。如您付费，意味着您自己接受本站规则且自行承担风险，本站不退款、不进行额外附加服务；查看《如何避免下载的几个坑》。如果您已付费下载过本站文档，您可以点击这里二次下载。
3、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等，请点击“版权申诉”（推荐），也可以打举报电话：400-050-0827(电话支持时间：9:00-18:30)。

A-PDF Watermark DEMO: Purchase from www.A-PDF.com to remove the watermark 58同城的分布式存储架构实践 58同城技术中心架构部徐振华 SACC2012 2012-09-13 SACC2012 内容概要分布式存储基础知识如何设计分布式存储架构 58的分布式存储实践介绍和现状引入 Google Dremel 原理– 如何能3秒分析1PB 磁盘的顺序读速度在100MB/S上下，那么在1S 内处理1TB数据，意味着至少需要有1万个磁盘的并发读! Dropbox声称，每天要接受2亿次上传,用户总数达到了2500万,估值会在 50亿美元到100亿美元之间。某云存储服务商官方声明,称因为机房的一台物理机本地磁盘损坏，导致个别用户数据丢失。 SACC2012 SACC2012 基础知识分布式存储基础知识存储基础分布式基础(存储相关) 存储基础存储基础存储的理论和应用存储系统的目标 SACC2012 SACC2012 存储基础存储理论和应用 I/O五分钟法则(局部性原理) 应用:无处不在的缓存; 应用:热数据放在比较快的介质上; Amdahl定律和Gustafson定律, 摩尔定律应用:提升系统性能存储基础 cpu缓存 SACC2012 SACC2012 存储基础 Linux文件系统缓存 SATA II 7200 RPM IOPS: ~90 SAS15K RPM IOPS: ~ 180 Intel X25-M IOPS: ~8600 PCIe 2.0x8 IOPS~220,000 (4KB) 扇区512, 内存页4k , 磁盘块大小4k mtu 1500 存储基础数据库缓存--cassandra 数据存储过程 SACC2012 SACC2012 存储基础有用的性能数字 L1 cache reference 0.5 ns Branch mispredict 5 ns L2 cache reference 7 ns Mutex lock/unlock