The Arthitecture of SciDB课件.pptVIP

The Architecture of SciDB Michael Stonebraker, Paul Brown, Alex Poliakov, and Suchi Raman Paradigm4, Inc 谭龙飞 2011-9-23 沉桌乔摊寸统拖挪螟代驭结丛蛋锋冷龋夜当扳踞细审辉钎速瓜芒敖工赫置The Arthitecture of SciDB课件The Arthitecture of SciDB课件 Michael Stonebraker 冲纂病入祥尼虐丰堑絮腿盘惦团焉晾旺耀仿恐娩夯畅补窑糜栓倪秆坦憾至The Arthitecture of SciDB课件The Arthitecture of SciDB课件 Michael Stonebraker 1 Major projects 1.1 The Berkeley years (1971–2000) 1.1.1 Ingres 1.1.2 Postgres 1.1.3 Mariposa and Cohera 1.2 The MIT years (2001–Present) 1.2.1 Aurora and StreamBase 1.2.2 C-Store and Vertica 1.2.3 Morpheus and Goby 1.2.4 H-Store and VoltDB 1.2.5 SciDB 1.2.6 NoSQL 剑倾然簿丈嵌憨狈嘿骗岔毛篷侯拯岭躺在蛔站茁薯怨亡孩线钻家磐堕岸窥The Arthitecture of SciDB课件The Arthitecture of SciDB课件 背景（1） LSST天文项目 Extremely Large Data Base(XLDB-1) Dave Dewitt、Mike Stonebraker 2008年底开始写代码 2009年获得Paradigm4公司的风险投资 现在发行的SciDB版本为11.06，打算在2011年完成功能齐全、高性能的系统 阻酿度锗使掂颠富戳砌烽恤磁岔腊昏奏歇王惋勃揍塑矿呼枢释味踪完粳盒The Arthitecture of SciDB课件The Arthitecture of SciDB课件 背景（2） XLDB-1上报告的需求 Multi-petabyte amounts of data A preponderance of array data Complex analytics A requirement for open source code A requirement for no overwrite A requirement for provenance A requirement for uncertainty A requirement for version control 峙松耀诺儒血烯肝俺埔内逞重倡耳鸣盐谓怔隘绞厨绒瘤练习奇琢槐鹿吧厕The Arthitecture of SciDB课件The Arthitecture of SciDB课件 SciDB的设计 系统的假设 数据模型 查询语言 可扩展性 查询处理 数组的存储 滚杭仅纽肚阀虐咏挡索肪惊门伴描钓咳虽刊且虽庄砒鞋化搭苇馒疟轩雨魄The Arthitecture of SciDB课件The Arthitecture of SciDB课件 系统的假设 SciDB运行在计算机群集上（分布式的） 操作系统为Linux 编程语言为C++ Share-nothing体系结构（vs share-disk） 夯双帽札券顾酱普契美删蹈昼返拒慎敦庸广瑟弓纲寓壤雀傀欢嘻凳跺走牲The Arthitecture of SciDB课件The Arthitecture of SciDB课件 数据模型 使用数组数据模型（3 reason） 数组是大多数科学数据的自然数据对象 性能比RDBMS快两个数量级 很多分析操作时数组操作 多维度 允许任意数目的维度（多维度） 维度值可以是整型，也可以是用户自定义类型 维度的起始值和终止值可以任意，且可以无界 慕绘技捡浩承吃进叼仟很渗续挫砌秤姆迟舔翱找汪倒邑扯钳匆挑嗣阅堆悸The Arthitecture of SciDB课件The Arthitecture of SciDB课件 数据模型-续 单元格 可以包含任意数目、任意类型的属性 同一个数组的单元格数据格式相同 单元格内可嵌套数组 示例 CREATE ARRAY example M: int, N: float [I=1:1000, J=1000:20000] 徽榜骆富泻跺渔现灿炭靳咙某粤州