Linux安装配置mogileFS.docVIP

一、MogileFS介绍 MogileFS是一种分布式文件存储系统。可支持文件自动备份的功能，提供高 可用性和高可扩展性。Mogilefs不支持对一个文件内部的随机或顺序读写，因此 只适合做一部分应用，如图片服务，静态HTML服务等，这些应用在文件写入后基 本上不需要对文件进行修改，但是可以生成一个新的文件覆盖原有文件。 Mogilefs分为如下几部分： 1、数据库部分 数据库保存了Mogilefs的所有元数据，一般使用MySQL，可以单独拿数据库服务 器来做，也可以跟其他程序跑在一起。可以用 mogdbsetup程序来初始化数据库。 数据库部分非常重要，因为一个MogileFS系统的所有Tracker都必须指向同一个 数据库，因此如果数据库出现问题，那么整个MogileFS系统将处于不可用状态， 因此数据库最好采用HA结构，如MySQL主从复制架构，这样可以降低数据库出现 问题对 MogileFS系统的影响。 2、跟踪器（Tracker） mogilefsd即trackers程序，类似mogilefs的wiki上介绍，trackers做了很多工 作，主要有以下几个： * Replication： 机器间复制文件 * Deletion：从命名空间删除是立即的，从文件系统删除是异步的 * QueryWorker： 响应客户端的请求 * Reaper：在磁盘失败后将文件复制请求重新放到队列中 * Monitor：监测主机和设配的健康度和状态 Tracker是访问MogileFS的入口，所有系统管理相关的操作都要通过其中的某个 trackers完成，应用系统的一些操作也要通过trackers，因此一个高业务量的 MogileFS系统最好同时运行多个trackers来做负载均衡。 3、存储节点（Storage） mogstored程序的启动将使本机成为一个存储节点。mogstored启动后，便可以通 过mogadm增加这台机器到系统中。一台机器可以只运行一个 mogstored作为存储 节点即可，也可以同时运行其他程序。存储节点下面还需要定义设备（device）， 每个设备都有一个唯一的ID编号，设备也是用mogadm添加到MogileFS系统中的。 4、工具 主要就是mogadm，mogtool这两个工具了，用来在命令行下控制整个mogilefs系 统以及查看状态等等。 5、客户端（Client） 客户端通过接口访问mogilefs系统，对整个系统进行文件读写操作。 （/4/mogilefs%E5%AE%89%E8%A3%85%E4%B8%8E%E9 %85%8D%E7%BD%AE/#mogilefs%E4%BB%8B%E7%BB%8D） MogileFS特点 * 应用层——不需要特殊的核心组件 * 无单点失败——MogileFS安装的三个组件（存储节点、跟踪器、跟踪用的 数据库），均可运行在多个机器上，因此没有单点失败。（你也可以将跟踪器和存 储节点运行在同一台机器上，这样你就没有必要用4台机器）推荐至少两台机器。 （没有单点失败本人持保留意见） * 自动的文件复制——基于不同的文件“分类”，文件可以被自动的复制到 多个有足够存储空间的存储节点上，这样可以满足这个“类别”的最少复制要求。 比如你有一个图片网站，你可以设置原始的JPEG图片需要复制 至少三份，但实 际只有1or2份拷贝，如果丢失了数据，那么Mogile可以重新建立遗失的拷贝数。 用这种办法，MogileFS(不做RAID)可以节约 磁盘，否则你将存储同样的拷贝多 份，完全没有必要。 * “比RAID好多了”——在一个非存储区域网络的RAID（non-SAN RAID）的 建立中，磁盘是冗余的，但主机不是，如果你整个机器坏了，那么文件也将不能 访问。 MogileFS在不同的机器之间进行文件复制，因此文件始终是可用的。 * 传输中立，无特殊协议——MogileFS客户端可以通过NFS或HTTP来和 MogileFS的存储节点来通信，但首先需要告知跟踪器一下。 * 简单的命名空间——文件通过一个给定的key来确定，是一个全局的命名 空间。你可以自己生成多个命名空间，只要你愿意，不过这样可能在同一MogileFS 中会造成key冲突。 * 不用共享任何东西——MogileFS不需要依靠昂贵的SAN来共享磁盘，每个 机器只用维护好自己的磁盘。 * 不需要RAID——在MogileFS中的磁盘可以是做了RAID的也可以是没有，如 果是