分布式文件系统MOOSEFS.pptVIP

010203无高可用性：共享文件系统在一个物理设备，一旦出现故障，服务完全不可用读写性能随访问量的增加而降低：访问频繁，磁盘I/O增大不易实现在线扩容：一般情况下需要停机停服务传统共享文件系统的缺陷NFS(networkfilesystem)01其他04Samba02ftp03传统共享文件系统的种类HadoopFastDFSMooseFSPNFS（ParallelNFS）PVFS，PVFS2Lustre其他分布式文件系统的种类实施起来简单。MFS的安装、部署、配置相对于其他几种工具来说，要简单和容易得多。看看lustre700多页的pdf文档，让人头昏吧01不停服务扩容。MFS框架做好后，随时增加服务器扩充容量；扩充和减少容量皆不会影响现有的服务02恢复服务容易。除了MFS本身具备高可用特性外，手动恢复服务也是非常快捷的03我在实验过程中得到作者的帮助，这让我很是感激。04为什么选MoosefsMoosefs体系结构图客户端（clients）3元数据服务器（Master）1数据存储服务器（chunkservers）2MooseFS分布式文件系统的组成01020304分布式文件系统MooseFS的主控端：控制个数据存储服务器目前只有一个master,存在单点故障客户端的访问接口就是master支持各种linux/unix元数据服务器（master）数据存储服务器（chunkserver）数据实际存储的地方由多个物理服务器组成在数据存储目录，看不见实际的数据（只有带编号的目录及文件）建议使用2-3个副本支持各种linux/unix01挂接分布式文件系统02一般是应用服务器03客户端可以是linux,freebsd等各种类unix04数个客户端05Freebsd的fusefs_kmod可能会有性能问题Moosefs客户端元数据服务器(master)安装：配置、编译、安装。客户端安装：根据客户端的平台不同，安装稍有差异（个操作系统的fuse不同）数据存储服务器(chunkserver)安装：与元数据服务器相同安装moosefsMooseFs客户端是linux时的安装安装FUSE设置环境变量exportKG_CONFIG_PATH=/usr/local/lib/pkgconfig:$PKG_CONFIG_PATH配置./configure–enable-mfsmount…..编译安装make;makeinstallmoosefs客户端是freebsd时的安装安装内核模块fusefs-kmod:Sysinstall加载内核模块fusefs-kmod:kldload/usr/local/modules/fuse.ko安装pkg-config：cd/usr/ports/devel/pkg-configmakeinstallcleanmoosefs客户端是freebsd时的安装（续）编译安装make;makeinstall06创建用户pwuseraddmfs–s/sbin/nologin04安装MFS客户端01切换目录cd03配置./configure--prefix=/usr/local/mfs--with-default-user=mfs--with-default-group=mfs--enable-mfsmount05解包tarzxvf02配置元数据服务器master默认配置文件mfsmaster.cfg(不需要修改即可使用)#WORKING_USER=mfs#WORKING_GROUP=mfs#LOCK_FILE=/var/run/mfs/mfsmaster.pid#DATA_PATH=/usr/local/mfs/var/mfs#SYSLOG_IDENT=mfsmaster#BACK_LOGS=50#REPLICATIONS_DELAY_INIT=300#REPLICATIONS_DELAY_DISCONNECT=3600#MATOCS_LISTEN_HOST=*#MATOCS_LISTEN_PORT=9420#MATOCU_LISTEN_HOST=*#MATOCU_LISTEN_PORT=9421#CHUNKS_LOOP_TIME=300#CHUNKS_DEL_LIMIT=100