大数据12tachyon更名为alluxio课程.pptx

Tachyon;课程安排;概述 Tachyon是一个开源分布式存储系统，拥有高性能、高容错等优点。并具有类Java的文件API、插件式的底层文件系统、兼容Hadoop MapReduce和 Apache Spark 等特征。Tachyon能够为集群框架（如Spark、MapReduce等）提供内存级速度的跨集群文件共享服务，官方号称最高比HDFS吞吐量高300倍。诞生于Berkeley的AMPLab实验室，由该实验室的在读博士李浩源创立。 Tachyon应用场景 传统的数据共享使用的磁盘作为可持久化存储的介质，因此对数据的读写带宽性能产生着限制。其次这样的分布式存储系统来解决高可靠性问题，比如HDFS利用多副本机制，但是这样的机制会引起额外的网络开销，执行任务时都拖累了执行任务过程的响应时间。而Tachyon就能完成作业之间高效的内存访问，而在可靠性方面采用和spark一样的可靠性机制lineage。 ;Tachyon是什么;Tachyon是什么;概述;概述;实现原理;实现原理;整体架构;整体架构;整体架构;整体架构;整体架构;整体架构;安装;安装;安装;安装;启动命令参数 1）bin/tachyon-start.sh all Mount 使用root权限挂载TachyonWorker所使用的RamFS，然后启动TachyonMaster和所有TachyonWorker。 2）bin/tachyon-start.sh all SudoMount 使用sudo权限挂载TachyonWorker所使用的RamFS，然后启动TachyonMaster和所有TachyonWorker。 3）bin/tachyon-start.sh all NoMount 不执行挂载操作，只启动TachyonMaster和所有TachyonWorker 提示：如果不想每次启动Tachyon都挂载一次RamFS，可以先使用命令?bin/tachyon-mount.sh Mount workers?或?bin/tachyon-mount.sh SudoMount workers?挂载好所有RamFS，然后使用?bin/tachyon-start.sh all NoMount?命令启动Tachyon。 ;重点详解;重点详解;重点详解;重点详解;重点详解;命令行操作;命令行操作;命令行操作;结合hadoop使用;结合Spark使用