Hadoop 源代码分析-namenode.docxVIP

RandomAccessFile此类的实例支持对随机访问文件的读取和写入。随机访问文件的行为类似存储在文件系统中的一个大型 byte 数组。存在指向该隐含数组的光标或索引，称为文件指针；输入操作从文件指针开始读取字节，并随着对字节的读取而前移此文件指针。如果随机访问文件以读取/写入模式创建，则输出操作也可用；输出操作从文件指针开始写入字节，并随着对字节的写入而前移此文件指针。写入隐含数组的当前末尾之后的输出操作导致该数组扩展。该文件指针可以通过 getFilePointer 方法读取，并通过 seek 方法设置。?通常，如果此类中的所有读取例程在读取所需数量的字节之前已到达文件末尾，则抛出 EOFException（是一种 IOException）。如果由于某些原因无法读取任何字节，而不是在读取所需数量的字节之前已到达文件末尾，则抛出 IOException，而不是 EOFException。需要特别指出的是，如果流已被关闭，则可能抛出 IOException。?protected void writeCorruptedData(RandomAccessFile file) throws IOException { final String messageForPreUpgradeVersion = \nThis file is INTENTIONALLY CORRUPTED so that versions\n + of Hadoop prior to 0.13 (which are incompatible\n + with this directory layout) will fail to start.\n; file.seek(0); file.writeInt(FSConstants.LAYOUT_VERSION); org.apache.hadoop.hdfs.DeprecatedUTF8.writeString(file, ); file.writeBytes(messageForPreUpgradeVersion); file.getFD().sync(); }??NameNode 目录结构??? ??? ??? ??? ??? data??? ??? ??? ??? ??? |??? ??? ??? ??? ??? dfs??? ??? ??? ????? |??? ??? ??? ??? ?????????????????????????????? |??? ??? ??? ??? name1? ??? ??? ??? ? ? ? ? ? ? ? ? ? ? ? name2??? ??? |???? ??? ??? |???? ??? ?|???? ??? ? ? ? ? ? ? ? ? ? ? ??? ...??? ??? current ??? image ??? in_use.lock??? |??? |??? |??? ? |??? fsimage??? fstime??? VERSION??? ? fsimage?????NameNode 的格式化(NameNode.format)??FSImage.format(Storage$StorageDirectory) line: 1431 FSImage.format() line: 1444 NameNode.format(Configuration, boolean) line: 1242 NameNode.format(Configuration) line: 186???格式步骤a).data/dfs/name1/current删除，并创建data/dfs/name1/currentb).创建镜像文件 data/dfs/name1/current/fsimage保存文件树从根开始镜像。这是一个递归的过程，首先保存当前目录的所有子目录，然后子目录里面的子目录。?? /** * Save the contents of the FS image to the file. */ void saveFSImage(File newFile) throws IOException { FSNamesystem fsNamesys = getFSNamesystem(); FSDirectory fsDir = fsNamesys.dir; long startTime = FSNamesystem.now(); // // Write out data // DataOutputStream out = new