基于虚拟化分布式软件日志管理系统VDSL研究.docVIP

基于虚拟化分布式软件日志管理系统VDSL研究 　　摘要：该文通过分析虚拟化的分布式软件日志管理系统VDSL的特征，研究利用动态二进制翻译技术，将分布式系统平台中，各虚拟结点的软件日志记录，实现同步聚合，形成具有协同一致性的软件日志，为软件日志的安全审计与故障恢复提供支持。为软件故障分析与审计提供有效的管理方法。 　　关键词：虚拟化；分布式；LogOS；软件日志管理 　　中图分类号：TP311 文献标识码：A 文章编号：1009-3044（2015）10-0090-03 　　1 基于虚拟化的二进制动态翻译平台 　　LogOS是一个的动态二进制翻译基础平台。它是一个进程级虚拟机。LogOS 是一个基于动态翻译框架扩展，针对全系统翻译的的翻译框架，LogOS 借助于中间指令实现重定向功能，且可以独立于底层硬件执行程序。同时，LogOS 实现了模块划分和接口定义，通过中间指令过滤功能完成对执行代码进行翻译和优化。它可以对内核和用户级二进制文件进行翻译。LogOS 总体架构图如图1所示。 　　LogOS 由一个虚拟机（VM），一个代码高速缓存单元（code cache）和一个Logger 调用的检测AP 构成。VM由一个即时编译器，一个仿真器和一个调度程序器组成。在 LogOS 取得对程序的控制之后，VM 协调它的组成部分并执行程序：调度器启动JIT 编译器和检测程序代码。在目标代码高速缓存单元中存储被编译的代码。emulator是用来进行需要 VM 特殊处理的系统调用的。因此它只能获取用户状态下的代码。当程序在LogOS 中执行结束后，Logger完成了对程序的插桩后与程序分离，并将所得到的不同粒度的软件运行日志存放在本地文件中。 　　2 基于虚拟化的分布式软件日志管理系统VDSL设计 　　2.1 软件日志管理系统VDSL总体架构 　　在动态二进制翻译平台LogOS基础上，提出了一种虚拟计算环境中的分布式软件日志管理系统VDSL，以实现对整个分布式虚拟集群的软件日志管理。VDSL定了日志记录的数据结构，这种数据结构可以保存每个节点的所产生的软件日志。进而在传输前被VDSL同一封装为相同的文件格式，以保证各节点日志交互与服务器的日志汇总。VDSL总体架构如图2所示。 　　构建三个层次（表示层、功能层和数据层）日志系统模型，表示层指的是服务软件的用户API部分。它的功能只负责实现用户、应用程序间的通信，不负责业务的实施。在功能层，具体实现业务处理功能。表示层像功能层发送数据请求，同时访问数据层获取信息以完成功能层的请求。完成请求后结果返回给发送请求的表示层。数据层就是MySQL数据库管理系统。管理员负责管理对MySQL中数据的读写。数据库中的数据文件存储着来自每个虚拟节点日志信息。数据库必须要实现能对海量数据的快速查找，检索和更新。所以，用户使用SQL语句，从功能层将数据插入到数据层中的MySQL数据库。整个三层服务请求层次如图3所示： 　　2.2 VDSL系统功能应实现以下功能： 　　1）在线调试。对于大部分处理海量数据的分布式软件系统。若想在其出现故障时进行调试或数据收集，必须停止系统的运行，在线下进行操作，给业务服务带来很大的损失。VDSL系统可以实现分布式软件系统的不中断在线调试。将动态二进制翻译平台LogOS部署在虚拟化平台上分布式软件系统中的每个虚拟节点上，使用日志服务实现服务软件的在线调试。 　　2）实现软件日志的可配置特性。支持用户自己配置的软件日志记录粒度级别。将LogOS设计的依据调试检测要求的可定制的的平台。Logger将按照事先定制好的要求自动来记录分布式服务平台中服务软件运行时产生的数据流。具体不同粒度的定制，则完全由容错系统的管理员设定。而不是由日志记录平台记录所有的数据流，这样会占用过多的硬件资源。当配有VDSL的分布式系统投入使用之后，我们可以在运行时根据业务要求来随时改变Logger的日志记录粒度 　　3）通过VDSL分析整个分布式系统运行状况。不同于单主机节点上的日志分析，在大规模分布式系统中各个节点之间都紧密关联，互相影响。整个VDSL系统不能仅仅局限于一个单节点之上的日志功能，利用时钟同步功能对整个分布式系统中各个节点上的软件日志进行精确排序。 　　4）良好的扩展性且易于管理。在基于虚拟化的分布式系统中，VDSL系统实现了统一管理各节点的软件日志文件。为用户和管理员提供良好的前台操作界面，实现日志选择功能，包括日志的查询、日志的删除等统计功能。 　　2.3 日志管理模式 　　随着海量数据的分布式软件系统运行会产生庞大的日志文件，在VDSL系统中，日志存储方式采用数据库表，在数据库服务器的库表中，存储日志信息，用户和管理员可以对此统计和查询。VDSL系统日志的管理方