一种视频点播日志分析系统的设计与实现.pdfVIP

第32卷第 1期 计算机应用与软件 Vo1．32 No．1 2015年 1月 ComputerApplicationsandSoftware Jan．2015 一 种视频点播 日志分析系统的设计与实现 朱 明 慈海波 苏厚勤 (东华大学计算机科学与技术学院 上海 201600) 摘 要 视频点播系统产生大量 日志信息，包括机顶盒注册、页面浏览、会话和全局会话负载均衡等目志信息。通过采集这些 日 志，可以分析 出用户的点播流程和视频点播系统的运行状态等信息。对一种视频点播 日志分析系统的体系结构进行分析，设计基于 C／S架构的 日志采集模块和基于多线程并行处理方式的日志分析模块，实现一个视频点播 日志分析系统。仿真实验证明，多线程并 行处理方式比单线程处理在 日志分析的效率上明显提高。 关键词 视频点播 日志采集 MINA 日志分析 正则表达式 并行 中图分类号 TP391 文献标识码 A DOI：10．3969／j．issn．1000—386x．2015．叭．010 DESIGN AND IMPLEM ENTATIoN oF A LoG ANALYSISSYSTEM FoR VoD ZhuMing CiHaibo SuHouqin (SchoolofComputer＆eMeandTechnology，DonghuaUniversity，Shanghai201600，China) Abstract Videoon—demand(VOD)system willproducealargenumberofloginformation，includingset—topboxregistration，page browse，sessionandglobalsessionloadbalancing，etc．Bycollectingtheseloginformation，itisabletoanalysetheinf0m ationofuser’S videoon-demandprocess，urnningstatusofthesystem ，andSOon．Inthispaper，weanalysethearchitectureofaVOD loganalysissystem ， designtheC／Sstructure—basedlogcollectionmoduleandthemulti·threadedparallelprocessing-basedloganalysismodule，andrealiseaVOD loganalysissystem．Simulation experimentsshow thatthemulti—threaded praallelprocessing approach noticeably improvesthe running efficiencyofloginfbnnationanalysiscompraedwithsingle—threadedprocessing． Keywords Videoon—demandlogcollection MINA loganalysis Regularexpression Concurrence 用系统的软件架构如图1所示。日志分析系统主要 由三个子系 0 引 言 统组成，即日志采集，Et志分析和信息展示子系统。 视频点播VOD(VideoOnDemand)系统是下一代广播电视 网NGBN(NextGenerationBroadcastingNetwork)业务平台的重要 组成部分，可以提供视频点播、频道回放和时移电视等服务。用 户每天访问视频点播业务将产生大量的31志信息。这些 日志经 过采集 、清洗、转换和装载后对其进行分析，从中获取用户的点 播信息 、行为偏好和系统的运行状态等，从而实现一种视频点播 日志分析系统。基此，为用户提供