日志挖掘中的数据预处理.pdfVIP

第20 期 计算 机技 术 与 发展 V01．20 No．4 2010 4 Apr． 2010 年 月 ∞ Ⅳ IHERTEa J0L．oGYANDDEVELOPMENT 日志挖掘中的数据预处理 方 杰，朱京红 (合肥工业大学计算机与信息学院，安徽 合肥 230021) 摘 要：日志信息的预处理是 日志挖掘任务中的重要阶段，是当前研究的重点，同时也是整个日志挖掘过程的基础和实施 有效挖掘算法的前提，在 日志挖掘中起着重要的作用。目前主要的日志挖掘主要采用国外的几种软件，而 日志挖掘中重 要的数据预处理软件国内暂无。文中主要介绍了数据挖掘中的日志挖掘，分析了数据预处理的过程，以及如何实现 日志 挖掘中的数据预处理，并在Delphi开发工具中成功完成了IIS文本 日志文件到Xls格式及 XML格式文件的转换，实现了 日志挖掘中的数据预处理。 关键词 ：Ⅺ皿 ；日志挖掘 ；数据预处理 中图分类号： II；TP39 文献标识码 ：A 文章编号：1673—629X(2010)04—0o17一O4 DataPretreatmentofLogM ining FANGJie，ZHUJing-hong (Sclx~olofComputer Information，HefeiUniversityofTechnology，Hefei230021，China) Abstract：L0ginformationpreprocessi~g isanimportantstageofthelogminingtask，whichisthefocusofcurrentresearch．Itisalsothe wholebasisoflogminingprocessandtheimplementationoftheprerequisiteofaneffectivemining algorithm．Inthelogmining ，itplaysan importantrole．Logmining isctwrentlythe maintoolisthe ntmaberofforeignsoftware，nadlogsimporatntadtamining softw~-einternal— lynopretreaUnent．n ispaperintroducesdatamining inthelogmining ，adetailedanalysisofthe datapre—processingprocess，aswell ashow tOlogthedatapre—processingmining ．andDelphidevelopmenttoolsinthesuccessfuloompletionofthe IISlogfileOttextformat nadXML formatXlsdocumentconversion，Ot achievethe logmininginadtapreprocessing ． Keywords：XML；logmining ；adtapretreatmnet O 引 言 挖掘的精确数据 [引。 随着 Intemet的发展应用，www上 的信息量剧 增，其中包含了大量的数据信息。如何从访问的web 1 日志挖掘中的数据预处理 日志数据中快速地抽取用户感兴趣的访问模式，通过 Web用户访问web服务器时，web服务器会 自动 对服务器 日志的分析和挖掘获取用户访问路径及关注 创建访问日志信息，包括访问日志、引用 日志、代理 日 点，以便优化站点结构，为用户提供个性化web服务， 志