LogParser强大的日志分析统计工具.pdfVIP

LogParser——强大的日志分析统计工具 Most software is designed to accomplish a limited number of specific tasks. Log Parser is different... the number of ways it can be used is limited only by the needs and imagination of the user. 虽然有点夸张，但从这句话看，似乎就能感受到 LogParser有多强大了。 下载 LogParser 功能非常的强大，可以分析 IIS 日志，系统事件日志，CSV ，XML 等格式日志， 同时也支持接口编程——可用 C#调用 LogParser 的 COM ，其效率非常之高，特别是对大的 日志文件（几十M、几百 M、甚至几 G 的文本日志文件），使用 LogParser能够快速查出你 所要的数据，一些常用的方法在 LogParser 的帮助文档中都有介绍，下面简单举两例子。 1. 分析 IIS 日志 统计 IIS 日志404 错误的页面 Logparser.exe SELECT distinct count(*) as Times,cs-host as Host,cs-uri-stem as PageUrl into D:\Loginfo\IISLog\errorlog.txt FROM D:\Loginfo\IISLog\100428.log where sc-status=404 Group by Host,PageUrl order by Times desc -o:tsv 2. 分析自定义的日志 通常用程序定义的日志都设为 tsv 格式的，即列与列之间用 \t 隔开，或者用特殊的组合 符号避免日志中本身就包含分隔符，如“\t|\t”，有利于后续的分析。 与系统日志相比，自定义的日志需要声明一个头文件，列名格式与日志内容的列一致，就像 SQL 表中的列名样。 LogParser.exe select distinct Host, Uid,SessionId, CASE STRLEN(TRIM(AccountId)) WHEN NULL THEN 0 ELSE 1 END as IsLogin into C:\****.txt from D:\Loginfo\LogInfo_1004280930.log where Host -i:TSV -fixedSep:ON -iHeaderFile D:\Loginfo\PVLogHeadFile\PVLogHeadFile.txt -o:tsv -fileMode:0 -fileMode:0 为 0 表示追加，为 1 表示覆盖原文件。 3. 用 LogParser导数据到数据库中 (1) 导入到远程数据库存在的表中 LogParser.exe SELECT * FROM D:\LogInfo\LogInfo_1001032230.log TO dbo.[table] -o:SQL -server:[server] -driver:SQL Server -database:[database] -username:[username] -password:[password] -i:tsv (2) 导入到本机数据库存在的表中 LogParser.exe select * into [database].dbo.[table] from D:\LogInfo\LogInfo_1001032230.log -o:sql -database:[dtabase] -i:tsv -iCodepage:65001 (3) 导入并创建表 LogParser.exe SELECT * FROM D:\LogInfo\LogInfo_1001032230.log TO dbo.[table] -o:SQL -server:[server] -driver:SQL Server -database:[database] -username:[username] -password:[password] -i:tsv -createtable:ON 说明： (1) 对于已存在的表，需要在前面预留两个字段，LogParser 导入的时候，会把文件 名和行号也导入到表中 (2) 字段类型，对于已存在的表，里面设置的字段类型必须与要导入的日志文件的类型 一一匹配，否则会导入失败，对于创建表的情况