UNIX字串处理进阶.docVIP

TOC \o 1-3 \h \z \u HYPERLINK \l _Toc232600929 正则表达式(Regular Expression) PAGEREF _Toc232600929 \h 1 HYPERLINK \l _Toc232600930 sed命令介绍 PAGEREF _Toc232600930 \h 15 HYPERLINK \l _Toc232600931 tr命令介绍 PAGEREF _Toc232600931 \h 48 HYPERLINK \l _Toc232600932 grep命令介绍 PAGEREF _Toc232600932 \h 51 HYPERLINK \l _Toc232600933 find命令介绍 PAGEREF _Toc232600933 \h 53 HYPERLINK \l _Toc232600934 awk命令介绍 PAGEREF _Toc232600934 \h 60 HYPERLINK \l _Toc232600935 cut和paste命令介绍 PAGEREF _Toc232600935 \h 77 HYPERLINK \l _Toc232600936 if的判断条件 PAGEREF _Toc232600936 \h 80 正则表达式(Regular Expression) 正则表达式(RE)用于描述字符串的模式(pattern)，即字符串的特征或样式，比如以字母a开头或包含字符串cold等。计算机按照这些特征来对字符串进行测试(或匹配)，就是说判断字符串是否符合这些特征，被检测的字符串称为被测试字符串。如果被测试字符串符合一个正则表达式所描述的规则，则称此正则表达式匹配(match)此字符串。“匹配”这个单词有时也用做名词，表示字符串中符合正则表达式的那部分，在很多应用中(比如perl脚本中)这部分字符串会被提取出来以进行判断。 比如/[abc]kkk$/是一个正则表达式，它表示字符串的最后3个字符必为kkk，而倒数第4个字符必须为abc这三个字符中的一个。按此规则，字符串”pqrakkk”，”zzzbkkk”，”78ckkk”等都匹配此表达式，匹配分别为akkk，bkkk和ckkk。而”34akk”，”iokkk”，”abc”，”kkabc”等都不匹配上面的正则表达式。 在UNIX中，正则表达式经常被用于grep、sed和awk等命令中，被测试字符串经常是一个文本文件中的行。在UNIX系统的文本文件中，行与行之间依靠换行符\n(Windows系统中则为\r\n)来分隔。 不仅UNIX中使用正则表达式，很多其它系统(比如BGP路由协议)都使用它。RE用于表达字符串特征的符号称为RE特殊字符或RE控制字符，大部分RE特殊字符是标准的(比如^表示字符串开头)，即在所有系统通用。这一点与UNIX shell中的特殊字符不同，后者仅限于在UNIX中使用。即使这两者之间某几个符号所表示的意思碰巧有点像，但是它们之间没有任何关系。 下面介绍一下正则表达式的各种控制符号，及其规则 锚点(anchor) 锚点用于在字符串中指定特定的位置，常见的有： ^ 当此字符不在方括号[]内时，表示行首，即输入字符串开始的位置，如^abc表示以abc为开头的行。 $ 表示行尾，即输入字符串结束的位置，如abc$表示以abc为结尾的行。而^$表示空行。字符$在很多地方表示结尾处，比如在vi中就用于表示行尾。但在UNIX shell中符号$表示提取变量的值。 \和\ \表示词首，如\abc表示以abc为开头的词，\表示词尾，如abc\表示以abc为结尾的词 \b和\B \b表示单词的边界，而\B表示单词的中间部分。例如，er\b可以匹配never中的er，但不能匹配verb中的er。\B则正好相反。 修饰字符(modifier) 修饰字符本身不具有意义，专门用以修改前一个字符集的出现次数，常见的有： * 表示前一个字符集的出现次数为0次或多次，如ab*c表示a与c之间可有0个或多个b存在。表达式zo*能匹配z以及zoo。符号*等价于 {0,}。 虽然碰巧UNIX shell中也以*表示0个或多个任意字符，但是两者的用法有本质区别。在shell中*可以独立存在，它本身就表示0个或多个任意字符。而在正则表达式中*必须跟在另一个元字符后面，用于表示这个作为前导的元字符的0次或多次重复。要想表达任意多个任意字符，应该使用.*。 比如要在一行字符中搜索以a开头以b结尾，中间有任意多任意字符的子字符串，就应该表示为a.*b，这可以匹配ab，aabbb或aoookkkb等字符串。而如果表示为a*b，则只能匹配b，ab或aaaaaab等字符串。 ? 表示前一个字符集的出现次数为0