编译原理 词法分析讲解.ppt

%% /*辅助过程*/ Upper(char *s,int l) { int i; for(i=0;il;i++) 　　　s[i]=outpper(s[i]); 　　 return 1; } void main(void) { yylex( ); } 2.LEX的实现 LEX的功能是根据LEX源程序构造一个词法分析程序，该词法分析器实质上是一个有穷自动机。 LEX生成的词法分析程序有两部分组成: 词法分析程序 由正规式构造DFA 识别单词的控制程序 LEX的处理过程： · 扫描每条转换规则Pi构造一相应的非确定有穷自动机Mi ¨将各条规则的有穷自动机Mi合并成一个新的NFA M 即生成该DFA的状态转换矩阵和识别单词的控制程序 0 P1 ε ε ε M1 P2 M2 P3 M3 ·¨确定化并最小化 ，NFA?DFA 例42 LEX源程序， a { } abb { } a bb { } 一.读LEX源程序，分别生成NFA，用状态图表示为： 二.合并成一个NFA： 0 3 1 7 4 5 2 6 8 start b b b b a a ε ε ε a 1 2 3 4 5 6 7 8 start start start a a a b b b b 三.确定化 给出状态转换的矩阵 状态 a b 到达终态所识别的单词 初态 终态 终态 终态 终态 {0,1,3,7} {2,4,7} {8} {7} {5,8} {6,8} {2,4,7} {7} {7} {8} {5,8} {8} {8} {8} {6,8} φ φ φ a a bb a bb abb 在此DFA中 初态为{0,1,3,7} 终态为{2,4,7},{8},{5,8},{6,8} 0 3 1 7 4 5 2 6 8 start b b b b a a ε ε ε a 状态 a b 到达终态所识别的单词 初态 终态 终态 终态 终态 {0,1,3,7} {2,4,7} {8} {7} {5,8} {6,8} {2,4,7} {7} {7} {8} {5,8} {8} {8} {8} {6,8} φ φ φ a a bb a bb abb 词法分析程序的分析过程 令输入字符串为aba… 读入字符 进入状态 开始 a b a {0,1,3,7} {2,4,7} {5,8} 无后继状态(退掉输入字符a) (1) 吃进字符ab (2) 按反序检查状态子集 检查前一次状态是否含有原NFA的终止状态 ·即检查{5,8},含有终态8，因此断定所识别的单词ab是属于 a*bb*中的一个。 ··若在状态子集中无NFA的终态，则要从识别的单词再退掉 一个字符(b)，然后再检查上一个状态子集。 ···若一旦吃进的字符都退完，则识别失败，调用出错程序， 一般是跳过一个字符然后重新分析。（应打印出错信息） 4.7　典型例题及解答 1.构造正规式1(0｜1)*101相应的DFA 2.将图4.18所示的DFA最小化 3.下面是用于生成词法分析器scanner的LEX的源文件，请给出scanner对输入串ababcbacaabaababaa的输出结果： 　%% 　a+b*a {printf(