词法分析程序的设计　.ppt

第四章 词法分析;4.1 词法分析程序的设计;词法分析程序;单词符号;输出表示（单词种别，单词自身的值）。 A:=B+2 (Id,指向A的符号表的入口指针）(Becomes,) (Id,指向B的符号表的入口指针) (Num, 2);词法分析工作独立的原因： 简化设计 改进编译效率 增加编译系统的可移植性 ;单词的描述工具;几类单词的描述;无符号实数：〈无符号实数〉→ d 〈余留无符号数〉| . 〈十进小数〉| e〈指数部分〉〈余留无符号数〉→ d 〈余留无符号数〉| . 〈十进小数〉| e〈指数部分〉|ε〈十进小数〉 → d 〈余留十进小数〉〈余留十进小数〉 → e〈指数部分〉| d 〈余留十进小数〉| ε〈指数部分〉 → d 〈余留整指数〉| s〈整指数〉〈整指数〉 → d 〈余留整指数〉〈余留整指数〉 → d 〈余留整指数〉 |ε其中s表示正或负号。 如 25.55e+5 和 2.1;正规式(regular expression);(e1), e1?e2, e1?e2, e1? L(e1), L(e1)∪L(e2), L(e1)L(e2)和(L(e1))?。 其中的“?”读为“或”（也有使用“+”代替 “?” 的）；“? ”读为“连接”；“?”读为“闭包”（即，任意有限次的自重复连接）。在不致混淆时，括号可省去，但规定算符的优先顺序为“?”、“? ”、“?” 。连接符“? ”一般可省略不写。“?”、“? ”和“?” 都是左结合的。;例4.2 令?={a，b}， ?上的正规式和相应的正规集的例子有： 正规式 正规集 a {a} a?b {a,b} ab {ab} (a?b)(a?b) {aa,ab,ba,bb} a ? {? ,a,a, ……任意个a的串} (a?b)? {? ,a,b,aa,ab ……所有由a 和b组成的串} (a?b)?(aa?bb)(a?b)? {??上所有含有两个相继 的a或两个相继的b组成 的串} ;例 ?={l，d}，r=l(l ?d) ?定义的正规集: {l,ll,ld,ldd,……}（标识符） 例4.3 ?={d，.，e，+，-},则?上的正规式 d?(.dd ?? ? )(e(+?- ??)dd? ??)表示的是无符号数的集合。其中d为0~9的数字。;两个正规式等价;正规式的运算律;正规文法到正规式 对?上的正规式r ,存在一个G=(VN,VT,P,S)使得L(G)=L(r) ，反之亦然。;例 r = a(a?d)? VT={a,d} S?a(a?d)? S?aAA?(a?d)?A?(a?d)B A?? B?(a?d)B B?? G[s]: S?aA A?? VT={a,d} A?aB VN={S,A,B} A?dB B?aB B?dB B?? ;2. 将正规文法转换成正规式文法产生式 正规式（1）A?xB, B?y A=xy （2）A?xA?y A=x?y（3）A?x?y A=x?y ;4.3有穷自动机;DFA定义： 一个确定的有穷自动机（DFA）M是一个五元组：M=（K，Σ，f，S，Z）其中 1。K是一个有穷集，它的每个元素称为一个状态； 2。Σ是一个有穷字母表，它的每个元素称为一个输入符号，所以也称Σ为输入符号字母表； 3。f是转换函数，是在K×Σ→K上的映射，即，如 f（ki，a）=kj，（ki∈K，kj∈K）就意味着，当前状态为ki，输入符为a时，将转换为下一个状态kj，我们把kj称作ki的一个后继状态； 4。S∈K是唯一的一个初态； 5。Z? K是一个终态集，终态也称可接受状态或结束状态。 ;DFA 例：;DFA 的状态图表示;DFA 的矩阵表示;∑*上的符号串t在M上运行 一个输入符号串t，（我们将它表示成Tt1的形式，其中T∈∑，t1∈ ∑*）在D