汇编原则第3章词汇分析.pptVIP

第三章 词法分析;回忆：词法分析程序的功能：对构成源程序的字符串从左到右进行扫描和分解，并根据语言的词法规则识别出一个个具有独立意义的单词符号。 具体： ①设计成单独一遍扫描。 ②设计成子程序，当语法分析器需要新单词时调用它。;§3.1 词法分析程序的输入输出;单词种别码;单词自身值;③用相应符号表项的指针值来区分同类中不同的单词符号。 K表： I表： C表：;§3.2 词法分析程序的设计一.输入、预处理;二.单词符号的识别以及超前搜索;状态转换图: 是由一组矢线连接的有限个结点所组成的有向图。其作用是识别相应的字符串。 例如: 标识符: I→ l | I l | I d 初态 =① ② ③ 终态 例如: 整数→数字 | 整数数字 =① ④ ⑤; 利用状态转换图识别(或接受)字符串的过程: 从初态出发, 按照与符号串余留部分中最左字符相匹配的原则, 游历状态图, 直至符号串的末端为止。如果这时恰好到达终态, 则符号串为该文法的句子；否则不是。例如：识别 num1、1001 初态 =① ② ③ 终态 ④ ⑤; 大多数程序设计语言的单词符号都可以用状态转换图来识别。可以用一张状态转换图或若干张状态转换图来描述一个语言的所有单词。例如：图3.3是简单语言词法分析的状态转换图。;2.由正规文法构造状态转换图(1).右线性文法 = 状态转换图;例如: 文法G[Z] : Z → 0A A → 0A | 0B B → 1A | ε 语言为 : L(G)=0 ( 0 | 01 )* 0 求 : 状态转换图。;(2).左线性文法 = 状态转换图; 例如: 文法G[S] : S → S1 | U1 U → U0 | 0;四.状态转换图 = 程序;int code value; strToken=; GetChar();GetBC(); if (IsLetter()) { while(IsLetter() || IsDidit() ) { Concat(); GetChar(); } Retrace(); code=Reserve(); if (code==0) { value=InsertId(strToken); return($ID,Value); } else return(code,-); } else if ( Isdigit() ) { while(IsDigit()) { Concat(); GetChar(); } Retrace(); value=InserConst(strToken); return($INT,Value); };else if(ch===) return($ASSIGN,-); else if(ch==+) return($PLUS,-); else if(ch==*) { GetChar(); if(ch==*) return($POWER,-); Retract(); return($STAR,-); } else if(ch==;) return($SEMICOLON,-); else if(ch==() return($LPAR,-); else if(ch==)) return($RPAR,-); else if(ch=={) return($LBRACE,-); else if(ch==}) return($RBRACE,-); else ProcError();;§3.3 单词符号的两种定义方式;一.正规式与正规集的递归定义:;例①：令∑＝｛a , b }， 下面是∑上的正规式和相应的正规集． 正规式 正规集 ba* ∑上b开头任意个a a(a|b)* ∑上所有以a为首的字 a+b+ ∑上ambn , m,n≥1的字 例②：令∑＝｛A，B，０，1 }，则 正规式 正规集 （A|B)(A|B|0|1)* ∑上的标识符的全体 （0|1)(0|1)* ∑上数的全体 结论：正规式是正规语言的另一种表示方法． 定义：若正规式R1和R2所描述的正规集相同，则称正规式R1和R2等价，并记为： R1＝R2 。 例如：b(ab)*=(ba)*b (a|b)*=(a* b*)* 。;二、正规文法与正规式 1、正规文法到正规式的转换 1 Z=0A ① A=0A+0B ② B=1A+ ε ③ 2利用求解规则R： 若x=αx+β 则解为x= α*β 若x=xα+β 则解为x