实验一词法分析程序的设计与实现.docVIP

实验项目一 词法分析程序的设计与实现 实验目的 1. 学会针对DFA转换图实现相应的高级语言源程序。 2. 深刻领会状态转换图的含义，逐步理解有限自动机。 3. 掌握手工生成词法分析器的方法，了解词法分析器的内部工作原理。 实验内容 计算机语言的编译程序的词法分析部分实现。从左到右扫描每行该语言源程序的符号，拼成单词，换成统一的内部表示（token）送给语法分析程序。为了简化程序的编写，有具体的要求如下： 1） 整数或浮点数。 2） 空白符仅仅是空格、回车符\n、制表符\t。 3） 代码是自由格式。 4） 注释应放在花括号或者/* */或者 // 之内，并且不允许嵌套 要求实现编译器的以下功能： 1） 按规则拼单词,并转换成二元式形式 2） 删除注释行 3） 删除空白符 (空格、回车符、制表符)，即中间表示形式中不含空白符。 4） 列表打印源程序，按照源程序的行打印，在每行的前面加上行号，并且打印出每行包含的记号的二元形式 5） 能发现并定位词法错误 词法分析建议： 1） 记号的二元式形式中种类采用枚举方法定义；其中保留字和特殊字符是每个都一个种类，标示符自己是一类，数字是一类；单词的属性值就是表示的字符串值。 2） 词法分析的具体功能实现是一个函数GetToken()，每次调用都对剩余的字符串分析得到一个单词或记号识别其种类，收集该记号