实验一(词法分析)...docVIP

南京信息工程大学实验(实习)报告 实验目的 学会针对DFA转换图实现相应的高级语言源程序。 深刻领会状态转换图的含义，逐步理解有限自动机。 掌握手工生成词法分析器的方法，了解词法分析器的内部工作原理。 实验内容 计算机程序设计语言的编译程序的词法分析部分实现。给出算法的流程图及有穷状态自动机的模型（可以用矩阵或者状态图表示）从左到右扫描每行该语言源程序的符号，拼成单词，换成统一的内部表示（token）送给语法分析程序。 为了简化程序的编写，有具体的要求如下： 数仅仅是整数。 空白符仅仅是空格、回车符、制表符。 代码是自由格式。 注释应放在花括号之内，并且不允许嵌套 实验要求 要求实现编译器的以下功能： 按规则拼单词,并转换成二元式形式 删除注释行 删除空白符 (空格、回车符、制表符) 列表打印源程序，按照源程序的行打印，在每行的前面加上行号，并且打印出每行包含的记号的二元形式 发现并定位错误 词法分析进行具体的要求： 记号的二元式形式中种类采用枚举方法定义；其中保留字和特殊字符是每个都一个种类，标示符自己是一类，数字是一类；单词的属性就是表示的字符串值。 词法分析程序当识别一个单词完毕，采用返回值的形式返回符号的种类，同时采用程序变量的形式提供当前识别出记号的属性值。 标示符和保留字的词法构成相同，为了更好的实现，把语言的保留字建立一个表格存储，这样可以把保留字的识别放在标示符之后，用识别出的标示符对比该表格，如果存在该表格中则是保留字，否则是一般标示符。（选做） 实验步骤 （1）词法分析器的设计方法有如下四个步骤： 1.写出该语言的词法规则。 2.把词法规则转换为相应的状态转换图。 3.把各转换图的初态连在一起，构成识别该语言的自动机。 4.设计扫描器；把扫描器作为语法分析的一个过程，当语法分析需要一个单词时，就调用扫描器。扫描器从初态出发，当识别一个单词后便进入终态，送出二元式。 词法分析需要一个单词时，扫描器取单词的程序流程图如下： （2）词法分析器的输出形式 词法分析器输出的单词符号常常表示为二元式：（单词种别，单词符号的属性值） —单词种别通常用整数编码。 —标识符一般统归为一种。常数按类型（整、实、布尔等）分种。关键字可视其全体为一种，也可以一字一种。采用一字一种的分法实际处理起来较为方便。运算符可采用一符一种的方法。至于界符一般也采用一符一种的分法。 核心代码及其功能  #include ctype.h #include string.h #include stdio.h /*函数声明*/ int search(char searchchar[],int wordtype); char alphaprocess(char buffer); char digitprocess(char buffer); char otherprocess(char buffer); void error(); /*主函数*/ void main() { /*自定义函数的声明*/ char cbuffer; if ((fp=fopen(example.cpp,r))==NULL) /*以只读方式打开文件example.c，NULL在 stdio.h文件中已被定义为0*/ printf(error); else { cbuffer=fgetc(fp); /*文件不为空则从文件中取字符*/ while (cbuffer!=EOF) /*EOF文件结束标志*/ { if(cbuffer== ||cbuffer==\n||cbuffer==\t) /*掠过空格和回车符*/ { cbuffer=fgetc(fp); //id=4; } else if(isalpha(cbuffer)) cbuffer=alphaprocess(cbuffer); /*检查cbuffer是否为字母，是则调用alphaprocess()函数*/ else if (isdigit(cbuffer)) cbuffer=digitprocess(cbuffer); /*检查cbuffer是否为数字0～9，是则调用digitprocess()函数*/ else cbuffer=otherprocess(cbuffer); /*非上述两者则调用otherprocess()函数*/ } } } /*主函数结束*/ /*处理读取字符为字母的情况*/ char alphaprocess(char buffer) { int atype; int i=-1; char alphatp[20]; /*字符数组存储从文件中读取的字符*/