词法分析器(c++语言描述).docVIP

#include iostream #include fstream #include string #include vector using namespace std; char buf[1000];//用于保存文件中的文本的缓冲区 string Get_text();//从文件中输入 bool Is_key(string str);//判断否为关键字 int Clear_space(string str,int n);//用来删除连续的空白和换行符 string Get_words(string str,int n,int m);//获得一个单词符号,从位置i开始查找。并且有一个引用参数j，用来返回这个单词最后一个字符在str的位置。 bool Is_operation(string str,int n);//判断字符是否为一个运算符 void Output_text(vectorpairint,string v);//将词法分析结果输出 bool Is_boundary(string str,int n);//判断字符是否为一个分界符 vectorpairint,string word_analyse(vectorstring vec);//对一个字符串数组进行词法分析 /*主函数*/ int main() { int start=0; int end=0; string single_string;//保存分析出来的单个词汇 vectorstring one_word_list;//保存分析出来的单个词汇的总表 vectorpairint,string analyse_result;//最终结果以int,string二元组的形式保存在vector容器中 cout**********************************************************\n; cout*******************欢迎使用词法分析器*********************\n\n; cout（当前文件夹下Input.txt作为输入，Output.txt作为输出）\n; cout**********************************************************\n; string file_text=Get_text();//file_text保存全部文本信息 while(1) { start=Clear_space(file_text,start); single_string=Get_words(file_text,start,end); if(end==-1) break; one_word_list.push_back(single_string); start=end+1; }; analyse_result=word_analyse(one_word_list); Output_text(analyse_result); cout**********************************************************\n; cout***词法分析已完成，结果保存在\Output.txt\文件中！！！*****\n; cout**********************************************************\n; getchar(); return 0; } //这个函数用来除去字符串中连续的空格和换行。第一个参数为目标字符串，第二个参数为开始位置。返回值为连续的空格和换行后的第一个有效字符在字符串的位置 int Clear_space(string str,int n) { while(1) { if(str[n]!= str[n]!=\n) return n; n++; } } //获得一个单词,从位置i开始查找。并且有一个引用参数j，用来返回这个单词最后一个字符在原字符串的位置。 string Get_words(string str,int n,int m) { string separator_list((){}, ;　\n+-*/=\#);//分隔符表 m=str.find_first_of(separator_list,n);//find_first_of返回匹配被查找字符串中某个字符的第一次出现位