词法分析器的实现与设计.docVIP

. .. 题目： 词法分析器的设计与实现 TOC \o 1-3 \h \u HYPERLINK \l _Toc3023 一、引言 PAGEREF _Toc3023 3 HYPERLINK \l _Toc23300 二、词法分析器的设计 PAGEREF _Toc23300 4 HYPERLINK \l _Toc25794 2.1词的内部定义 PAGEREF _Toc25794 4 HYPERLINK \l _Toc803 2.2词法分析器的任务及功能 PAGEREF _Toc803 5 HYPERLINK \l _Toc20515 2.2.1任务 PAGEREF _Toc20515 5 HYPERLINK \l _Toc8173 2.2.2 功能： PAGEREF _Toc8173 5 HYPERLINK \l _Toc16034 2.3单词符号对应的种别码： PAGEREF _Toc16034 6 HYPERLINK \l _Toc24826 三、词法分析器的实现 PAGEREF _Toc24826 6 HYPERLINK \l _Toc17527 3.1主程序示意图： PAGEREF _Toc17527 7 HYPERLINK \l _Toc10400 3.2函数定义说明 PAGEREF _Toc10400 7 HYPERLINK \l _Toc17849 3.3程序设计实现及功能说明 PAGEREF _Toc17849 8 HYPERLINK \l _Toc29026 3.3.1关键字 PAGEREF _Toc29026 8 HYPERLINK \l _Toc1660 3.3.2关键字的定义 PAGEREF _Toc1660 8 HYPERLINK \l _Toc23581 3.3.3符合的关键字的查找 PAGEREF _Toc23581 8 HYPERLINK \l _Toc17630 四、词法分析程序的C语言源代码： PAGEREF _Toc17630 8 HYPERLINK \l _Toc5221 五、 结果分析： PAGEREF _Toc5221 11 摘要：词法分析是中文信息处理中的一项基础性工作。词法分析结果的好坏将直接影响中文信息处理上层应用的效果。通过权威的评测和实际应用表明,IRLAS是一个高精度、高质量的、高可靠性的词法分析系统。 众所周知,切分歧义和未登录词识别是中文分词中的两大难点。理解词法分析在编译程序中的作用，加深对有穷自动机模型的理解，掌握词法分析程序的实现方法和技术，用c语言对一个简单语言的子集编制一个一遍扫描的编译程序，以加深对编译原理的理解,掌握编译程序的实现方法和技术。 Abstract: lexical analysis is a basic task in Chinese information processing. The results of lexical analysis will directly affect the effectiveness of the application of Chinese information processing. The evaluation and practical application show that IRLAS is a high precision, high quality and high reliability lexical analysis system. It is well known that segmentation ambiguity and unknown word recognition are the two major difficulties in Chinese word segmentation. The understanding of lexical analyse the program at compile, deepen of finite automata model for understanding, master lexical analysis program implementation method and technology, using C language subset of a simple language compilation of a scanned again compiler, to deepen to compile the principle solution, master compiler implementation meth