高考作文自动评分关键技术研究-计算机技术专业论文.docxVIP

Classified Index: TP391.2 U.D.C: 681.37 Dissertation for the Master Degree in Engineering RESEARCH ON THE KEY TECHNOLOGY OF THE AUTOMATIC SCORING OF THE COLLEGE ENTRANCE EXAMINATION ESSAY Candidate： Supervisor： Academic Degree Applied for： Liu Mingyang Prof.Qin Bing Master of Engineering Speciality： Computer Technology Affiliation： Date of Defence： School of Computer Science Technology June, 2015 and Degree-Conferring-Institution： Harbin Institute of Technology 哈尔滨工业大学工程硕士学位论文 哈尔滨工业大学工程硕士学位论文 哈尔滨工业大学工程硕士学位论文 哈尔滨工业大学工程硕士学位论文 - - I - - - II - 摘 要 自动作文评分（Automated Essay Scoring,AES）就是让计算机能够对作文 进行评估和打分。随着自然语言处理技术的日益成熟，针对中文作文的自动评 分成为可能。作文是各种汉语考试中必然要考的科目，国家的中考、高考考生 数量巨大，而且近年来中国汉语水平考试（HSK）的考生数目也逐年增多。自 动作文评分因其具有效率高、客观性好等特点，因此中文作文自动评分技术的 深入研究很有必要，本文对高考作文自动评分进行了深入研究。 高考作文是针对本土学生进行的考试，而国外相对成熟的英文作文自动评 分系统都是针对母语非英语的学生，还有中文与英文的写作习惯也存在很大差 别，因此并不能照搬国外的方法。 本文提出了高考作文系统的有效评价指标、根据高考作文评分细则对作文 文采以及作文主题两项进行了深入研究。并且利用深度学习方法对自动学习作 文特征进行了尝试。 1 利用作文中的排比比喻修辞以及诗词引用来表征作文的文采，对排比修 辞进行了分类总结。提出了启发式的方法来对排比以及比喻修辞手法进行自动 识别。利用字典树组织古诗词资源，快速检索作文中出现的古诗词。将文采特 征加入到基准系统中，会对作文自动评分的性能有提高。 2 利用词频统计抽取作文的主题词；利用基于图的 TextRank 方法抽取作 文的主题词；利用 LDA 主题模型在作文集合上自动学习获得作文的主题分 布，并且提出了对得到的作文主题进行好坏程度自动度量的有效公式，在此基 础上，提出了自动判断一篇文章主题优劣的方法。将主题特征加入到基准系统 中，会对作文自动评分的性能有提高。 3 利用受限的玻尔兹曼机 RBM 模型在作文语料上自动学习出作文特征， 将作文映射到一个低维空间，然后利用岭回归模型在低维空间上进行训练测 试。通过观察预测分数可以看出，此方法对提高一类卷的召回率有帮助。 关键词 高考作文自动评分；作文文采；作文主题；受限的玻尔兹曼机 Abstract The automated essay scoring is that the computer can evaluate and score the essay .With the great progress of natural language processing ,it becomes possible to evaluate and score Chinese essay by computer . Essay must be tested in a variety of Chinese exams , and there are so many Chinese student take part in college entrance examination and senior high school entrance examination ,and there are more and more foreign students take part in HSK in recent years .The automated essay scoring is highly effective and objective ,so it is necessary to research on automated Chinese essay scoring. Chinese essay is an examination b