基于transformer的泰语自动分词系统设计与实现.docx

题目：基于Transformer的泰语自动分词系统设计与实现

摘要

近年来，随着我国日益成熟的对外政策和生产力的提高，我国和泰国的文化交流、经商贸易合作发展迅速。我国在泰国的出口市场位列第三，还将继续上升，也是泰国的第二大物质进口来源国，双边的贸易及文化交流越来越密切。为方便我国与泰国的交流来往，泰语的自然语言处理具有极大的研究意义和使用价值。分词是泰国自然语言处理具有挑战性的预处理步骤，分词的结果直接影响词性标注、语义分析等NLP（自然语言处理）的下游任务。目前现有的分词方法有基于字典匹配方法和基于机器学习方法，这两类方法没有使用子结构来构建模型，因此会有速度较慢、交集切分歧义、组合