自然语言处理 课件 第11章 自然语言处理的挑战与趋势.pptx

第十一章自然语言处理的挑战与趋势

目录低资源自然语言处理任务自然语言推理从语言智能迈向通用人工智能第十一章自然语言处理的挑战与趋势

低资源语言01

低资源语言低资源语言：指使用者较少、数据资源匮乏的小语种或方言，与英语等高资源语言相对。小语种：斯瓦西里语、乌尔都语方言：藏语安多方言、粤语模型在低资源语言上性能欠佳，主要原因如下：数据稀缺：受经济、技术、文化等因素影响，使用者相对较少→数据资源相对匮乏语言复杂：拥有独特的语法结构、词汇系统和语义特征，与高资源语言差异显著→处理难度激增标注成本高：缺乏专业的标注人员与配套资源→数据标注的时间、人力成本极高第十一章自