Python自然语言处理 课件 电子04-2 -词性标注.pptx

Python自然语言处理第四章词性标注020103中文分词词性标注命名实体识别目录 CONTENT课前回顾中文分词介绍规则分词统计分词混合分词中文分词工具--Jieba课前回顾词性标注词性标注简介词性标注规范Jieba分词中的词性标注0 2词性标注简介 词性，也称为词类，是词汇的基本语法属性，用于描述词在上下文中的作用。词性标注是对句子中的每个词给出合适的词性标签，如名词、动词、形容词等。 中文作为一种孤立语言，其特点是缺乏严格意义上的形容标志和形态变化，中文词性标注的困难有以下四点：中文缺少词的形态变化，无法直接从词的形态识别词性。一词多词性很常见。词性划分标准不统一。未登录词问题。词性标注词性标注简介词性标注规范Jieba分词中的词性标注0 2词性标注规范词有很多词性，如名词、形容词、代词、动词等，词性标注要依据一定的规范，将词的词性表示为“n、”adj“、”r“、”v“等符号。中文词性多样，表示方法也各有不同，目前尚无统一的标注规范。北大词性标注集和宾州词性标注集是较为流行的两大类规范，两种标注规范各有所长。词性标注词性标注简介词性标注规范Jieba分词中的词性标注0 2Jieba分词中的词性标注Jieba的词性标注功能与分词功能类似，都是采用规则方法和统计方法相结合的方式。Jieba在词性标注的过程中采用词典匹配和HMM共同作用的方式，具体使用流程如下。1）采用正则表达式进