竞争情报系统中一种自动文本分类策略 - 图书情报工作.pdf

＞＞ 第５６卷 第２４期　２０１２年１２月　　 竞争情报系统中一种自动文本分类策略 ———以民用航空客服行业为例　　　　　　　 秦宝宝　宋继伟　董　尹　牛　青　吕美香　陈　彬　李　骁 南京大学信息管理学院　南京２１００９３ 〔摘要〕将自动文本分类引入竞争情报系统，并结合民航客服业的实际应用场景展开研究。在对文本分类的理论 基础进行研究与分析的基础上，设计一种自动分类策略，其核心是针对传统机器学习方法依赖历史数据的局限， 优化特征选择和学习样本获取方法。选用ＳＶＭ算法，详细描述分类词表构建、分类规则提取、分类模型训练等过 程，最终取得较为理想的实际效果。 〔关键词〕自动文本分类　竞争情报系统　民用航空　客户服务　支持向量机 〔分类号〕Ｇ３５４ ＡＳｔｒａｔｅｇｙｏｆＡｕｔｏｍａｔｉｃＴｅｘｔＣａｔｅｇｏｒｉｚａｔｉｏｎｉｎＣｏｍｐｅｔｉｔｉｖｅＩｎｔｅｌｌｉｇｅｎｃｅＳｙｓｔｅｍ：ＴａｋｉｎｇＣｉｖｉｌＡｖｉａｔｉｏｎ ＣｕｓｔｏｍｅｒＳｅｒｖｉｃｅＩｎｄｕｓｔｒｙａｓａｎＥｘａｍｐｌｅ ＱｉｎＢａｏｂａｏ　ＳｏｎｇＪｉｗｅｉ　ＤｏｎｇＹｉｎ　ＮｉｕＱｉｎｇ　ＬüＭｅｉｘｉａｎｇ　ＣｈｅｎＢｉｎ　ＬｉＸｉａｏ ＳｃｈｏｏｌｏｆＩｎｆｏｒｍａｔｉｏｎＭａｎａｇｅｍｅｎｔ，ＮａｎｊｉｎｇＵｎｉｖｅｒｓｉｔｙ，Ｎａｎｊｉｎｇ２１００９３ 〔Ａｂｓｔｒａｃｔ〕Ｔｈｉｓｐａｐｅｒｆｏｃｕｓｅｓｏｎｔｈｅａｐｐｌｉｃａｔｉｏｎｏｆａｕｔｏｍａｔｉｃｔｅｘｔｃｌａｓｓｉｆｉｃａｔｉｏｎｉｎｔｈｅｃｏｍｐｅｔｅｎｃｅｉｎｔｅｌｌｉｇｅｎｃｅｓｙｓｔｅｍ（ＣＩＳ）ｂａｓｅｄｏｎ ｔｈｅｐｒａｃｔｉｃａｌａｐｐｌｉｃａｔｉｏｎｓｃｅｎａｒｉｏｏｆｔｈｅｃｉｖｉｌａｖｉａｔｉｏｎｉｎｄｕｓｔｒｙ．Ａｆｔｅｒｒｅｓｅａｒｃｈｉｎｇａｎｄａｎａｌｙｚｉｎｇｔｈｅｔｈｅｏｒｅｔｉｃａｌｂａｓｉｓｏｆａｕｔｏｍａｔｉｃｔｅｘｔ ｃｌａｓｓｉｆｉｃａｔｉｏｎ，ｉｔｄｅｓｉｇｎｓａｎｅｗｓｔｒａｔｅｇｙ．Ｔｒａｄｉｔｉｏｎａｌｍａｃｈｉｎｅｌｅａｒｎｉｎｇｍｅｔｈｏｄｒｅｌｉｅｓｏｎｔｈｅｈｉｓｔｏｒｉｃａｌｄａｔａｈｅａｖｉｌｙ，ｗｈｉｃｈｍａｋｅｓｔｈｅ ｐｒｏｃｅｓｓｃｏｍｐｌｅｘ．Ｔｈｉｓｐａｐｅｒｏｐｔｉｍｉｚｅｓｔｈｅｍｅｔｈｏｄｏｆｆｅａｔｕｒｅｓｅｌｅｃｔｉｏｎａｎｄｉｌｌｕｓｔｒａｔｅｓｈｏｗｔｏｏｂｔａｉｎｌｅａｒｎｉｎｇｓａｍｐｌｅｓ．ＵｓｉｎｇＳＶＭａｓｔｈｅ ｃｏｒｅａｌｇｏｒｉｔｈｍ，ｉｔｇｉｖｅｓａｄｅｔａｉｌｅｄｄｅｓｃｒｉｐｔｉｏｎｏｆｔｈｅｐｒｏｃｅｓｓｏｆｃｌａｓｓｉｆｉｃａｔｉｏｎｖｏｃａｂｕｌａｒｙｂｕｉｌｄｉｎｇ，ｃｌａｓｓｉｆｉｃａｔｉｏｎｒｕｌｅｓｅｘｔｒａｃｔｉｎｇ，ｃｌａｓｓｉ ｆｉｃａｔｉｏｎｍｏｄｅｌｔｒａｉｎｉｎｇ，ａｎｄｕｌｔｉｍａｔｅｌｙａｃｈｉｅｖｅｓａｓａｔｉｓｆａｃｔｏｒｙｐｒａｃｔｉｃａｌｅｆｆｅｃｔ． 〔Ｋｅｙｗｏｒｄｓ〕ａｕｔｏｍａｔｉｃｔｅｘｔｃｌａｓｓｉｆｉｃａｔｉｏｎ　ｃｏｍｐｅｔｉｔｉｖｅｉｎｔｅｌｌｉｇｅｎｃｅｓｙｓｔｅｍ　ＣＩＳｃｉｖｉｌａｖｉａｔｉｏｎ　ｃｕｓｔｏｍｅｒｓｅｒｖｉｃｅ　ＳＶＭ 工作人员造成很大的负担。为了更加有效地查找、过 １　引　言 滤和组织复杂的海量情报信息，分类必须成为竞争情 报的一项重要工作内容。因此，综合应用计算机自动 　　自动文本分类是指计算机根据预先设置的分类体 化技术，研究和实现竞争情报系统的自动分类功能就 系为文本指定类别，它方便用户快速定位所需的有效 成了一项迫切的需求。 信息，同时克服了传统的人工分类诸如分类周期长、费 　　本文中的竞争情报系统以民航客服行业为背景， 用高、效率低的缺点，已成为一项具有较大使用价值的 自动文本分类是本系统的关键模块之一。但是在开发 关键技术。文本分类在自然语言处理与理解、信息组 过程中发现，虽然一些算法在实验环