非结构化文本数据发展现状及其在.PDF

城市金融研究所 非结构化文本数据发展现状及其在 研 商业银行的应用模式探索 究 要点 报  目前，部分行业已经开始关注非结构化文本数据 所带来的商业价值，然而，非结构化数据分析 果转化却出现与非结构化数据的规模和增长速度 告 相背离的现象，文本挖掘商业化过程中存在的问 题主要源自应用场景的缺乏、文本数据分析的复 杂程度、文本数据监管不力以及对文本数据重视 程度不高。 2016年第124期  随着金融行业的IT投资规模逐渐增大，对文本数 2016.12.22 据的分析挖掘和应用需求也不断增加。目前，根 据金融行业的文本数据特点主要衍生出金融文本 资讯类服务和基于文本数据的金融信息挖掘与决 执笔：宋丹 冯乾 策两种数据应用模式，其中以证券行业应用最为 广泛。 dan.song@  文本数据的挖掘与应用目前在商业银行处于萌芽 qian.feng@ 阶段，主要应用场景包括意见挖掘、舆情分析、 客户画像、客户经理服务效率提升和个性化内容 推荐等等，商业银行发展文本数据的挖掘和应用 还要注重文本数据的收集和治理、强化软硬件资 源、文本数据与结构化数据的融合、自身禀赋挖 掘与对外协作以及数据安全等问题。 重要声明：本报告中的原始数据来源于官方统计机构和市场研究机构已公开的资料，但不保证所载信息的准确性和完整 性。本报告不代表研究人员所在机构的观点和意见，不构成对阅读者的任何投资建议。本报告 （含标识和宣传语）的版 权为中国工商银行城市金融研究所所有，仅供内部参阅，未经作者书面许可，任何机构和个人不得以任何形式翻版、复 制、刊登、上网、引用或向其他人分发。 非结构化文本数据发展现状及其在商业银行的应用模式探索 非结构化文本数据发展现状及其在商业银行的 应用模式探索 一、非结构化文本数据应用发展现状及难点 （一）非结构化数据应用发展现状 随着互联网、多媒体、传感器和社交网络的应用，每时每刻都有大量的数 据产生，有资料表明2015年全球数据总量达到8.6ZB，并且以年复合增长率50% 的速度增长。数据增长的同时，数据的使用和分析市场迅猛扩张，据易观数据 统计，2015年我国大数据市场规模115.9亿元，比2014年增长38% （见图1）。 数据来源：易观国际 图1 我国大数据市场规模（2011-2015） 大数据主要包含了结构化数据、半结构化数据和非结构化数据，其中非结 构化数据占据了数据总量的80%。非结构化数据是指其字