大数据语义分析与应用实践.pptx

大数据语义分析与应用实践Big Data Semantic Analysis and Application机器理解自然语言？右面的鸡才是最好的客观世界-思维-自然语言? 衰减效应：思维最多只能反映80%的客观世界；自然语言只能反映80%的思维：词不达意，答非所问；听众最多只能听懂80%；听懂的部分只有80%能反映到思维中；分析客观世界的最多只能利用80%。纲要科学的大数据观I文本大数据挖掘关键技术II大数据搜索挖掘大数据精准搜索关键技术III大数据语义应用实践IV? Wiki: Big data is the term for a collection of /wiki/Data_setdata /wiki/Data_setsets/wiki/Data_set so large and complex that it becomes difficult to process using on-hand database management tools or traditional data processing applications./view/9716309.htm?/view/9716309.htm /view/9716309.htm维克/view/9716309.htm托《/view/9424571.htm大数据时/view/9424571.htm代》：大数据指不用随机分析法（抽样调查）这样的捷径，而采用所有数据的方法。? 我们的见解：从客观存在的全量超大规模 变化的微观数据中，利用自 检索、机器学习等技术抽取 的方法学。科技革命，也是思想方法的，让数据说话; 承认并客观 性; 相关性挖掘替代因果大数据是指 异构、实时 处理、信息 转化为智慧是一场新的（全量分析 世界的混杂、多源 然语言 知识，革命。 地认识 推断）近半世纪来的三次革命计算机时代互联网时代大数据时代20世纪70年代20世纪90年代21世纪10年代Big Data计算方式的革命信息传播方式的革命决策方式的革命大数据颠覆决策模式usinessupply决策主体 决策 eedback依据 uratonsumer 决策emand 机制 决 效redictionealtion策 率ime大数据时代的特征省 好 快 多纲要科学的大数据观I文本大数据挖掘关键技术II大数据搜索挖掘大数据精准搜索关键技术III大数据语义应用实践IV大数据应对之道:知著、见微、晓意大数据更大意义上是非结构化内容理解NLPIR大数据 语义挖掘JZSearch 精准搜索 引擎知识本体 构建与知 识管理NLPIR大数据搜索与挖掘技术开发平台? NLPIR网络搜索与挖掘共享开发平台，针对语言信息内容 处理的全技术链条的共享开发平台。15年专业研究与工程 积累，提供应用软件及各平台下的二次开发包，非商用永 久免费。下载/下载/下载。? 核心功能包括：搜索类：全文精准检索；语言类：新词发现，分词标注，统计分析与术 语翻译；关键词提取；文档类：文本聚类及热点分析；分类过滤；自动摘要；文档去重；情感分析NLPIR大数据语义分析技术的在线演示网址：/nlpir//nlpir/产品下载试用网址：/NLPIR-team/NLPIRNLPIR大数据语义分析技术的在线演示-支持所有平台Windows 32 位/64位操 作系统Linux32位/64位操作 系统Android操作系统IOS操作系 统国产红旗等C语言C++语言C#语言JAVA语言 等几乎囊括了 市面所有主 流的编程语言? 文本聚类：发现热门事件纲要科学的大数据观I文本大数据挖掘关键技术II大数据搜索挖掘大数据精准搜索关键技术III大数据语义应用实践IV搜索基本功能：多字段关联搜索、指定字段排序、精确搜索与模糊搜索搜索特色功能：内嵌正负面情感等极性分析、语义联想搜索、临近搜索、搜 索结果去重；内嵌了ICTCLAS智能分词系统；数据库实时同步：数据库增删改10秒内即可同步到搜索；搜索维护功能：单点故障容错；支持增量索引；自动备份与恢复机制；自动 缓存机制；自动优化机制；搜索屏蔽与恢复；JZSearch内部语法示例? [FIELD] * [NEAR] 尚福林 ##负面JZSearch## 12? [FIELD] price [RANG] 1.0 9.0 [FIELD] name [AND] 牛奶儿童? [FIELD] name [PREF] 张姓名字段name必须以“张”作为前缀开头? [FIELD] id [PREC] 123字段id必须以“123”精准匹配，如“1234”或者 “0123”均不作为匹配结果；? [field] content [complex] 统计局||中国统计局||CPI 骗人||砖家 10要求content字段内，