《自然语言处理》15-对话系统.pptVIP

数据集与评价方法 常用数据集 Twitter数据集 OpenSubtitles数据集 STC ... * 数据集与评价方法 常用数据集 Twitter数据集 OpenSubtitles数据集 STC ... 评价方法 n-gram重叠度：BLEU，ROUGE，METEOR，CIDEr等 表示的相似度 n-gram多样性 人工评价 * * 第15章 对话系统 15.1 对话系统概述 15.2 开放域对话系统 15.3 任务型对话系统 任务型对话系统 任务型对话系统 向用户提供特定信息或服务的对话系统 * 订个明早七点的闹钟~ 放一首张震岳的《秘密》 给张三打电话 任务型对话系统 任务型对话过程示例—订机票 初始主要槽值 出发地 目的地 日期 座舱 * 出发地：空 目的地：空 日期：空 座舱：空 任务型对话系统示例 * 帮我订一张去北京的机票 请问您从哪里出发 出发地：空 目的地：北京 日期：空 座舱：空 任务型对话系统示例 * 帮我订一张去北京的机票 请问您从哪里出发 哈尔滨 请问您想预定哪种舱位，头等舱还是经济舱 出发地：哈尔滨 目的地：北京 日期：空 座舱：空 任务型对话系统示例 * 帮我订一张去北京的机票 请问您从哪里出发 哈尔滨 请问您想预定哪种舱位，头等舱还是经济舱 经济舱 请问您想什么时间出发 出发地：哈尔滨 目的地：北京 日期：空 座舱：经济舱 任务型对话系统示例 * 帮我订一张去北京的机票 请问您从哪里出发 哈尔滨 请问您想预定哪种舱位，头等舱还是经济舱 经济舱 请问您想什么时间出发 明天早上 请确认机票信息 出发地：哈尔滨 目的地：北京 日期：明天早上 座舱：经济舱 任务型对话系统 流水线式对话模型 自然语言理解 用户意图识别 语义槽填充 对话管理 对话状态追踪 对话策略优化 自然语言生成 * 流水线式对话模型 自然语言理解 意图识别-意图标签 语义槽填充-语义槽值信息 * Introduction of Artificial Intelligence 图灵测试（The Turing test）由艾伦·麦席森·图灵提出，指测试者与被测试者（一个人和一台机器）隔开的情况下，通过一些装置（如键盘）向被测试者随意提问。进行多次测试后，如果机器让平均每个参与者做出超过30%的误判，那么这台机器就通过了测试，并被认为具有人类智能。 * 粗筛：传统的文本检索算法（如BM25） 只考虑输入与资源库中用户请求间的相似度 目前的检索算法已经能够做到较高的准确率 * * 通常使用铰链损失函数 * 编码器将上文和用户请求编码为语义空间的向量 解码器根据编码结果逐词完成解码 很自然的使用循环神经网络建模 * 基于LSTM的任务型对话过程中对话状态追踪示例 * * 教材中的逻辑： 流水线存在如下问题，另一方面非任务型对话中迅速发展的端到端方法能够解决该问题 信用分配问题：效果不好时难以定位由哪个模块导致 在线自适应：模块相互依赖，对于下游模块不再是全局最优，下游模块在上游模块重新训练前的原始版本基础上进行训练 * 将自然语言理解，对话管理和自然语言生成部分集合成黑盒 * * 第 15 章 对话系统 自然语言处理 * 第15章 对话系统 15.1 对话系统概述 15.2 开放域对话系统 15.3 任务型对话系统 * 第15章 对话系统 15.1 对话系统概述 15.2 开放域对话系统 15.3 任务型对话系统 * 对话系统 对话系统 通常是指以自然语言为载体，用户与系统通过多轮交互实现特定交互目标的智能系统。 其中特定交互目标包括：完成特定任务、获取信息、建议或推荐、获得情感抚慰、社交陪伴等。 定义 输入：自然语言 今天好开心啊 输出：自然语言的回复，完成特定交互目标 哈哈哈，有什么开心事啊 对话系统 对话系统 “NLP最具挑战性 的任务之一” 语义理解 语言生成 “机器智能的试金石” “NLP技术集大成者” * 图灵测试—对话系统 * 图灵测试—对话系统 误判超过30% 认为具有人类智能 测试者向被测试者随意提问 被测试者：一个人和一台机器 * 工业界和学术界关注的热点 智能对话系统 Siri Cortana 天猫精灵 ....... 开放域对话系统 闲聊 聊爱好 聊日常 ... 任务型对话系统 订机票 找餐馆 查天气 ... * 对话系统类型 你会游泳吗 我不会呢 帮我找一个川菜馆 有一家很不错的店 * 第15章 对话系统 15.1 对话系统概述 15.2 开放域对话系统 15.3 任务型对话系统 开放域对话系统 * 开放域对话系统 闲聊场景使用自然语言与人交互 提高闲聊轮数 提高用户满意度 * 微软小冰 已经拥有庞大的用户群体 开放域对话系统 基本原理 给定