自然语言处理NLP的坑到底有多大.PDF

自然语言处理 NLP的坑到底有多大？ 专知 2018-11-12 【导读 】自然语言交互是非常难的行业 ，没有积累很难做 出来好的产品。这个行业不适合急功近利。 我们说 的 NLP其实主要是人机 自然语言交互。 NLP也包含好几个细分领域 ：搜索 、机器翻译 、问答 等。我人机 自然语言交互也就是问答。 很多年前 ，别人说我做的东西不过就是关键字模糊查询 ，他找几个会编程的高 中生都能做。这基本上 就是无知无畏了。所以我当时也没去争辩。 这个行业就是我朋友说的 ，外行看简单 ，进来发现很难那种。其实 自然语言交互就是个坑。 为什么会出现这种情况？ 因为第一 ，这个行业没有标准。有人说谁家机器人很聪 明 ，谁家机器人很厉害 ，都是凭感觉的。有个 同行在行业群里问有没有什么标准测试机器人水平 ，喊了很长时间也没有找到。有人认为图灵测试是 一个标准 ，但至今没有多少机器人能通过图灵测试。即便有公司声称他们的机器人通过了图灵测试 ， 也很难得到公众认可。我认为原 因在于 ，机器人根本不可能完全伪装成人。另外 ，图灵测试随意行太 强 ，很难给 出客观并科学的评测结果。 为什么这个行业没有标准呢？因为问答是个新领域 ，而很多时候人们把它当成搜索。搜索给的结果是 模糊的 ，问答需要给精准结果。搜索用关键字模糊查询就行 ，问答要关注语义的细微差别。