迈向会讲故事人形机器人.pdfVIP

迈向一个会讲故事的人形机器人

12342232

R.格林,C.达莱,Q.安乐,O.德鲁,D.,J.C.马丁,C.佩拉肖,A.里利亚德,S.罗

2

塞特

1234

阿尔德巴兰机器人公司，LIMSI‑CNRS，TelecomParisTech‑CNRS，Accapela，

rgelin@aldebaran‑，{quoc，catherine.pelachaud}@telecom‑paristech.fr，{cda，doukhan，

martin，rilliard，rosset}@limsi.fr，olivier.deroo@acapela‑，

我们描述了一个项目的设置，该项目旨在赋予机器人向故事的语言结构

儿童讲述故事的能力。文中详细介绍了为生成可信的讲本项目这一部分所探讨的主要问题包括：故事的言语结

故事所需的语言和行为表现力所做出的选择。构？我们如何对其加以描述？或者更具体地说，

哪些结构和语言信息对表现力（在语音或手势层面）是

引言有用的？显然，有用的信息是多层次的。在本研究中，

本文报告了GVLEX项目中正在进行的工作。这个多学我们并不打算对每个感的层次都设计完整的分析，

科项目的目标是设计并测试一个讲故事的人形机器人。

而是设计一种多层分析方法，以故事中值得关注的

理想情况下，该机器人应能够自动处理给定的童话或

部分。基于Propp（1928）和Greimas（1966）的经

短篇故事，并为儿童观众表演。这样一个项目本质上是

典研究，我们定义了两个不同的分析层次，即“结构”

跨学科的，涉及：文本分析（话语、表达、角色），富

层次和“词汇元素”层次。在结构层次上，一个故事包

有表现力的语音合成（特别是富有表现力的韵律合

含标题、情节开端，可能随后是包含触发的场景，

成），富有表现力的姿态和手势合成，以及所有这些层

并由此展开故事。故事的可以由一系列场景组成，

面和方面的协调。所使用的机器人是Nao，这是一个

场景之间可选择性地穿插副歌。故事最终以尾声结束。

中等规模的自主人形机器人，如图1所示。本文其余部

至于词汇元素，我们提出了一个适用于短篇故事的扩展

分描述了该项目中涉及的不同任务和处理层次、采用的

命名实体（ENE）定义：包括故事中所有类型的“人

方法、设计和录制的多和语音语料库，以及获得的

物”，即不仅指人类，还包括动物、植物等；“定位”

初步结果。

和“时间”信息则较为常规。ENE中的人物信息有助于

向Nao有关说话者的信息（是叙述者在说话