元宇宙多模态触觉感知与交互的数据手套技术研究.pdfVIP

测控技术

·５０·２０２４４３４力触觉技术专刊

年第卷第期

元宇宙多模态触觉感知与交互的数据手套技术研究

１２３４１１

任弘毅，刘畅，陈铭，杨文珍，ＭＵＫＨＥＲＪＥＥＭ，潘志庚

（１．南京信息工程大学人工智能学院，江苏南京２１００４４；２．之江实验室天基计算系统研究中心，浙江杭州３１１１２１；

浙江理工大学机械工程学院，浙江杭州；之江实验室智能制造计算研究中心，浙江杭州）

３．３１００１８４．３１１１２１

摘要为了提升元宇宙虚拟手交互的逼真性研发了一种多模态触觉感知与交互的数据手套系统该系

：，，

统具有硬件集成度高、响应速度快、数据采集精确和轻便易穿戴的特点。人手穿戴此数据手套后，系统

能够采集人手操作时的温度指尖按压力和手指弯曲程度等数据并把这些数据实时赋予给虚拟环境中

、，

，。，

的虚拟手让虚拟手具有类似人手的动作行为和感知提出了一种多通道循环采集数据方法该方法可

以高效且准确地捕捉温度指尖按压力和手指弯曲程度等异构多模态数据减轻了数据手套的硬件电路

、，

复杂性。实验结果表明，此数据手套在获取实时手指动作信息方面精度较高，提升了虚拟手动作的灵活

性直观性和自然性

、。

关键词：数据手套；人机交互；嵌入式系统；虚拟现实；元宇宙

中图分类号：ＴＰ３９１．９；ＴＰ２１２．９文献标志码：Ａ文章编号：１０００－８８２９（２０２４）０４－００５０－０６

ｄｏｉ：１０．１９７０８／ｊ．ｃｋｊｓ．２０２４．０４．００７

ＲｅｓｅａｒｃｈｏｎＭｕｌｔｉｍｏｄａｌＴａｃｔｉｌｅＰｅｒｃｅｐｔｉｏｎａｎｄＩｎｔｅｒａｃｔｉｏｎ

ＤａｔａＧｌｏｖｅｓｆｏｒｔｈｅＭｅｔａｖｅｒｓｅ

１２３４１１

ＲＥＮＨｏｎｇｙｉ牞ＬＩＵＣｈａｎｇ牞ＣＨＥＮＭｉｎｇ牞ＹＡＮＧＷｅｎｚｈｅｎ牞ＭＵＫＨＥＲＪＥＥＭ牞ＰＡＮＺｈｉｇｅｎｇ

牗１．ＳｃｈｏｏｌｏｆＡｒｔｉｆｉｃｉａｌＩｎｔｅｌｌｉｇｅｎｃｅ牞ＮａｎｊｉｎｇＵｎｉｖｅｒｓｉｔｙｏｆＩｎｆｏｒｍａｔｉｏｎＳｃｉｅｎｃｅ＆Ｔｅｃｈｎｏｌｏｇｙ牞Ｎａｎｊｉｎｇ２１００４４牞Ｃｈｉｎａ牷

２．ＴｈｅＣｅｎｔｅｒｆｏｒＳｐａｃｅＢａｓｅｄＣｏｍｐｕｔｉｎｇＳｙｓｔｅｍｓＲｅｓｅａｒｃｈ牞ＺｈｅｊｉａｎｇＬａｂ牞Ｈａｎｇｚｈｏｕ３１１１２１牞Ｃｈｉｎａ牷

３．ＳｃｈｏｏｌｏｆＭｅｃｈａｎｉｃａｌＥｎｇｉｎｅｅｒｉｎｇ牞ＺｈｅｊｉａｎｇＳｃｉＴｅｃｈＵｎｉｖｅｒｓｉｔｙ牞Ｈａｎｇｚｈｏｕ３１００１８牞Ｃｈｉｎａ牷