面向多点交互的多模态振动反馈触觉再现系统

TP242.6; 近年来,多点交互和多模态融合的力触觉再现系统由于能够进一步提高人机交互的真实感,已经成为该领域的研究热点.基于Leap Motion的多手指位置检测模块、振动触觉再现模块、NRF51822蓝牙通信模块、视觉再现模块和CHAI3D构建的虚拟环境等,设计实现了多点自然交互的、触觉和视觉相融合多模态触觉再现系统.为了验证系统的可行性和有效性,开展了虚拟物体轮廓感知实验和立方体放置任务实验.实验结果表明:虚拟物体轮廓感知实验平均识别率为87.9％;相比单一视觉再现模式,视觉和触觉再现融合模式完成相同任务的时间能节省47.7％.所设计的多点交互触觉再现系统,具有成本低、体积小和控制方法...

Full description

Saved in:
Bibliographic Details
Published in国防科技大学学报 Vol. 43; no. 3; pp. 52 - 57
Main Authors 陆熊, 林闽旭, 高永强, 黄晓梅, 陈春晓, 刘佳
Format Journal Article
LanguageChinese
Published 南京航空航天大学自动化学院,江苏南京 211106%南京信息工程大学自动化学院,江苏南京 210044 28.06.2021
Subjects
人机交互
Leap Motion
手指位置检测
振动触觉再现
多点交互
Online AccessGet full text
ISSN1001-2486
DOI10.11887/j.cn.202103007

Cover

More Information
Summary:TP242.6; 近年来,多点交互和多模态融合的力触觉再现系统由于能够进一步提高人机交互的真实感,已经成为该领域的研究热点.基于Leap Motion的多手指位置检测模块、振动触觉再现模块、NRF51822蓝牙通信模块、视觉再现模块和CHAI3D构建的虚拟环境等,设计实现了多点自然交互的、触觉和视觉相融合多模态触觉再现系统.为了验证系统的可行性和有效性,开展了虚拟物体轮廓感知实验和立方体放置任务实验.实验结果表明:虚拟物体轮廓感知实验平均识别率为87.9％;相比单一视觉再现模式,视觉和触觉再现融合模式完成相同任务的时间能节省47.7％.所设计的多点交互触觉再现系统,具有成本低、体积小和控制方法简单等优点,为促进多模态人机交互技术的发展和广泛应用奠定了重要基础.
ISSN:1001-2486
DOI:10.11887/j.cn.202103007