沉浸式虚拟现实系统旨在创建一个高度真实的三维虚拟世界,操作者以直观而自然的方式与这个虚拟世界交互,并获得与真实世界一致的视觉、听觉和力觉等感知。人类的力觉感知有这样一个特性:当各种混淆或者自相矛盾的信息呈现给感觉器官时,力觉感知所提供的关于世界的线索是认知系统最为信任的。在沉浸式虚拟现实系统中,力觉感知和交互是保证系统沉浸感和真实感的关键要素。本书针对虚实融合的双指力觉交互技术进行研究,相关成果在虚拟拆装、模拟训练、娱乐游戏、数据可视化等领域有重要意义。
为了实现真正沉浸式的虚拟环境,首先应该实现虚拟空间与真实空间的融合统一。本书第2章深入研究了视差式立体显示技术原理,采用真实感立体图像对的生成算法,保证了立体成像位置的准确性。针对虚拟空间与真实空间的尺度不统一问题,提出了以投影屏幕作为中介的尺度统一方法,实现了虚拟空间与真实空间坐标系的重合。沉浸式虚拟现实系统对力觉交互设备有特殊的要求,不但要有大的操作空间,还要适合对虚拟物体的直接操作,不能阻碍用户视线,因此本书介绍了线绳式力觉交互系统。第3章主要阐述线绳式大操作空间双指力觉交互系统的实现问题。为提高力觉交互系统的表现阻抗范围,第4章对力觉交互系统表现刚度进行了研究。为了实现对虚拟物体的第一人称直接操作,做到“所触即所见”,必须保证视觉和力觉空间的精确融合。第5章研究了沉浸式虚拟现实系统中所涉及的坐标系,对发生变形和位置检测不准确的坐标系进行了校正,然后通过坐标转换,将视点坐标系和力觉空间坐标系都统一到以投影屏幕中心为原点的投影系统坐标系中。第6章中研究了双指直接力觉交互,用户不仅能触摸到虚拟物体,而且能对其进行抓持、移动、翻转等操作。研究中将操作分为六种状态,分别计算双指所受交互力,结合物理引擎的应用,极大提高了交互过程真实感。多人参加的评价实验表明,融合后的系统基本消除了视觉和力觉感知冲突,能实现对虚拟物体的直接操作。
本书主要章节由李建完成写作,石文天负责第2章中多屏幕融合部分的写作。本书的出版得到了北京工商大学的支持,特此感谢!
李建于北京工商大学
2024年5月