当前位置: X-MOL 学术IEEE Trans. Vis. Comput. Graph. › 论文详情
Our official English website, www.x-mol.net, welcomes your feedback! (Note: you will need to create a separate account there.)
EarVR: Using Ear Haptics in Virtual Reality for Deaf and Hard-of-Hearing People.
IEEE Transactions on Visualization and Computer Graphics ( IF 4.7 ) Pub Date : 2020-02-13 , DOI: 10.1109/tvcg.2020.2973441
Mohammadreza Mirzaei , Peter Kan , Hannes Kaufmann

Virtual Reality (VR) has a great potential to improve skills of Deaf and Hard-of-Hearing (DHH) people. Most VR applications and devices are designed for persons without hearing problems. Therefore, DHH persons have many limitations when using VR. Adding special features in a VR environment, such as subtitles, or haptic devices will help them. Previously, it was necessary to design a special VR environment for DHH persons. We introduce and evaluate a new prototype called "EarVR" that can be mounted on any desktop or mobile VR Head-Mounted Display (HMD). EarVR analyzes 3D sounds in a VR environment and locates the direction of the sound source that is closest to a user. It notifies the user about the sound direction using two vibro-motors placed on the user's ears. EarVR helps DHH persons to complete sound-based VR tasks in any VR application with 3D audio and a mute option for background music. Therefore, DHH persons can use all VR applications with 3D audio, not only those applications designed for them. Our user study shows that DHH participants were able to complete a simple VR task significantly faster with EarVR than without. The completion time of DHH participants was very close to participants without hearing problems. Also, it shows that DHH participants were able to finish a complex VR task with EarVR, while without it, they could not finish the task even once. Finally, our qualitative and quantitative evaluation among DHH participants indicates that they preferred to use EarVR and it encouraged them to use VR technology more.

中文翻译:

EarVR:在聋人和听力困难的人中使用虚拟现实中的触觉技术。

虚拟现实(VR)在提高聋人和听力困难(DHH)人员的技能方面具有巨大潜力。大多数VR应用程序和设备都是为没有听力问题的人设计的。因此,DHH人员在使用VR时有很多限制。在VR环境中添加特殊功能(例如字幕或触觉设备)将对他们有所帮助。以前,有必要为DHH人员设计一个特殊的VR环境。我们介绍并评估了一个名为“ EarVR”的新原型,该原型可以安装在任何台式机或移动VR头戴式显示器(HMD)上。EarVR在VR环境中分析3D声音,并找到最接近用户的声源方向。它通过放置在用户耳朵上的两个振动电机将声音方向通知用户。EarVR通过3D音频和背景音乐的静音选项,帮助DHH人员在任何VR应用程序中完成基于声音的VR任务。因此,DHH人员可以将所有VR应用程序与3D音频一起使用,而不仅仅是为他们设计的那些应用程序。我们的用户研究表明,DHH参与者使用EarVR可以比没有使用VR的人明显更快地完成简单的VR任务。DHH参与者的完成时间非常接近没有听力问题的参与者。此外,它表明DHH参与者能够使用EarVR完成复杂的VR任务,而没有它,他们甚至无法完成一次任务。最后,我们在DHH参与者中进行的定性和定量评估表明,他们更喜欢使用EarVR,并鼓励他们更多地使用VR技术。DHH人员可以将所有带有3D音频的VR应用程序使用,而不仅仅是为他们设计的那些应用程序。我们的用户研究显示,DHH参与者使用EarVR可以比没有使用VR的参与者更快地完成简单的VR任务。DHH参与者的完成时间非常接近没有听力问题的参与者。此外,它表明DHH参与者能够使用EarVR完成复杂的VR任务,而没有它,他们甚至无法完成一次任务。最后,我们在DHH参与者中进行的定性和定量评估表明,他们更喜欢使用EarVR,并鼓励他们更多地使用VR技术。DHH人员可以将所有VR应用程序与3D音频一起使用,而不仅仅是为他们设计的那些应用程序。我们的用户研究显示,DHH参与者使用EarVR可以比没有使用VR的参与者更快地完成简单的VR任务。DHH参与者的完成时间非常接近没有听力问题的参与者。此外,它表明DHH参与者能够使用EarVR完成复杂的VR任务,而没有它,他们甚至无法完成一次任务。最后,我们在DHH参与者中进行的定性和定量评估表明,他们更喜欢使用EarVR,并鼓励他们更多地使用VR技术。我们的用户研究表明,DHH参与者使用EarVR能够比没有使用VR的人更快地完成简单的VR任务。DHH参与者的完成时间非常接近没有听力问题的参与者。此外,它表明DHH参与者能够使用EarVR完成复杂的VR任务,而没有它,他们甚至无法完成一次任务。最后,我们在DHH参与者中进行的定性和定量评估表明,他们更喜欢使用EarVR,并鼓励他们更多地使用VR技术。我们的用户研究表明,DHH参与者使用EarVR可以比没有使用VR的人明显更快地完成简单的VR任务。DHH参与者的完成时间非常接近没有听力问题的参与者。此外,它表明DHH参与者能够使用EarVR完成复杂的VR任务,而没有它,他们甚至无法完成一次任务。最后,我们在DHH参与者中进行的定性和定量评估表明,他们更喜欢使用EarVR,并鼓励他们更多地使用VR技术。
更新日期:2020-04-22
down
wechat
bug