当前位置: X-MOL 学术IEEE Trans. Vis. Comput. Graph. › 论文详情
Our official English website, www.x-mol.net, welcomes your feedback! (Note: you will need to create a separate account there.)
Augmented Virtual Teleportation for High-Fidelity Telecollaboration.
IEEE Transactions on Visualization and Computer Graphics ( IF 4.7 ) Pub Date : 2020-02-13 , DOI: 10.1109/tvcg.2020.2973065
Taehyun Rhee , Stephen Thompson , Daniel Medeiros , Rafael Dos Anjos , Andrew Chalmers

Telecollaboration involves the teleportation of a remote collaborator to another real-world environment where their partner is located. The fidelity of the environment plays an important role for allowing corresponding spatial references in remote collaboration. We present a novel asymmetric platform, Augmented Virtual Teleportation (AVT), which provides high-fidelity telepresence of a remote VR user (VR-Traveler) into a real-world collaboration space to interact with a local AR user (AR-Host). AVT uses a 360° video camera (360-camera) that captures and live-streams the omni-directional scenes over a network. The remote VR-Traveler watching the video in a VR headset experiences live presence and co-presence in the real-world collaboration space. The VR-Traveler's movements are captured and transmitted to a 3D avatar overlaid onto the 360-camera which can be seen in the AR-Host's display. The visual and audio cues for each collaborator are synchronized in the Mixed Reality Collaboration space (MRC-space), where they can interactively edit virtual objects and collaborate in the real environment using the real objects as a reference. High fidelity, real-time rendering of virtual objects and seamless blending into the real scene allows for unique mixed reality use-case scenarios. Our working prototype has been tested with a user study to evaluate spatial presence, co-presence, and user satisfaction during telecollaboration. Possible applications of AVT are identified and proposed to guide future usage.

中文翻译:

用于高保真远程协作的增强型虚拟远程传输。

远程协作涉及将远程协作者远程传输到其伙伴所在的另一个实际环境中。环境的保真度对于在远程协作中允许使用相应的空间参考至关重要。我们提出了一种新颖的非对称平台,即增强虚拟远距传输(AVT),该平台可将远程VR用户(VR-Traveler)的高保真远程呈现到现实世界的协作空间中,以与本地AR用户(AR-Host)进行交互。AVT使用360°摄像机(360摄像机)来捕获和实时流式传输网络上的全向场景。远程VR-Traveler在VR头戴式耳机中观看视频,可以在现实世界的协作空间中体验现场演示和共存。VR旅行者 捕捉到的动作并传输到覆盖在360相机上的3D化身,可以在AR-Host的显示屏上看到。在“混合现实协作空间”(MRC-space)中,每个协作者的视觉和音频线索都将同步,在此空间中,他们可以交互地编辑虚拟对象,并可以使用真实对象作为参考在真实环境中进行协作。高保真,实时渲染虚拟对象以及无缝融合到真实场景中,可以实现独特的混合现实用例场景。我们的工作原型已通过用户研究进行了测试,以评估远程协作期间的空间存在,共存和用户满意度。确定并提出了AVT的可能应用,以指导将来的使用。在“混合现实协作”空间(MRC-space)中,每个协作者的视觉和音频提示都得到了同步,在该空间中,他们可以交互地编辑虚拟对象,并可以使用真实对象作为参考在真实环境中进行协作。高保真,实时渲染虚拟对象以及无缝融合到真实场景中,可以实现独特的混合现实用例场景。我们的工作原型已通过用户研究进行了测试,以评估远程协作期间的空间存在,共存和用户满意度。确定并提出了AVT的可能应用,以指导将来的使用。在“混合现实协作”空间(MRC-space)中,每个协作者的视觉和音频提示都得到了同步,在该空间中,他们可以交互地编辑虚拟对象,并可以使用真实对象作为参考在真实环境中进行协作。高保真,实时渲染虚拟对象以及无缝融合到真实场景中,可以实现独特的混合现实用例场景。我们的工作原型已通过用户研究进行了测试,以评估远程协作期间的空间存在,共存和用户满意度。确定并提出了AVT的可能应用,以指导将来的使用。虚拟对象的实时渲染以及无缝融合到真实场景中,可以实现独特的混合现实用例场景。我们的工作原型已通过用户研究进行了测试,以评估远程协作期间的空间存在,共存和用户满意度。确定并提出了AVT的可能应用,以指导将来的使用。虚拟对象的实时渲染以及无缝融合到真实场景中,可以实现独特的混合现实用例场景。我们的工作原型已通过用户研究进行了测试,以评估远程协作期间的空间存在,共存和用户满意度。确定并提出了AVT的可能应用,以指导将来的使用。
更新日期:2020-04-22
down
wechat
bug