当前位置: X-MOL 学术ReCALL › 论文详情
Our official English website, www.x-mol.net, welcomes your feedback! (Note: you will need to create a separate account there.)
Managing multimodal data in virtual world research for language learning
ReCALL ( IF 4.235 ) Pub Date : 2018-01-24 , DOI: 10.1017/s0958344017000374
Cristina Palomeque , Joan-Tomàs Pujolà

The study of multimodality in communication has attracted the attention of researchers studying online multimodal environments such as virtual worlds. Specifically, 3D virtual worlds have especially attracted the interest of educators and academics due to the multiplicity of verbal channels, which are often comprised of text and voice channels, as well as their 3D graphical interface, allowing for the study of non-verbal modes. This study offers a multilayered transcription method called the Multi-Modal MUVE Method or 3M Method (Palomeque, 2016; Pujolà & Palomeque, 2010) to account for the different modes present in the 3D virtual world of Second Life. This method works at two levels: the macro and the micro level. The macro level is a bird’s-eye view representation of the whole session as it fits into one page. This enables the researcher to grasp the essence of the class and to identify interesting sequences for analysis. The micro level consists of three transcripts to account for the different communication modes as well as the interface activity that occurs in the virtual world of Second Life. This paper will review the challenges when dealing with multimodal analysis in virtual worlds and how the multimodal data were analyzed and interpreted by using a multilayered multimodal method of analysis (3M transcription). Examples will be provided in the study to show how different modes of communication were used by participants in the virtual world of Second Life to create meaning or to avoid communication breakdowns.

中文翻译:

管理用于语言学习的虚拟世界研究中的多模态数据

通信中的多模态研究引起了研究在线多模态环境(如虚拟世界)的研究人员的关注。具体来说,3D 虚拟世界特别吸引了教育工作者和学者的兴趣,因为语言通道的多样性(通常由文本和语音通道组成)以及它们的 3D 图形界面,允许研究非语言模式。本研究提供了一种多层转录方法,称为多模态 MUVE 方法或 3M 方法(Palomeque,2016;Pujolà & Palomeque,2010),以解释第二人生的 3​​D 虚拟世界中存在的不同模式。这种方法在两个层面起作用:宏观和微观层面。宏观层面是整个会话的鸟瞰图表示,因为它适合一个页面。这使研究人员能够掌握类的本质并识别有趣的序列进行分析。微观层面由三个副本组成,以说明不同的通信模式以及第二人生虚拟世界中发生的界面活动。本文将回顾在虚拟世界中处理多模态分析时面临的挑战,以及如何使用多层多模态分析方法(3M 转录)分析和解释多模态数据。研究中将提供示例,以展示第二人生虚拟世界中的参与者如何使用不同的交流方式来创造意义或避免交流中断。微观层面由三个副本组成,以说明不同的通信模式以及第二人生虚拟世界中发生的界面活动。本文将回顾在虚拟世界中处理多模态分析时面临的挑战,以及如何使用多层多模态分析方法(3M 转录)分析和解释多模态数据。研究中将提供示例,以展示第二人生虚拟世界中的参与者如何使用不同的交流方式来创造意义或避免交流中断。微观层面由三个副本组成,以说明不同的通信模式以及第二人生虚拟世界中发生的界面活动。本文将回顾在虚拟世界中处理多模态分析时面临的挑战,以及如何使用多层多模态分析方法(3M 转录)分析和解释多模态数据。研究中将提供示例,以展示第二人生虚拟世界中的参与者如何使用不同的交流方式来创造意义或避免交流中断。本文将回顾在虚拟世界中处理多模态分析时面临的挑战,以及如何使用多层多模态分析方法(3M 转录)分析和解释多模态数据。研究中将提供示例,以展示第二人生虚拟世界中的参与者如何使用不同的交流方式来创造意义或避免交流中断。本文将回顾在虚拟世界中处理多模态分析时面临的挑战,以及如何使用多层多模态分析方法(3M 转录)分析和解释多模态数据。研究中将提供示例,以展示第二人生虚拟世界中的参与者如何使用不同的交流方式来创造意义或避免交流中断。
更新日期:2018-01-24
down
wechat
bug