九州大学 山田研究室

VR带来的临场感在语言学习中有什么效果?

2022年11月29日

大家好,初次见面。我是硕士一年级的李瑭。

首先,借此自我介绍的机会,简单说明一下我的研究。

我本科就读于立命馆大学信息理工学部,获得了大连理工大学与立命馆大学的双学位。在立命馆大学时,我隶属于计算机图形学(CG)研究室,并在专业课程中学习了虚拟现实(VR)相关技术。通过这些经历,我对VR产生了浓厚的兴趣,并希望在研究生阶段进行VR相关的研究。

我的研究主题是开发并评估一套利用VR辅助日语拟情语学习的系统。在日留学的外国学生自然需要与日本人进行交流。在与日本人的沟通中,日本人经常使用拟情语来表达心情,这也是留学生感到难以理解的地方。以我个人的经验来看,我曾感到我在中国学的日语与实际使用中有很多不同,这正是与拟情语有关。例如,在表达不快的心情时,我会说“我很生气”或“感觉很不舒服”,但日本人会使用“イライラ(烦躁)”等词汇;而在表达无聊或乏味时,日本人则经常用“ウンザリ(厌烦)”这样的拟情语来表达感情。

像“イライラ”、“ウンザリ”这样表达感情或心情的词汇被称为拟情语。当拟情语用于交流时,对于作为日语母语者的大家来说应该能立刻理解,但对于非日语母语的外国人来说却很难理解。拟情语具有无需过多解释就能传达含义的特点,但由于文化差异,外国人无法像日本人那样直观地理解拟情语。此外,由于其他语言中拟情语类的词汇较少,有时甚至找不到对应的翻译,因此理解其含义非常困难。因此,为了让外国日语学习者能够学习拟情语的含义,我考虑通过让学习者直接体验拟情语所表达的感情(即让学习者产生拟情语所表达的情感),从而使其能够理解其含义。基于此,我希望开发一套利用VR技术辅助拟情语含义学习的系统。

我认为VR技术有助于情感体验的原因,在于VR技术所带来的高度临场感。临场感是指“身临其境”的心理感觉,高度的临场感能够带来强烈的情感反应。此外,通过参考能够产生情感的现实场景并设计虚拟场景,被认为可以实现特定情感的产生。基于这些,我正在推进开发并评估辅助拟情语含义学习的VR系统的研究。

在本次英语文献研讨会中,我阅读了以下论文,在此向大家介绍。

论文名:The impact of immersive virtual reality on EFL learners’ listening comprehension.
作者:Tai, Tzu-Yu & Howard Hao-Jan Chen
发行年份:2021年
期刊:Journal of Educational Computing Research, 59(7), 1272-1293

选择这篇论文有两个原因。一是这是一项关于VR技术在语言学习中应用的实证研究,我想了解作为辅助语言学习的手段,探讨VR技术的方法。另一个是,我想了解VR技术带来的高度临场感是如何作用于语言学习的,获得了什么样的效果,以及使用了什么样的测量指标。

在此简单介绍一下这篇论文的内容。

在本研究中,作者调查了移动VR(Mobile VR: MVR)对EFL(英语作为外语)学习者听力的影响。MVR提供了一种“模拟物理感觉,仿佛置身于真实的地点或情境中,同时再现现实环境的3D移动端虚拟环境”,Google Cardboard和Samsung Gear VR都属于MVR。文中指出,MVR具有轻便、可携带且随处可用的优点,能够提供完全沉浸式的VR体验,因此被广泛认为是学校最适用的VR技术。

从语言学习的角度来看,听力技能被认为在语言学习中极其重要。然而,对于EFL学习者来说,提高听力能力被认为是一项困难的任务,并会在交流中引起焦虑。另一方面,语言教师在语言教学中感受到的课题是,如何为L2(第二语言)听力创造真实的语境,并将学习者置于现实世界中可能发生的交流语境中。通过先行研究综述,作者主张利用MVR来应对这些课题是有效的。然而,支持MVR对特定L2学习效果的实证证据仍然有限,主要集中在动机和词汇学习上,关于对EFL听力理解效果的研究仍然不足。本文通过将MVR(Mondly)与观看视频进行比较,调查了MVR对EFL学习者听力理解的影响(特别是关于临场感效果的影响),以及对利用MVR辅助EFL听力学习的认知。

调查结果显示,MVR能够促进EFL学习者的听力理解和记忆保持。此外,通过MVR播放器进行听力学习的效果,被认为与MVR应用所提供的临场感相关的核心因素有关,即高保真的表现、与虚拟角色的互动、以及通过第一人称视角观察物体或探索虚拟环境。基于此,作者得出结论,VR的应用对EFL听力理解具有促进作用。另一方面,关于对MVR的认知和态度,许多学习者认为MVR易于使用和操作,高度评价了MVR的便携性,并给予了其作为灵活且便捷的学习方式的积极评价。然而,少数学习者报告称,由于注意力被各种刺激所分散,无法同时操作这么多功能,反而对听力造成了干扰。这一发现表明,在选择MVR应用的同时,语言教师需要谨慎考虑与学习者互动的程度和类型,以避免使学习者负荷过重、阻碍临场感,从而对学习产生负面影响。

通过这项实证研究,明确了VR有助于提高听力能力。此外,VR还有助于长期记忆的保持。基于这些发现,我认为VR可以成为语言学习中的重要工具。在我的研究中,基于这项研究的发现,考虑到学习单词的含义不仅在于理解,还与单词的长期记忆有关,我认为VR对长期记忆保持有效的结论是可以利用的。另一方面,由于临场感被暗示能够激发学习者的学习兴趣并提高动机,我感到使用VR的优势很大。

但是,这篇论文中有几个我不明白的地方。首先,这篇论文旨在探讨MVR的应用对听力理解的影响,但学习活动不仅是进行听力理解活动,还进行了在特定场景下要求听力理解和口语的活动。另一方面,视频观看组没有包含口语活动。这让我对它作为对照组是否合适产生了疑问。我认为在VR中也可以只观看他人的对话场景……这样的话,与其说是临场感,不如说无法否认其中也包含了精心制作的内容或功能所带来的口语练习效果。或许包含现实行为也可以称为临场感,我认为这会成为提高临场感的要素,但作为研究,我也感到有必要定义VR这一要素、学习行为等所构成的“临场感”究竟是什么。在进行比较实验时,我认为必须整理功能,并认真思考什么才是合适的对照组。

尽管如此,我认为这为我选择VR并开发拟情语学习辅助系统提供了重要的见解。在此基础上,我想进一步思考如何设计有效的学习环境。

PAGE TOP