沉浸式虛擬現(xiàn)實(shí)中的環(huán)境細(xì)節(jié)與一致性構(gòu)建:對學(xué)習(xí)、注意和動機(jī)影響的實(shí)驗(yàn)研究
《Computers & Education: X Reality》:Seeing the whole picture? An experiment on environmental detail and coherence formation in immersive virtual reality
編輯推薦:
沉浸式虛擬現(xiàn)實(shí)(IVR)能否通過豐富的視覺環(huán)境促進(jìn)學(xué)習(xí),取決于環(huán)境細(xì)節(jié)如何與教學(xué)內(nèi)容保持一致。本文通過一項(xiàng)控制實(shí)驗(yàn),系統(tǒng)地探討了環(huán)境細(xì)節(jié)(情境化360°場景vs.非情境化圖片)和內(nèi)容一致性(文本與視覺環(huán)境一致vs.不一致)對學(xué)習(xí)、一致性構(gòu)建、注意和動機(jī)的影響。研究發(fā)現(xiàn),出乎意料的是,不一致內(nèi)容反而比一致內(nèi)容導(dǎo)致了更好的知識獲取,而情境化場景雖增加了享受感并吸引了更多注意,但并未改善學(xué)習(xí),甚至當(dāng)內(nèi)容一致時對其產(chǎn)生了損害。本研究挑戰(zhàn)了沉浸式特征必然支持學(xué)習(xí)的假設(shè),并強(qiáng)調(diào)了在設(shè)計(jì)沉浸式教學(xué)時考慮呈現(xiàn)順序和一致性的重要性。這為理解IVR中的學(xué)習(xí)和一致性構(gòu)建過程提供了基于文本理解和多媒體學(xué)習(xí)理論的“心理情境模型”新視角,為理論構(gòu)建和界定沉浸式學(xué)習(xí)的邊界條件提供了一個有前景的起點(diǎn)。
在科技飛速發(fā)展的今天,沉浸式虛擬現(xiàn)實(shí)(Immersive Virtual Reality, IVR)正以其身臨其境的強(qiáng)大體驗(yàn),從娛樂、醫(yī)療迅速滲透到教育領(lǐng)域。想象一下,學(xué)生們不再是通過課本的平面插圖學(xué)習(xí)西斯廷教堂的藝術(shù)瑰寶,而是戴上頭顯設(shè)備,瞬間“置身”于這座歷史建筑的穹頂之下,抬頭便能觀賞米開朗基羅的傳世壁畫。這種高擬真的視覺環(huán)境細(xì)節(jié)(Environmental Details),是IVR區(qū)別于傳統(tǒng)多媒體教學(xué)的核心魅力之一。然而,這撲面而來的豐富視覺信息,究竟是為學(xué)習(xí)鋪設(shè)了一條通途,還是布下了一片認(rèn)知的迷霧?這是當(dāng)前教育技術(shù)和學(xué)習(xí)科學(xué)研究者們面臨的一個關(guān)鍵謎題。
傳統(tǒng)多媒體學(xué)習(xí)理論,如邁耶(Mayer)的認(rèn)知多媒體學(xué)習(xí)理論(Cognitive Theory of Multimedia Learning, CTML),強(qiáng)調(diào)減少無關(guān)的、分散注意力的“誘人細(xì)節(jié)”以遵循一致性原則(Coherence Principle),從而優(yōu)化認(rèn)知資源分配。然而,當(dāng)我們將課堂搬到IVR這個全景式、高保真的虛擬空間中時,那些用來營造臨場感和真實(shí)感的環(huán)境細(xì)節(jié),本身就可能成為海量的“誘人細(xì)節(jié)”。它們究竟是幫助學(xué)生將知識“錨定”在具體情境中,促進(jìn)理解和記憶的“腳手架”,還是會成為干擾核心學(xué)習(xí)內(nèi)容處理、增加額外認(rèn)知負(fù)荷(Extraneous Cognitive Load)的“分心物”?更進(jìn)一步,當(dāng)呈現(xiàn)的文字信息與周圍的視覺環(huán)境細(xì)節(jié)在主題上一致或不一致時,學(xué)習(xí)者又是如何整合這些信息,在頭腦中構(gòu)建連貫的心理表征(即“一致性形成”, Coherence Formation)的呢?遺憾的是,盡管IVR在教育中的應(yīng)用日益廣泛,但針對其核心特征——環(huán)境細(xì)節(jié)——如何系統(tǒng)影響學(xué)習(xí)過程的精細(xì)實(shí)驗(yàn)研究仍很缺乏。大多數(shù)研究停留在比較“用IVR學(xué)”和“不用IVR學(xué)”的層面,卻鮮少剖析IVR內(nèi)部不同設(shè)計(jì)要素的獨(dú)立效應(yīng)。
為了揭開這個謎團(tuán),由C. Hartmann, C. Kosel, A. Wolf, M. Bannert組成的研究團(tuán)隊(duì)開展了一項(xiàng)精心設(shè)計(jì)的實(shí)驗(yàn)室實(shí)驗(yàn),并將研究成果發(fā)表在了《Computers 》期刊上。他們決心像解剖麻雀一樣,深入探究IVR中環(huán)境細(xì)節(jié)與內(nèi)容一致性的交互作用。研究團(tuán)隊(duì)構(gòu)建了一個高保真的虛擬西斯廷教堂復(fù)制環(huán)境,并招募了77名大學(xué)生參與者。實(shí)驗(yàn)設(shè)計(jì)了一個2×2的混合因素:在參與者間,他們操縱“環(huán)境細(xì)節(jié)”的呈現(xiàn)方式,一組參與者看到的是完整、環(huán)繞的360°情境化場景(Situated 360° VR scene),另一組看到的則是在一個純白的360°虛擬房間中央,放置的一張關(guān)于教堂環(huán)境的非情境化圖片(Non-situated image);在參與者內(nèi),他們操縱“內(nèi)容一致性”,即所有參與者都會先后學(xué)習(xí)兩段文字材料,其中一段的文字內(nèi)容與所處的虛擬環(huán)境(無論是全景教堂還是中央圖片)高度相關(guān)(一致條件),另一段的文字內(nèi)容則與環(huán)境無關(guān)(不一致條件)。通過這種方式,研究人員得以精確分離出環(huán)境細(xì)節(jié)的沉浸式呈現(xiàn)效應(yīng),以及其與學(xué)習(xí)內(nèi)容是否匹配所帶來的影響。
為了全面捕捉學(xué)習(xí)過程與結(jié)果,研究采用了多種測量工具。除了傳統(tǒng)的知識后測問卷(評估學(xué)習(xí)成果)和自陳量表(測量空間存在感、Spatial Presence;享受感、Enjoyment;以及探索性的認(rèn)知負(fù)荷)外,研究還引入了高精度的眼動追蹤(Eye-tracking)技術(shù)。眼動數(shù)據(jù)如同一扇窗戶,讓研究者能夠?qū)崟r觀察學(xué)習(xí)者的注意力如何在文本、中央圖片和環(huán)境背景之間分配和切換,從而為“一致性形成”或“注意力分散”的認(rèn)知過程提供客觀的行為證據(jù)。此外,研究還測量了參與者的心理旋轉(zhuǎn)能力(Mental Rotation)和視覺空間表象能力(Visuospatial Imagery),以考察個體空間能力差異是否會調(diào)節(jié)環(huán)境細(xì)節(jié)對學(xué)習(xí)的影響。
本研究在方法上主要運(yùn)用了幾個關(guān)鍵技術(shù):1) 受控的沉浸式虛擬現(xiàn)實(shí)環(huán)境構(gòu)建:利用游戲引擎和全景圖像處理技術(shù),創(chuàng)建了高保真度的虛擬西斯廷教堂場景及其對照的“白色房間”場景,確保了實(shí)驗(yàn)刺激的精確操控。2) 混合實(shí)驗(yàn)設(shè)計(jì):采用了2(環(huán)境細(xì)節(jié):情境化vs.非情境化)×2(內(nèi)容一致性:一致vs.不一致)的混合設(shè)計(jì),其中環(huán)境細(xì)節(jié)為組間因素,內(nèi)容一致性為組內(nèi)因素,并結(jié)合了順序平衡,以有效分離變量效應(yīng)并提高統(tǒng)計(jì)檢驗(yàn)力。3) 多模態(tài)過程與結(jié)果測量:結(jié)合了主觀問卷(知識測試、空間存在感、享受感、認(rèn)知負(fù)荷)、客觀行為測量(眼動追蹤)以及個體差異測量(心理旋轉(zhuǎn)測試、視覺空間表象問卷),對學(xué)習(xí)過程進(jìn)行了全方位、多角度的評估。4) 眼動追蹤技術(shù):使用集成于HTC Vive Pro Eye頭顯中的眼動儀,以120Hz采樣率記錄學(xué)習(xí)者在VR環(huán)境中的注視點(diǎn),并通過預(yù)定義的興趣區(qū)域分析其注意力分配模式,為理解認(rèn)知加工過程提供了直接證據(jù)。
研究結(jié)果
5.1. 描述性統(tǒng)計(jì)與基本相關(guān)性
數(shù)據(jù)分析顯示,無論環(huán)境細(xì)節(jié)如何呈現(xiàn),學(xué)習(xí)不一致內(nèi)容的知識獲取得分(平均85.58%)顯著高于學(xué)習(xí)一致內(nèi)容(平均78.70%)。在享受感方面,處于情境化360°場景中的參與者報(bào)告了更高的水平。眼動數(shù)據(jù)顯示,在一致內(nèi)容條件下,參與者對情境化環(huán)境背景的注視次數(shù)遠(yuǎn)多于對非情境化圖片的注視;而在不一致條件下,無論背景如何呈現(xiàn),注視都更多地集中在文本和中央圖片上。
5.2. 假設(shè)1:環(huán)境細(xì)節(jié)與一致性的交互作用
與假設(shè)相反,方差分析(ANOVA)顯示,內(nèi)容一致性存在顯著的主效應(yīng),不一致內(nèi)容的學(xué)習(xí)效果更好。環(huán)境細(xì)節(jié)的呈現(xiàn)方式主效應(yīng)不顯著,即無論是身處全景教堂還是只看一張圖片,整體學(xué)習(xí)效果無差異。兩者之間也沒有顯著的交互作用。這意味著,沉浸式的環(huán)境細(xì)節(jié)本身并未帶來預(yù)期的學(xué)習(xí)增益,即使當(dāng)內(nèi)容與環(huán)境一致時也是如此;而不一致內(nèi)容反而“意外地”促進(jìn)了學(xué)習(xí)。
5.3. 假設(shè)2:一致性與空間能力的交互作用
協(xié)方差分析(ANCOVA)表明,參與者的心理旋轉(zhuǎn)能力與知識測試成績呈正相關(guān),而自評的視覺空間表象能力則與成績呈負(fù)相關(guān)(僅對一致內(nèi)容顯著)。然而,空間能力(無論是心理旋轉(zhuǎn)還是表象能力)并未顯著調(diào)節(jié)環(huán)境細(xì)節(jié)對學(xué)習(xí)的影響。也就是說,空間能力高或低的參與者,并未從不同沉浸程度的環(huán)境細(xì)節(jié)中獲得差異化的學(xué)習(xí)收益或損失。假設(shè)2未得到支持。
5.4. 假設(shè)3:通過空間存在感和享受感的中介作用
中介分析模型檢驗(yàn)了“環(huán)境細(xì)節(jié)→空間存在感→享受感→知識獲取”的路徑。結(jié)果顯示,對于一致和不一致內(nèi)容,環(huán)境細(xì)節(jié)對知識獲取均無顯著的直接或間接影響。雖然環(huán)境細(xì)節(jié)(尤其是對一致內(nèi)容)能直接增加享受感,但享受感并未進(jìn)一步轉(zhuǎn)化為更好的學(xué)習(xí)效果。有趣的是,空間存在感對知識獲取有顯著的負(fù)向預(yù)測作用,即感覺越“身臨其境”,測試成績反而越差。這表明,在本次實(shí)驗(yàn)設(shè)置中,強(qiáng)烈的空間存在感可能并未釋放認(rèn)知資源,反而可能與學(xué)習(xí)目標(biāo)的處理形成了競爭。
5.5. 假設(shè)4:空間存在感與空間能力的交互作用
協(xié)方差分析顯示,環(huán)境細(xì)節(jié)的呈現(xiàn)方式對空間存在感的影響不顯著,且個體的空間能力(心理旋轉(zhuǎn)、表象能力)與此也不存在顯著的交互作用。這意味著,無論是空間能力高還是低的參與者,在沉浸式全景場景中體驗(yàn)到的“在場感”并不比在看一張圖片時更強(qiáng),或者并未表現(xiàn)出預(yù)期中的差異。假設(shè)4未得到支持。
5.6. 假設(shè)5:注意力分配
眼動數(shù)據(jù)分析為理解上述結(jié)果提供了關(guān)鍵過程證據(jù)。對于一致內(nèi)容,處于情境化場景中的參與者對文本的注視次數(shù)顯著減少,同時對環(huán)境背景的注視次數(shù)顯著增加。這表明豐富的環(huán)境細(xì)節(jié)成功吸引了大量注意力,但可能以犧牲對核心文本信息的加工為代價(jià)。對于不一致內(nèi)容,無論背景如何,參與者都將注意力主要集中在文本和中央圖片上,對環(huán)境背景的注視很少。注視模式與知識獲取的相關(guān)性分析進(jìn)一步揭示,在一致內(nèi)容條件下,對中央圖片的注視越多,學(xué)習(xí)成績反而越差。這暗示了在不必要視覺信息(即使是與文本一致的中央引導(dǎo)圖)上分配注意,可能不利于學(xué)習(xí)。綜合來看,眼動結(jié)果支持了“注意力分散效應(yīng)”:在內(nèi)容一致時,沉浸式環(huán)境細(xì)節(jié)充當(dāng)了強(qiáng)大的“誘人細(xì)節(jié)”,將注意力從文本拉向環(huán)境,可能阻礙了深度的信息整合(一致性形成);而在內(nèi)容不一致時,學(xué)習(xí)者似乎能更有效地忽略無關(guān)的環(huán)境背景,將認(rèn)知資源集中于文本信息本身,從而取得了更好的記憶效果。
研究結(jié)論與討論
本研究的發(fā)現(xiàn)對“IVR必然促進(jìn)學(xué)習(xí)”的樂觀假設(shè)提出了重要挑戰(zhàn)。核心結(jié)論是:在IVR學(xué)習(xí)環(huán)境中,豐富的、沉浸式的環(huán)境細(xì)節(jié)本身并不保證更好的學(xué)習(xí)效果。具體而言:1) 不一致優(yōu)于一致:與預(yù)期相反,文本內(nèi)容與視覺環(huán)境不一致時,學(xué)習(xí)者的知識獲取效果反而更好。這表明,當(dāng)環(huán)境被感知為與學(xué)習(xí)目標(biāo)無關(guān)時,學(xué)習(xí)者可能啟動了更有效的注意力過濾機(jī)制,專注于文本信息。2) 細(xì)節(jié)吸引注意但損害學(xué)習(xí):情境化的360°場景雖然提升了學(xué)習(xí)者的主觀享受感,并成功吸引了大量注意力到環(huán)境特征上,但這并未轉(zhuǎn)化為學(xué)習(xí)優(yōu)勢。尤其在內(nèi)容一致時,它反而損害了學(xué)習(xí),眼動數(shù)據(jù)證實(shí)了注意力從文本向環(huán)境的分散。3) 順序效應(yīng):一個有趣的次要發(fā)現(xiàn)是,當(dāng)學(xué)習(xí)者先接觸一致內(nèi)容、再接觸不一致內(nèi)容時,對不一致內(nèi)容的學(xué)習(xí)效果最好。這表明早期接觸一致材料可能幫助學(xué)習(xí)者建立了一個認(rèn)知框架或策略,使其能更好地處理后續(xù)看似不相關(guān)的信息。4) 個體差異的有限作用:本研究中,學(xué)習(xí)者的空間能力(心理旋轉(zhuǎn)、視覺表象)并未如預(yù)期那樣調(diào)節(jié)環(huán)境細(xì)節(jié)或空間存在感的影響。5) 存在感與學(xué)習(xí)的悖論:空間存在感與知識獲取呈負(fù)相關(guān),提示強(qiáng)烈的沉浸體驗(yàn)可能與達(dá)成特定的學(xué)術(shù)性學(xué)習(xí)目標(biāo)存在內(nèi)在張力。
這些結(jié)果具有重要的理論和實(shí)踐意義。在理論上,它們強(qiáng)烈支持將經(jīng)典的多媒體學(xué)習(xí)設(shè)計(jì)原則(如一致性原則)應(yīng)用于IVR語境。研究證實(shí),即使視覺信息與學(xué)習(xí)內(nèi)容相關(guān),過于豐富和沉浸式的呈現(xiàn)也可能成為認(rèn)知負(fù)擔(dān),而非助力。本研究還引入了“心理情境模型”(Mental Situation Models)的概念,將其作為整合空間存在感理論(如Wirth等人的空間存在感形成過程模型)和多媒體理解模型(如Schnotz的文本-圖片整合理解模型)的新視角,用以解釋學(xué)習(xí)者如何在IVR中構(gòu)建整合了空間、語義信息的內(nèi)在心理表征。這為未來研究提供了一個有潛力的理論框架。
在實(shí)踐上,研究為教育工作者和IVR內(nèi)容開發(fā)者敲響了警鐘:盲目追求視覺逼真度和沉浸感可能事與愿違。在設(shè)計(jì)教育用IVR時,必須審慎考量環(huán)境細(xì)節(jié)的教育功能,明確其是作為必要的認(rèn)知支架,還是無關(guān)的裝飾。研究暗示,有時“少即是多”,簡化環(huán)境或確保學(xué)習(xí)者能有效忽略無關(guān)細(xì)節(jié),可能更有利于學(xué)習(xí)。此外,注意學(xué)習(xí)材料的呈現(xiàn)序列可能是一種新的設(shè)計(jì)策略,利用先易后難、先建立框架后補(bǔ)充細(xì)節(jié)的順序來優(yōu)化學(xué)習(xí)路徑。
總之,這項(xiàng)研究如同一份精細(xì)的“體檢報(bào)告”,揭示了IVR光環(huán)之下隱藏的認(rèn)知成本。它提醒我們,技術(shù)本身的先進(jìn)性不等于教學(xué)的有效性。只有深刻理解技術(shù)特征如何與人類認(rèn)知規(guī)律相互作用,才能設(shè)計(jì)出真正賦能學(xué)習(xí)、而非僅僅令人驚嘆的沉浸式教育體驗(yàn)。未來研究需要進(jìn)一步探索在更具交互性、更開放的學(xué)習(xí)任務(wù)中,環(huán)境細(xì)節(jié)與一致性將如何動態(tài)影響學(xué)習(xí)過程,并繼續(xù)深化對“心理情境模型”在沉浸式學(xué)習(xí)中的作用的理解。