|
海明威的《老人與海》，大家都很熟悉吧？你們的高中老師當年是怎么教這篇課文的呢？朗讀、背誦、講 PPT？ 這一切將被改變！你能想象嗎，不茍言笑的語文老師在課堂上變身「演員」，《老人與海》中巨大兇猛的馬林魚向他襲來，而他向后一個趔趄，躲避開這個危險的生物… 沒錯，這正是在融合了最新的 VR、AR 技術后的課堂教學方式，讓老師和學生能在探險般的故事里「身臨其境」。 ![]() ▲ 海洋探險，講故事的新方式
雖然當前 VR、AR 技術已進入成熟階段，但據 EDUCAUSE 發布的數據顯示，僅有 4% 的學生在 2018 年通過虛擬現實和增強現實等視聽新科技輔助過他們的學習。技術創新在教育領域中的應用仍有很大的可挖掘的空間。 教育學家、科學家、工程師、設計師甚至追夢者們都在嘗試使用科技的力量輔助教育，如何將 VR、AR、MR 技術與教育結合成為了重點研究的方向之一。近日，硅谷洞察走進了麻省理工學院媒介實驗室（MIT Media Lab），探尋那里的研究者們就如何用 AR 技術打造更具吸引力的課堂。 AR 將打造「實時交互式」的課堂教學方式![]()
▲ Nazmus Saquib 在麻省理工學院的媒介實驗室，Yaling Hou 攝
Nazmus Saquib（后簡稱 Saquib）是麻省理工學院的一名博士生。今年年初，他與 Adobe 研究院的研究員們就如何運用新媒介更好的展示教學內容、幫助教師提高課程吸引力開展了一項技術試驗。 發起這個實驗項目的初衷，是 Saquib 想改變教師在授課中總照著 PPT 干巴巴念著板書的模式。受到 AR 增強現實的啟發，擁有人工智能開發和機器深度學習背景的 Saquib 和團隊想要將「肢體語言」引入一項交互式演示的系統中，輔助教師更好的將知識可視化、生動化的展現給學生，他們將此開發系統命名為 Interactive Body-Driven Graphics for Augmented Video Performance，后文就將它簡稱為 AR 實時交互式系統。 那么，這款產品是怎么運用到教學中去的呢？ 這個系統可以讓用戶獨立設計互動方案和原創故事，讓用戶在不同的場景里用自然的肢體動作和姿勢操控圖表元素。 使用該系統，老師會和現實場景（課堂）中不存在的事物同時出現。老師還必須是「戲精」本人，在現場使用肢體動作和姿勢實時操控這些圖表信息，真正達到「聲情并茂」的演繹出教學內容的目標。 ![]()
▲ 鯨魚結構講演
比如老師今天上課的內容是介紹一種海洋生物：鯨魚。傳統的多媒體教學會給學生展示一條鯨魚在屏幕上，用箭頭標注出這些部位分別叫什么。但是利用 Saquib 他們開發的系統，教師可以在視頻中和這條鯨魚實時互動，通過上下抬臂這個動作「打開」鯨魚，讓同學們看到鯨魚內部骨架結構、五臟器官構造和外部皮層的關聯。 與圖文互動，除了讓學生們覺得老師上課新穎有趣、知識點更好理解外，也讓教師們將圖文、聲音、語言和肢體動作等多重傳遞信息的方式相結合，極大的幫助他們更好的表達信息。 ![]()
▲ 研究太陽起落與濕度的變化關系
![]()
▲ AR 技術演示做飯
![]()
▲ AR 為學生添加天使翅膀
這個系統讓我們看到了除幻燈片外，還有更具互動性與趣味性的工具可被教師在上課時使用。這款工具還打破了傳統 AR 程序前期編程后期無法更改的特點，提供實時增強現實的特效。 聽起來似乎需要很復雜的特效剪輯才能做到這樣的效果。那么這款工具對普通教師來說好用嗎？便于操作嗎？ Saquib 說只要教師會做 PPT，并通過簡單的培訓，就可以自主掌握這款 AR 交互系統。他給我們展示了他是如何使用這款工具做到用戶設計交互表達并講好一個故事的。 教師在打開系統后，會看到這個人形的大框架。藍色的「人架子」上，每一個圓點代表著人體可移動關節的 19 支點，如：頭、頸、肩、肘、手、腰、腿部關節等。右邊是 Saquib 用鼠標畫出來的一把雨傘，他還向系統導入添加了云和雨滴，用于輔助教學的圖像元素。導入的過程就像 PPT 導入圖片一樣簡單。 ![]()
▲ 圖片由 Nazmus Saquib 提供
接下來，Saquib 想要在演示時用自己的左手撐傘。要完成這一套動作，只要拖動鼠標，找到「左手」支點，將「左手」與「雨傘」相連即可，相連的位置也是可以設計的。 在雨傘旁邊，會出現五個黃色的小圖標，這些小圓圈代表了該圖像元素本身將如何運動：從上到下依次代表了：移動、旋轉、改變透明度、變大變小和速度。這些功能是 Saquib 和團隊成員們通過對演講者演示時行為的研究得到的最常用的五種形變方式。 ![]()
▲ 人體支點連接虛擬雨傘，并出現 5 種形變位移圖標
所以按照這樣的設計邏輯，如果想讓雨傘在 Saquib 拿到之后變大，他僅需要點擊雨傘旁邊代表大小的黃色圖標即可。 此外，系統中還預設好了一些手勢的「快捷方式」，幫助教師用簡介的動作完成會重復出現的高頻互動反應，如「食指指向」選定后，「雙手豎起大拇指」控制圖表保持固定，「手部左右擺動」控制方向移動，擺動控制圖表擺動等。 ![]()
在系統上設計好這些元素和其運動方式后，就到了正式表演的時候了。 ![]()
▲ 圖片由 Nazmus Saquib 提供
這是一張 Saquib 在家里使用系統工具的照片。通過畫面你可以看到制作的場地不受限制，只需一位講師、一塊屏幕、一臺傳感器（即圖中的 Kinect）、一部電腦和一個（手上握著的）點擊器就可以開始錄制了 。這臺電腦的攝像頭可以拍到 Saquib，電視屏幕相當于一面鏡子，S 可以通過看屏幕看到自己的表現，并設計自己的互動動作。 ![]()
▲ 自定義設計好交互圖表后的效果展示
可以看到，這款系統還是很好理解，并可以快速上手的。這對于沒有編程、設計基礎的教師來說，從接觸到掌握不是一件難事。 虛擬畫面現實場景中「實時反饋」是 Saquib 團隊 AR 實時交互系統的亮點。 通過深度學習（machinelearning），即利用人工智能將人類行為動作的數據收入到數據庫中，Kinect 就可以感知并識別演示者動作的目的。當 Saquib 舉起手指向斜上方時，一個圖表就會出現在視頻上， Kinect 會迅速反應并判斷「操作者」做出這一指令動作的目的，將之前設置好的圖表信息實時顯示到屏幕上。 比如這個航海的舵盤，當屏幕上的 Saquib 握著舵盤「航行」的時候，圖表信息會隨著 Saquib 的移動而做出變化。 ![]() ▲ 實時出現的虛擬圖表，數值更具演示者的變化而變動
這就是 Saquib 一直強調的關鍵詞「實時」互動。這款工具的亮點和特色正是在視頻中實時顯示增強現實的 AR 畫面，現場配合教師，完成一場自定義的「表演」。 此外，Saquib 還表示，AR 教學將成為信息傳遞的新媒介，幫助更多的人認知這個世界。在 MIT Media Lab, Saquib 和其他學生、學者一直致力于研究除聲音、畫面、文字外，還有什么新型「語言」可以傳遞信息并且幫助更多的人，為獲取信息提供創新性途徑和工具。 ![]()
▲ MIT Media Lab 一角，Yaling Hou 攝
Saquib 萌生出做 AR 實時交互演示工具也是想探討「肢體」語言對信息傳遞的效率和用途，打造未來創新型互動教室。 有人可能會有這樣的疑問，通過在筆記本上寫字、畫圖這種最傳統的「語言」方式不是一樣能扎實的掌握知識嗎？為什么要開發新的學習「語言」呢？ 其實，未來人才培養的格局已經悄然改變。復雜、龐大、時刻在快速改變著的社會告訴我們，傳統的「語言」在學習中固然重要，但是創新性新「語言」的誕生可以激發我們不曾發覺的大腦潛力，輔助我們更好的換個角度看世界。 與此同時，科技的發展帶給人類的應該是更多可以共享的教育資源、以及公平的學習機會。新媒介語言的誕生和創新，可以為更多擁有讀寫障礙或需要特殊教育的兒童（如自閉癥患者）打開認知世界的新窗口。 「有些人可以快速理解邏輯性極強的數字語言；有些人則能更好的通過可視化語言（腦圖、圖表、視頻）加強理解和記憶；還有些人可能對數字和可視化語言都不感冒。那么新「語言」的開發，其實也是在幫助不同人群尋找最適合自己的學習方式」，Saquib 說。 科技+教育要以人為本在對 MIT 媒體實驗室的參觀采訪中，小探感受到，未來的教育并不只是科技的拼湊，而是科技更好地輔助教師，進而更好的開啟學生們探索世界、思維自由馳騁的能力。所以，不論是科技還是教育，它們的本質還是重在對「人」素質的培養。 與此同時，這也客觀要求教師能力可以「與時俱進」，跟上科技時代的發展。但這對對教師來說，仍是個不小的挑戰。 在哈佛的科教論壇上，在國內教學一線工作了近 10 年的高宏老師和波士頓大學教育學院的教授 Stacy L. Scott 博士也跟小探一起，聽取了該 MIT 團隊 AR 教學系統的介紹。會后，他們都對科技與教育融合的未來充滿了期待，但同時他們也都認為科技、教育發展的核心都是要更好地「服務」于人，而無論是老師還是學生也都應該順應時代的趨勢，培養使用科技的能力。 高宏老師認為，科技對教育的影響是不可逆的，是時代的必然趨勢。教師除了有能力教授學生全面、系統的學習知識外，不斷接受并學習新事物，快速洞察到哪些科技手段和產品可以用、怎么用，是對教師從業人員的新要求。而她目前也在哥倫比亞大學接受更加全面的教育領域學習。 ![]()
跟高老師一樣，Scott 博士也告訴小探，他認為未來教育的大趨勢是科技輔助教育的科教結合時代。AR 交互手段確實會有效的提升課堂對學生的吸引力，但是在教師備課時，如何利用科技手段去講好知識點和故事，這背后的功夫還是與教師的基本素養密不可分的。所以，雖然未來科技會改變教育形態，但教師所創造出的價值不會變。 「人工智能和認知科學是未來趨勢，但是這些科技都是圍繞著『人』來服務的。未來的教育，我認為是以人為中心的學習和設計的過程，」Saquib 在采訪的最后說。 硅谷洞察
| 
發表于 2019-12-12 11:00:58
QQ好友和群
QQ空間
