$$ 【第一章】緣起 $$

$$ 【第二章】 作品功能介紹 $$

智能障礙者除了在門市服務時,需要與人之間互動外,還須必備飲料製作及商品整理等技能。因此,本作品將針對智能障礙者於門市服務的工作內容,以及門市服務職業訓練之服務項目為開發方向,並結合 MR 混合實境技術,搭配Microsoft HoloLens 2 進行系統開發,以下為功能說明:

  1. 商品日期排序訓練:使用者將會對系統中的虛擬商品進行日期排序,而系統中的虛擬物品上方會根據當天的日期,隨機產生出含當天以後的日期亂數。使用者需根據每一個商品的日期,抓取虛擬商品,於畫面中指定的位置進行排序(接近當天日期的商品往前排,反之則往後排)。
  2. 排除過期商品:系統中的虛擬商品上方會根據當天的日期,隨機產生出含當天以前或以後的日期亂數。使用者需判斷每一個商品的日期,將過期品與未過期品分別放至畫面中的指定位置。
  3. 飲料機操作:使用者將會根據虛擬客戶的需求(品項、大中小杯、冰度調整),操作系統中的虛擬飲料機。首先,畫面會顯示一位虛擬客戶,並提示該客戶的飲料需求。接著,使用者需根據客戶需要的杯子大小,挑選合適的虛擬杯子放入虛擬飲料機中。再來,使用者需根據客戶需要的品項及冰度,操作虛擬飲料機。等待飲料機中的飲料製作完畢後,使用者再將該虛擬飲料抓取至指定位置,完成飲料製作的訓練。

$$ 【第三章】 作品摘要 $$

  1. 作品橫跨領域項目

    本作品結合資訊科技和弱勢教育議題,旨在開發適應性教學輔具,為智能障礙者提供個別化的教學支援和職業技能訓練。透過資訊科技的應用,這個輔具可以根據每位學生的能力、學習風格和需求,選擇不同的教學內容和支援。

    本作品的研發,融合了教育專業知識和資訊科技技術,並與特殊教育相關專家密切合作,深入了解輕度智能障礙者的學習需求和職業技能要求,以確保輔具的有效性和適應性。同時利用 Mixed Reality(混合實境)相關技術,以實現個別化教學和訓練的目標。

  2. 作品應用類型與範圍

    本作品應用類型為適應性教學輔具,它的主要目標是提供輕度智能障礙者符合他們的門市服務職業技能訓練,並且將應用於特殊教育學校或訓練機構,幫助輕度智能障礙者融入職場,並發展自己的職業生涯。 值得強調的是,這個適應性教學輔具,不僅可以讓教育訓練員更輕鬆地設計課程,提供更多的資源和教學策略,還能使教育訓練員更好地關注學生的個別需求,與學生建立更密切的互動。但這並不表示此輔具能夠完全取代 教育訓練員的角色,教育訓練員仍是關鍵的指導者和支持者。

  3. 特性與設計重點

    本作品利用資訊科技能夠根據輕度智能障礙者的能力和需求,提供相應的學習內容和互動方式。透過豐富的多媒體元素,例如圖像、文字和聲音反饋,以及互動性強的學習活動,讓輕度智能障礙者以多種感官參與學習過程,從而更好地理解和記憶知識,提高學習效果。 適應性教學輔具提供多種學習支援功能,例如即時反饋和錯誤提示。當學生在進行學習活動時,該輔具能夠即時檢測並紀錄學生的答案或表現,並給予正確答案或相應的指導。這種反饋機制將有助於輕度智能障礙學生理解自己的錯誤,並及時進行修正。

    綜上所述,本作品運用資訊科技的優勢,針對輕度智能障礙者的學習需要,為他們提供一個更彈性化的學習環境。這些工具的開發和應用,有助於提高輕度智能障礙學生的學習成效,增強他們的自信心和學習動機,並為他們的未來職業發展打下堅實的基礎。

  4. 應用專業技術說明

    1. 混合實境:

      「混合實境(Mixed Reality,簡稱 MR)」指的是結合「擴增實境」

      (Augmented Reality,簡稱 AR)與「虛擬實境」(Virtual Reality,簡稱VR),創造虛擬世界和現實世界共存的空間,讓現實生活和虛擬物件得以實時互動的全新體驗。

      在已開發的技術與產品中,已經有許多例子應用到 MR 技術,近幾年在智慧醫療的發展上,MR 技術更是展現出了其優秀的影響力,不僅能幫助醫療人員更好地進行訓練和教育,特別是在學生手術模擬的方面,醫生可以進行更為真實的手術操作練習,提高其對手術過程的瞭解和掌握程度,減少手術失敗的風險,同時也減少患者手術的痛苦和風險。

    2. Microsoft HoloLens 2:

      Microsoft HoloLens 2 為一臺混合實境頭戴顯示器,自身除了搭載數個攝像鏡頭、麥克風及螢幕顯示器,更配有完善的運算處理單元,透過先進的設備與技術支援,實現更精準的手部追蹤、眼球追蹤及語音辨識等功能。

      HoloLens 2 最大的優勢是適中的大小能夠讓使用者更方便的攜帶,在配戴 HoloLens 2 時還具有可調節式的設計,加上其合理的配重,讓使用者能夠更舒適、更無負擔的配戴較長時間,而且不需要額外承接厚重的線纜,使用者可以自由地走動。拋下諸多舊有 AR、VR 限制的同時,更是替使用者打造了「沉浸式」的使用環境。

    3. 系統使用技術

      1. Unity:跨平台的 2D 和 3D 遊戲引擎,其應用相當之廣泛,除了遊戲研發之外,還能廣泛用作建築視覺化、即時三維動畫等類型互動內容的綜合型創作工具。
      2. MRTK:開放原始碼的跨平台開發套件,使開發人員能夠快速創建適用於各種平台的混合實境應用程式,包括 Microsoft HoloLens、Windows Mixed Reality 和 OpenVR。MRTK 包括一系列的功能和工具,使開發人員可以輕鬆地將手動追蹤、UI 控制元件等添加到自己的應用程式中。它還支援包括手勢、語音識別和眼神追蹤等諸多的功能為跨平台系統創建沉浸式體驗並提供堅實的基礎。
      3. Vuforia:本作品將 Vuforia 與 HoloLens 的相機結合使用,輔助空間追蹤功能,來降低相機視野內的其他干擾,使得可以更穩定地追蹤目標,並提供辨識實體物件的功能(如辨識機器、汽車或玩具),用以指引使用者於真實環境下更明確地操作。
  5. 創意及原創性說明

    經過我們的研究,目前市場上尚無針對輕度智能障礙者,開發於門市服務職業訓練的資訊科技教學輔具。這促使我們希望能夠透過資訊科技的優勢,開發出一套具原創性及新穎性的適應性教學輔具,來填補這個空白。本作品將著重於輕度智能障礙者的學習需求,運用混合實境等先進科技技術,來打造一個量身定制的教學環境,進而提升他們的學習成效。相較於其他現有的解決方案,我們的方案更加注重輕度智能障礙者的需求,並將資訊科技和教育領域的專業知識互相結合,打造一個獨特且高效的教學輔具。考量到輕度智能障礙者的個別差異和學習需求,透過適應性教學工具,輕度智能障礙者將獲得更專業和個性化的教育支援,從而提高學習動機和學習成效,並且將有助於輕度智能障礙者更好地融入社會,擁有發展職業生涯的機會,和獲得更多的成就感與自信。