智慧照顧到元宇宙-趨勢篇:邁向虛實整合 元宇宙結合照顧展露頭角

智慧照顧到元宇宙-趨勢篇:邁向虛實整合  元宇宙結合照顧展露頭角
2023/03/01
作者/專欄

照顧,講究人際互動、實體接觸的溫度;而將人的感官知覺,帶入虛擬實境的元宇宙,如何與「照顧」結合,實踐落地應用?縱觀業界VR、AR與架構在WEB3.0元宇宙的技術整合之下,演繹虛實整合的照顧樣態,也將遠眺未來發展成熟的榮景並持續精進。

VR|1 秒置換空間 模擬實境照護不受限時空

談到VR應用,盤古銀髮營運長曾筱芸分析有3種:第1是教學,第2是觀光景點沉浸式體驗,「而我們採取的第3種方式,稱為市場溝通,讓大眾透過VR眼鏡看見失智者眼中的世界,可列入教育訓練前期,啟發內在共感性。」盤古銀髮引進日本銀木犀株式會社研發的失智症VR體驗活動,對於照顧產業助益良多,比如銀行業推行高齡信託、減少長者被金融剝削等服務,透過VR為員工行前訓練,提供金融服務時比較能為長者換位思考。

盤古銀髮營運長曾筱芸盤古銀髮營運長曾筱芸

盤古銀髮引進日本失智症VR 體驗。(圖片來源/盤古銀髮)盤古銀髮引進日本失智症VR 體驗。(圖片來源/盤古銀髮)

2022年7月,智捷生醫攜手關渡醫院發表「高齡元宇宙醫療(Metaver Medicine)」,運用MR(Mix Reality,混合實境)等技術,提供智慧醫療照護、智慧社區健康服務等。智捷生醫副總顏進平表示,虛擬照護系統包含智慧AI虛擬人物陪伴、智能照護等服務;而VR遊戲使用於長者復健,可活化大腦、預防延緩失智症。目前研發的2款VR軟體,一款是讓長者玩接球,練習肢體協調;另一款是進入模擬的新竹城隍廟看地圖尋寶,協助失智症狀較輕的長者訓練方向感。

與醫研雲集、宏達電合作,三軍總醫院也跨入VR應用照顧行列。三軍總醫院急診部主治醫師徐克強說明,該院於2020年投資研發VR系統,隔年籌設VR訓練課程,計畫階段性開發急門診、住院等虛擬照護情境,藉由模擬操作及串流同步,提升臨床訓練量能。系統提供單機訓練、一對一線上操作教學課程,及一對多(最多6人)TRM(Team Resource Management,團隊資源管理)訓練,操作雙手感應器完成各項醫療照護;同時可預先載入影音,內建錄影、同步監控、歷程記錄等功能。

三軍總醫院急診部主治醫師徐克強三軍總醫院急診部主治醫師徐克強

「買藥」也能結合元宇宙,明基健康生活客戶經理藍元佑解釋,團隊透過導入雲動力資訊自行開發並取得專利的「Helium雲端虛擬空間系統」,打造OMO(Online Merge Offline,線上線下整合系統)智慧藥局二代店;利用VR創造實體正光連鎖藥局的虛擬空間,便於偏鄉長者線上逛藥局、與藥師即時視訊諮詢,發展出社區藥局型態的銀髮照護模式,翻轉傳統藥局的樣態。以虛實融合型態,提供聽力店中店、VR視訊、電商、跨店取貨、專業三師等服務,鎖定守護銀髮族健康照護。

明基健康生活客戶經理藍元佑明基健康生活客戶經理藍元佑

AR|擴增實境智慧眼鏡 元宇宙技術助攻照護

南臺科大「AR智慧眼鏡之輔助義肢」,首創以AI深度學習物件偵測技術,推論第一人稱視角畫面中眼睛注視點位置之物件類型,進而控制AI義肢手臂轉換對應手勢,獲選「2022未來科技獎」、「2021年科技部創新創業激勵計畫(FiTi)創業傑出獎」。結合AI應用開發的「AR智慧眼鏡之長照巡房與遠距會診系統」,透過智慧眼鏡第一視角即時影像,提供遠距會診、長照巡房、藥物辨識等,以減輕照顧負擔。

VR 遊戲使用於長者復健、訓練方向感。(圖片來源/智捷生醫)VR 遊戲使用於長者復健、訓練方向感。(圖片來源/智捷生醫)

該校導入佐臻AR智慧眼鏡,研發醫療元宇宙與智慧醫療照護暨輔助科技相關作品,包含遠距照顧、預防醫學、跌倒警示、居家復健輔助等。南臺科大已和奇美醫院共同成立高階智慧生醫聯合研究中心,未來將持續與佐臻5G+XR元宇宙應用技術研發中心合作,並擴大聯合6間核心夥伴醫院的AI醫療研究中心,以醫療元宇宙關鍵技術,聚焦發展「中高齡高階智慧醫療近床照護暨復健輔助科技」。

機器人善用替身照顧 從虛到實的最後一哩路

女媧創造網路資訊處副總張智傑評估,現階段元宇宙的發展僅觸及將真實衍生到虛擬,在照顧科技的著力點較小;若能結合機器人的替身優勢將虛擬衍生回真實,未來會有更突破性的成長。而致力於精進機器人研發的女媧創造,主打Kebbi Air S AI機器人,搭載AI自然語言互動、遠距視訊、影像識別、生理數據監測、失智症延緩訓練等技術應用,陪伴長者同時進行生理監控,協助家屬即時掌握狀況。

女媧創造網路資訊處副總張智傑女媧創造網路資訊處副總張智傑

高齡智慧照顧應用方面,女媧創造與台師大健康促進與衛生教育學系教授郭鐘隆攜手,推出機器人結合桌遊的軟體遊戲「憶遊寶島」,在台北市社區關懷據點石頭湯上課,為長者檢測失智項目,並對其認知弱項做訓練補強。另外,實驗場域合作夥伴包括台大新竹分院、台大社工系;桃園仁愛之家附設成功老人養護中心,還特別採購2~3台組裝版機器人,讓長者動手玩,訓練其手部和記憶活化。

機器人多功能選單,陪伴照護長者。(圖片來源/侒可傳媒)機器人多功能選單,陪伴照護長者。(圖片來源/侒可傳媒)

資訊平台數據資料庫如百寶箱   搭起跨域應用的想像

元宇宙學術研究已有10多年,最初稱為Digital Twin(數位孿生)。」長期探究智慧照顧領域的智齡科技執行長康仕仲直言,其實深層「資料」最重要,方能往上延伸醫材輔具、居家與機構照護等功能。實際應用上,比如智齡資料庫有5億多筆、約10幾萬人的資料,從中可找出跟自己的健康資料最接近的年長者資訊,觀其數據分析結果,「例如金融業可以現有資料,經過機器學習模組的設計運算後,預測未來所需的照護費用。」

智齡科技執行長康仕仲智齡科技執行長康仕仲

「元宇宙應該稱呼為『多元宇宙』,」仁寶電腦副總徐睿鈞表示,多元宇宙、Metaverse運用Visual Effect(視覺效果),加速人們對於資訊系統的理解,讓資料便於吸收與應用,比如仁寶i照護有超過30萬人以上資料,「所以重點是必須要有資料。」多元宇宙探究運用人類原生本能的感知,比如視覺、腦波等,採取虛擬技術互動,加速精準判斷、節省時間,另可運用有效數據做績效規劃。

仁寶電腦副總徐睿鈞仁寶電腦副總徐睿鈞

徐睿鈞提到,經營管理上,數據分析與預測可利用多元宇宙虛擬空間,拉動時間軸觀測立體圖的轉變;策略擬定的部分,比如運用甘特圖時,可像 Google Map 呈現不同時間點的虛擬實況,追蹤YoY(年增長率)、QoQ(季增長率)的變化。人才資源培訓方面,多元宇宙可能不只呈現褥瘡照顧的畫面,還可加入互動、模擬感受手部的操作;仁寶用戶在5年內就能體驗到元宇宙帶來的優勢。

更多精彩內容,敬請參閱第23期創新照顧雜誌

喜歡這篇文章嗎?加入會員即可收藏文章、產品及供應商