從元宇宙到醫(yī)療模擬,觸覺技術距離更真實的人機交互還有多遠?
人類通過“五感”,即視覺、聽覺、觸覺、嗅覺和味覺,來感知周圍的世界,并基于此與外界進行信息交互。
在這些感官中,觸覺扮演著傳遞信息和情感的重要角色,它能夠使人們感知力覺、滑覺、溫濕度、柔軟度、紋理等多種信息。
觸覺技術有望在多個領域應用,例如元宇宙、機器人、可穿戴設備、沉浸式游戲、模擬手術、教育培訓、遠程操作等。這也意味著,觸覺反饋設備(例如觸覺手套、觸覺可穿戴設備、觸覺外骨骼等)在市場具有良好的發(fā)展前景。
國際技術研究和市場咨詢公司 IDTechEx 在《觸覺 2025-2035:技術、市場、參與者》報告中預測,到 2035 年,觸覺技術市場規(guī)模將達到 71 億美元,2024 年至 2035 年的復合年增長率為 4.4%[1]。
圖丨全球觸覺技術市場(來源:IDTechEx)
實際上,盡管計算平臺經(jīng)過了 30 多年的發(fā)展,交互方式的演變主要還集中在視覺和聽覺信息上,觸覺反饋技術的應用仍然處于起步階段。
不過,近年來,全球的科研團隊已經(jīng)開始積極地探索觸覺反饋技術領域。例如,北京航空航天大學王黨校教授團隊在 npj Flex Electron 中,提出了一種“主動電子皮膚”(AE-Skin,Active Electronic Skin)的概念 [2]。
該技術的核心在于模擬人類皮膚的感覺能力,通過在物理表面上部署這種“皮膚”,可以實現(xiàn)動態(tài)多模式的觸覺顯示和觸覺傳感。
研究人員根據(jù)不同的互動場景需求,選擇合適的觸覺模態(tài)和傳感信號,并采用相應的材料和制造方法來制備相應的執(zhí)行器或傳感器。這些技術的結合使用,為用戶提供了沉浸式的互動體驗。
圖丨AE-Skin 的潛在應用場景(來源:npj Flex Electron)
根據(jù)論文,在實際應用中,AE-Skin 技術在物理世界和數(shù)字世界展現(xiàn)出巨大的潛力。例如,在智能家居環(huán)境中,通過在墻面上部署 AE-Skin,可以模擬出不同的材質(zhì)紋理,如硅藻土、石材和陶瓷,為用戶提供豐富的觸覺體驗。
在智能汽車中,集成了 AE-Skin 的方向盤能夠監(jiān)測駕駛員的生理和行為參數(shù),如握持壓力和握持位置,在駕駛疲勞或不合規(guī)駕駛時發(fā)出振動警告。
在智能博物館中,AE-Skin 能夠通過動態(tài)圖案和溫度反饋增強展品的生動性和真實性,為參觀者提供沉浸式的互動體驗。
研究人員對 AE-Skin 提出了四個潛在的發(fā)展方向,包括:
首先,計劃深入研究皮膚交互的力學原理、感知生理學以及觸幻覺效應等基礎理論,這將為 AE-Skin 的設計和性能評估提供堅實的理論支撐。
其次,致力于研究觸覺呈現(xiàn)系統(tǒng)的能源供應和低能耗技術,同時探索如何將多種觸覺模態(tài)融合,以實現(xiàn)更精準的空間、時間和語義配準,從而提升交互體驗的沉浸感和真實性。
再次,探索驅(qū)動器和傳感器的空間配準方法,以及功能適配和數(shù)據(jù)傳輸與處理技術,旨在構建一個高度集成的驅(qū)動感知一體化交互系統(tǒng)。
最后,探究視觸覺融合呈現(xiàn)技術,以實現(xiàn) AE-Skin 觸覺信息與虛擬場景或電子屏幕等視覺信息之間的時空一致性配準,這將進一步增強用戶體驗的自然性和無縫性。
通過這些方向的研究,AE-Skin 技術有望在未來實現(xiàn)更豐富和更高效的交互體驗。
(來源:npj Flex Electron)
DeepTech 發(fā)現(xiàn),觸覺技術正在向?qū)W科交叉和更多技術融合方向發(fā)展。
例如,西湖大學?學院姜漢卿教授課題組與美國西北?學約翰·羅杰斯(John Rogers)教授等課題組合作,在 Nature 上報道了一種新型的多模態(tài)觸覺模擬方法及智能穿戴裝置 [3]。
該研究展示了一種新型的生物彈性觸覺模擬換能器,通過皮膚機械能量的儲存與恢復,實現(xiàn)了高效的多模態(tài)觸覺模擬及反饋,為生物醫(yī)學和多模態(tài)觸覺模擬反饋技術提供了新的視角。
另一方面,AI 在觸覺技術中也發(fā)揮著重要的作用。上海交通大學劉景全教授、盧策吾教授團隊在 Nature Communications 報告了一種基于機器學習、用于操作的視覺-觸覺記錄和跟蹤系統(tǒng) ViTaM[4]。
這個系統(tǒng)配備了擁有 1152 個力敏通道的可伸縮觸覺手套,以及視覺與觸覺相結合的學習框架,能夠?qū)Σ僮鬟^程中手與物體的互動動態(tài)進行評估。
他們開發(fā)了一種主動抑制技術,該技術基于對稱響應檢測和自適應校準,成功達到了 97.6% 的測力準確度。
研究人員對包括可變形和剛體在內(nèi)的 6 類 24 個物體進?了實驗,所有序列的平均重建誤差僅為 1.8cm,證明了在操縱具有不同程度可變形性的物體時,復制?類知識的普遍能?。
圖丨ViTaM 系統(tǒng)概述(來源:Nature Communications)
觸覺技術在更廣泛的應用方面,青島大學田明偉教授團隊受海星管足啟發(fā),開發(fā)了一種能夠識別手勢的手套,其中包含雙層微柱互鎖結構柔性觸覺傳感器 [5]。
這種觸覺手套在實現(xiàn)高靈敏度(0.04kPa-1)、寬檢測范圍(5kPa-450kPa)、快速響應時間(23ms)和出色耐久性(~10000 次)的同時,還兼具防?性能。
通過與機器學習算法的結合,成功地實現(xiàn)了智能識別 16 種?下常用手勢,大幅度擴展了潛水員的有效通信能力,并在水下通信領域表現(xiàn)出應用潛力。
(來源:ACS Nano)
在推動觸覺產(chǎn)品落地方面,新加坡國立大學林水德(Lim Chwee Teck)教授課題組開發(fā)了一款便攜式、高度靈活的觸覺手套 HaptGlove[6]。
不僅能夠通過 AI 捕捉用戶數(shù)據(jù),還為醫(yī)療提供者和患者在元宇宙中的互動提供了實時的觸覺反饋。
與市面上其他類似產(chǎn)品相?,他們所研發(fā)的觸覺手套更輕便,僅重 250 克。
HaptGlove 使用該課題組所開發(fā)的專有軟件,可將視覺觸、覺延遲在 20 毫秒以內(nèi),進而提供近乎實時的用戶體驗。并且,基于此精準捕捉手指運動,提供物體的硬度、形狀、大小等觸覺反饋。
HaptGlove 的應用場景包括游戲、醫(yī)療和教育領域等,例如通過模擬超現(xiàn)實環(huán)境幫助外科醫(yī)生更好地準備手術,或通過模擬不同身體部位的觸診為學生提供實踐學習體驗。
圖丨用戶使用 HaptGlove(來源:新加坡國立大學)
此外,美國麻省理工學院計算機科學與人工智能實驗室開發(fā)了一種多功能智能手套,集成了觸覺傳感器和振動觸覺單元 [7]。通過先進的數(shù)字機繡技術,這些傳感器和執(zhí)?器被精確地嵌?到織物中,實現(xiàn)了可定制的空間分辨率和布局。
手套基于機器學習框架,采用成本低廉的商業(yè)材料,在能夠快速制成的同時,還保持了紡織品的柔軟性、形狀穩(wěn)定性和適應性。
(來源:Nature Communications)
總體來說,觸覺技術的發(fā)展正推動著人機交互向全新的維度發(fā)展。從智能家居到元宇宙,從醫(yī)療模擬到水下通信,觸覺技術的應用前景廣闊,它不僅增強了人們的感官體驗,也有望為特定行業(yè)提供革命性的解決方案。
參考資料:
1.https://www.idtechex.com/en/research-article/haptics-technology-market-to-grow-to-us-7-1b-by-2035/31731
2.Guo, Y., Wang, Y., Tong, Q. et al. Active electronic skin: an interface towards ambient haptic feedback on physical surfaces. npj Flex Electron 8, 25 (2024). https://doi.org/10.1038/s41528-024-00311-5
3.Flavin, M.T., Ha, KH., Guo, Z. et al. Bioelastic state recovery for haptic sensory substitution. Nature 635, 345–352 (2024). https://doi.org/10.1038/s41586-024-08155-9
4.Jiang, C., Xu, W., Li, Y. et al. Capturing forceful interaction with deformable objects using a deep learning-powered stretchable tactile array. Nature Communications 15, 9513 (2024). https://doi.org/10.1038/s41467-024-53654-y
5.Liu,J. et al.Underwater Gesture Recognition Meta-Gloves for Marine Immersive Communication. ACS Nano 18, 16, 10818–10828(2024). https://doi.org/10.1021/acsnano.3c13221
6.https://news.nus.edu.sg/novel-vr-glove-levels-up-user-experience-in-the-metaverse-with-a-more-realistic-sense-of-touch/
7.Luo, Y., Liu, C., Lee, Y.J. et al. Adaptive tactile interaction transfer via digitally embroidered smart gloves. Nature Communications 15, 868 (2024). https://doi.org/10.1038/s41467-024-45059-8
運營/排版:何晨龍
相關知識
健康元宇宙:理想與現(xiàn)實
瑪特宇宙:元宇宙中的健康護理:虛擬現(xiàn)實在醫(yī)療中的應用
元宇宙賦能疾病診治:未來虛實融合的就診場景
瑪特宇宙:元宇宙中的健康與醫(yī)療:虛擬環(huán)境中的關懷與治療
VR突破傳統(tǒng)診療模式 助力醫(yī)療元宇宙開啟新體驗
多地競相布局元宇宙產(chǎn)業(yè),規(guī)模超8500億、元宇宙沉浸式體驗《絲路奇遇記》總投資660萬元
AI+健身:在元宇宙里“動起來”
Facebook = Meta?一場 21 世紀最大的「元宇宙概念」發(fā)布會
太空旅行,距離我們還有多遠?
虛擬現(xiàn)實??離臨床應用有多遠?
網(wǎng)址: 從元宇宙到醫(yī)療模擬,觸覺技術距離更真實的人機交互還有多遠? http://www.u1s5d6.cn/newsview928688.html
推薦資訊
- 1發(fā)朋友圈對老公徹底失望的心情 12775
- 2BMI體重指數(shù)計算公式是什么 11235
- 3補腎吃什么 補腎最佳食物推薦 11199
- 4性生活姿勢有哪些 盤點夫妻性 10425
- 5BMI正常值范圍一般是多少? 10137
- 6在線基礎代謝率(BMR)計算 9652
- 7一邊做飯一邊躁狂怎么辦 9138
- 8從出汗看健康 出汗透露你的健 9063
- 9早上怎么喝水最健康? 8613
- 10五大原因危害女性健康 如何保 7826