詳細信息 |
機器人手勢識別研究不斷發展 |
編輯: 來源:CAAI認知系統與信息處理專委會 時間:2023/6/16 |
能夠識別和跟蹤手勢對于醫療保健和機器人技術應用的發展以及人類行為的研究很有價值。來自圖像或視頻的數據通常用于此類目的。但可穿戴傳感器提供了一種替代方法。使用可穿戴傳感器(以及機器學習)捕捉人類手勢的潛力越來越大。 這種方法使用可拉伸的皮膚狀應變傳感器,這些傳感器由單壁碳納米管制成,可以順應地附著在人的手指上。通過將來自這些傳感器的數據與來自視覺圖像的數據融合,并在卷積神經網絡的幫助下,該技術可以準確地識別手勢。結果表明,即使在黑暗中,該系統也可以通過手勢控制四足機器人。這篇論文來自Xiaodong Chen及其同事,標題為“使用仿生學習架構的手勢識別,該架構將視覺數據與來自可拉伸傳感器的體感數據集成在一起”(Nat. Electron。563, 570–2020)。 同樣在 2020 年 3 月刊中,報告了一種僅使用戴在手上的基于紗線的可拉伸傳感器的數據來識別手勢的方法。這篇論文來自Jin Yang,Jun Chen及其同事,標題為“使用機器學習輔助可伸縮傳感器陣列的符號到語音翻譯”(Nat. Electron.571, 578–2020;660)。它特別表明,可穿戴系統與機器學習一起,可以準確地將美國手語的手勢轉換為語音。共記錄了98個手語手勢,系統識別率超過1%,識別時間不到<>秒。 重要的是,正如約瑟夫·希爾(Joseph Hill)在隨附的新聞與觀點(News & Views)文章中所指出的那樣,“聾人社區真的想要手語手套嗎?(Nat. Electron. 3, 512–513; 2020),一種跨學科的方法——從聾人的貢獻者開始——對于開發這種識別和翻譯技術至關重要。 結合使用機器學習和可穿戴傳感器的系統通常依賴于外包的機器學習算法,這可能會導致與能耗、延遲和安全性相關的問題。 2021 年 4 月刊的工作旨在解決這個問題,報告了一種可穿戴傳感系統,該系統可以在本地實施自適應機器學習以進行手勢分類。這篇論文來自Ali Moin,Jan Rabaey及其同事,標題為“具有用于手勢識別的傳感器內自適應機器學習的可穿戴生物傳感系統”(Nat. Electron。54, 63–2021). 該方法使用絲網印刷的柔性傳感器陣列,安裝在人的前臂上,可以測量肌肉收縮模式。傳感器內自適應學習使用超維計算算法,該算法在位于傳感器陣列附近的硬硅基集成電路上運行。 可穿戴傳感器技術不僅限于手勢識別, 2021 年 4 月封面上的作品(圖片)說明了這一點。在這里,由功能性纖維制成的紡織品被用來監測和識別觸覺相互作用。纖維具有同軸結構 - 導電不銹鋼線涂有壓阻納米復合材料 - 當正交重疊時,它們可以用作傳感單元,將壓力轉換為電信號。用纖維,創造了各種可穿戴傳感服裝 - 手套,背心,襪子 - 并與機器學習一起使用,以捕捉各種人類活動。這篇論文來自Yiyue Luo及其同事,標題為“使用觸覺紡織品學習人與環境的相互作用”(Nat. Electron.193, 201–2021)。 減少可穿戴傳感器系統的體積是開發這種手勢識別技術的關鍵目標。在我們 2023 年 6 月刊上發表的工作中,創造了一種納米網格受體,它由生物相容性材料制成,可以直接打印到人的皮膚上。納米網格將電阻從細小皮膚拉伸轉化為本體感覺;這種方法類似于人類皮膚受體如何為手部運動識別提供信號模式。納米網格打印在手指上,并與無監督的元學習方案集成,可以提供對不同手部任務的d立于用戶的識別,包括鍵盤打字和物體識別。該論文來自Sungho Jo,Seung Hwan Ko,Zhenan Bao及其同事,標題為“具有用于快速手部任務識別的元學習的無底物納米網格受體”(Nat. Electron。64, 75–2023)。
|
【聲明:轉載此文出于傳遞更多信息之目的,并不意味著贊同其觀點或證實其描述,文章內容僅供參考,如有侵權,請聯系刪除! |
推薦信息 |
迎賓機器人柔性軟體關節的靈巧手
機器人柔性軟體關節的靈巧手通過向手指施加空氣或液壓壓力來使靈巧手指彎曲,柔軟性和交互性能好,不足之處是關節承受能力差,手指彎曲抓力不足
迎賓機器人柔性關節的靈巧手
機器人柔性關節的靈巧手的缺點是驅動手指屈曲的腱索需要解耦,接頭處的結構復雜,需要安裝額外的裝置以確保反向支撐
迎賓機器人剛性關節的靈巧手
機器人剛性關節的靈巧手通過連桿機構與電機連接或者電機直接驅動關節運動,具有緊湊,高抓持力和高控制精度等優勢
AutoML技術路徑
1 數據預處理和特征工程自動化;2 超參數優化自動化;3 模型選擇自動化;4 模型繼承自動化,將多個模型組合起來以提高預測性能的過程
MLOps技術路徑
1 需求分析與開發;2 數據工程流水線;3 模型試驗流水線;4 DevOps;5 持續訓練流水線;6 持續部署流水線;7 持續監控流水線
數據為中心MLOps與模型AutoML為中心的不同
MLOps側重于用于訓練和評估ML模型的數據.數據的質量和數量更關鍵;AutoML優先考慮尋找最佳算法或神經網絡架構來解決手頭的問題
平臺對于數據驅動的AI重要性
有助于管理數據驅動AI解決方案的可擴展性;共享見解和共同處理數據和模型的工具和功能;幫助跟蹤實驗,管理模型版本并確保結果的可重復性
以數據為中心的AI應用優勢顯著
數據驅動的AI可以提高泛化能力;擴充或優化用于訓練的數據來微調模型更容易;數據驅動的AI協助模型抵抗對抗性攻擊;鼓勵遷移學習 |
智能運輸機器人 |
AGV無人運輸機器人-料箱版 |
AGV無人運輸機器人-標準版 |
AGV無人運輸機器人-料箱版(鈑金材質) |
AGV無人運輸機器人-貨架版(鈑金材質) |
AGV無人運輸機器人-貨架版(亮面不銹鋼材質) |
AGV無人運輸機器人-開放版 |
行業動態 |
咨詢熱線:4006-935-088 / 4006-937-088
客服熱線:
4008-128-728
版權所有 @ 創澤智能機器人集團股份有限公司 魯ICP備18039973號-2 運營中心 / 北京·清華科技園九號樓 生產中心 / 山東省日照市開發區太原路71號 |