人民網
人民網>>陝西頻道>>人民網看陝西

它來了,它來了!智能電子導盲犬“啪嗒啪嗒”走來了!

人民網記者 李志強
2024年03月20日20:01 | 來源:人民網-陝西頻道
小字號

“啪嗒啪嗒......”一隻電子導盲犬在街上邁著規律的步伐,拉著牽引繩的“盲人”,在它的帶領下越過沿路障礙,平穩地行走著——這是西北工業大學李學龍教授團隊在探索離線具身智能應用方面取得的階段性進展。

具身智能,即具有物理實體,能夠通過傳感器和執行器與環境進行實時互動,執行相應指令或進行決策的智能機器。李學龍教授團隊將機器狗搭載離線大模型,應用在智能導盲場景,開發出大模型離線具身智能導盲犬,並實現了其智能人機交互、智能乘梯引導、智能過街引導、智能室內引導等功能。

李學龍教授團隊研發的大模型離線具身智能導盲犬。視頻截圖

記者從西北工業大學了解到,這項成果進一步展示了使用離線具身智能導盲犬代替傳統導盲犬的可能性,驗証了離線具身智能范式的可行性,使大模型具身智能機器人可以脫離互聯網環境,應用在無網或網絡信號不佳的工況環境。同時,也為視障人士一犬難求的問題提供了新的解決方案。

據團隊介紹,近年來,隨著機器人技術和SLAM導航技術的快速發展,針對電子導盲犬的探索也層出不窮。然而受制於自然語言處理技術的限制,上一代電子導盲犬仍然欠缺和人類“自由對話”的能力,也難以為視障人士提供情感陪伴。

大模型及具身智能技術的出現使電子導盲犬實現這種高級能力成為可能。但機器狗的低算力計算平台難以支撐大模型運行所需的海量計算資源,通常隻能通過請求雲服務的“在線具身智能”范式獲得大模型的高級能力,這嚴重限制了電子導盲犬的場景應用范圍。

為此,李學龍教授團隊結合目前最新的大模型量化壓縮和加速推理技術,成功將大模型部署至機器狗的低算力計算平台,驗証了“離線具身智能”范式的可行性。

目前通過實驗,團隊開發的離線具身智能導盲犬已能夠與視障人士流暢溝通指令,並帶領其通過馬路、樓梯、電梯等多樣復雜環境,驗証了離線具身智能導盲犬的智能人機交互能力、電梯弱網絡環境下的智能乘梯引導能力、實時性要求較高的智能過街引導能力和智能室內引導能力等。

據了解,研究團隊未來還將進一步優化具身智能導盲犬技術方案,與大模型相結合,探索在線與離線相融合的分布式異構具身智能方案,進一步拓寬離線具身智能導盲犬及更多智能機器人平台的應用場景,有效賦能工業生產智能化。(視頻由西北工業大學提供)

(責編:李志強、吳超)

分享讓更多人看到

返回頂部