西工大團隊開發(fā)出離線具身智能導盲犬
http://www.mattsalter.com2024年04月01日 09:35教育裝備網(wǎng)
電子導盲犬能否取代傳統(tǒng)導盲犬,解決視障人士一犬難求的困境?西北工業(yè)大學團隊在此方面開展研究攻關并取得了新的突破。目前,團隊開發(fā)的離線具身智能導盲犬已能夠與視障人士流暢溝通指令,并帶領其通過馬路、樓梯、電梯等多樣復雜環(huán)境。
近日,西工大光電與智能研究院聯(lián)合中國電信人工智能研究院,在探索離線具身智能應用方面取得階段性進展。具身智能,即具有物理實體,能夠通過傳感器和執(zhí)行器與環(huán)境進行實時互動,執(zhí)行相應指令或進行決策的智能機器。
西工大教授李學龍帶領團隊將搭載離線大模型的機器狗應用在智能導盲場景,開發(fā)出大模型離線具身智能導盲犬,并實現(xiàn)了智能人機交互、智能乘梯引導、智能過街引導、智能室內(nèi)引導等功能。該成果進一步展示了使用離線具身智能導盲犬代替?zhèn)鹘y(tǒng)導盲犬的可能性,同時驗證了離線具身智能范式的可行性,使大模型具身智能機器人可以脫離互聯(lián)網(wǎng)環(huán)境,應用在無網(wǎng)或網(wǎng)絡信號不佳的工況環(huán)境,進一步拓展臨地安防的應用場景。
受制于自然語言處理技術,上一代電子導盲犬欠缺和人類“自由對話”的能力。大模型及具身智能技術的出現(xiàn),使電子導盲犬實現(xiàn)這種高級能力成為可能。但機器狗的低算力計算平臺難以支撐大模型運行所需的海量計算資源,通常只能通過請求云服務的“在線具身智能”范式獲得大模型的高級能力,這嚴重限制了電子導盲犬的場景應用范圍。李學龍團隊結(jié)合目前最新的大模型量化壓縮和加速推理技術,成功將大模型部署至機器狗的低算力計算平臺。
責任編輯:董曉娟
本文鏈接:TOP↑