2018年05月30日,微軟HoloLens能夠快速感知周圍的環(huán)境,這令人印象深刻,但僅限于顯示電子郵件或游戲角色,缺乏創(chuàng)造力。最新的研究表明,HoloLens在作為視覺障礙者的視覺假體方面效果非常好。不是傳遞實際的視覺數(shù)據(jù),而是通過音頻提示和指令實時引導(dǎo)他們。
加州理工學(xué)院和南加州大學(xué)的研究人員認(rèn)為,目前恢復(fù)視力根本不是一個現(xiàn)實的目標(biāo),而替換視覺感知部分并不一定需要從視覺方面入手。畢竟,如果能說出椅子的位置,你無需視覺支持就可以避開它,不是嗎?
搗鼓視覺數(shù)據(jù)并生成高階特征地圖是HoloLens的核心功能之一,所以研究團隊決定令設(shè)備專注于這一點,并且為用戶重新創(chuàng)建環(huán)境。
他們圍繞聲音設(shè)計了一種系統(tǒng),其中每個主要對象和功能都可以通過語音或聲效告訴用戶它們的位置。例如當(dāng)用戶接近墻壁時,它們將發(fā)出嘶嘶聲。用戶可以掃描場景,然后對象將從左到右地宣布自己的位置。用戶可以選擇一個對象,并重復(fù)其語音或聲效,從而幫助用戶發(fā)現(xiàn)它的位置。
對于在朋友家尋找手杖或沙發(fā)這樣的靜態(tài)任務(wù)而言,設(shè)備的運行效果十分出色。但值得一提的是,系統(tǒng)同時支持運動模式。
團隊邀請了7名盲人進行測試。研究人員首先向他們進行簡短的介紹,但沒有提供培訓(xùn),然后要求他們完成各種任務(wù)。用戶能夠可靠地定位并指向提供音頻線索的對象,而且通常情況下能夠迅速在房間中找到椅子,同時可以輕松避免障礙物。
他們接下來的任務(wù)是按照頭顯說明從建筑物的入口導(dǎo)航至二樓的房間。一個“虛擬向?qū)?rdquo;將在前方數(shù)英尺遠的位置反復(fù)說出“跟我來(follow me)”,然后在樓梯,樓梯扶手等位置發(fā)出警告。
7名被試在首次嘗試就順利到達重點,而且用時比正常情況下短。研究人員在論文中指出,其中一名被試說道:“這太有趣了!我什么時候才能買到呢?”
實際上,微軟在多年前就開始對這方面進行研究,但當(dāng)時并不存在所需的硬件。HoloLens改變了這一點。盡管它明顯適合正常視力人員使用,但HoloLens的能力可以滿足這里描述的視覺假體要求。
有趣的是,研究人員指出30年前就已經(jīng)有人預(yù)測過這種類型的系統(tǒng)。富有遠見的C.C. Collins早在1985年寫道:“我堅信我們應(yīng)該采取更復(fù)雜的方法,利用人工智能的力量處理大量詳細(xì)的視覺信息,然后取代眼睛的缺失功能以及大腦所進行的大部分視覺預(yù)處理。”
這種系統(tǒng)的潛力十分巨大,但該項目目前僅僅只是原型。隨著HoloLens等系統(tǒng)變得更輕和更強大,它們將成為美觀時尚的日用物品。我們不難想象,視力障礙者在酒店或商場將能輕松找到自己的目標(biāo)位置,甚至能夠安全地行走在大街上。
研究人員寫道:“到目前為止,我們預(yù)計讀者在提高認(rèn)知假體方面已經(jīng)有了自己的建議�,F(xiàn)在有一個硬件/軟件平臺可以快速實施這些想法,并用人類被試測試它們。我們希望這可以促進發(fā)展,增強人們對盲人和視力障礙人群的認(rèn)識,并且利用增強的聽覺現(xiàn)實來傳達我們無法知覺的一切。”
榜單收錄、高管收錄、融資收錄、活動收錄可發(fā)送郵件至news#citmt.cn(把#換成@)。
海報生成中...