Magic Leap頭戴式設(shè)備識(shí)別手語(yǔ)和文本“感官眼鏡”
Magic Leap將這種方法稱(chēng)為手語(yǔ)和文本翻譯“感官眼鏡”。
由于3月15日本周四發(fā)布的一項(xiàng)新專(zhuān)利申請(qǐng),另一件Magic Leap的神秘故事已被揭開(kāi)。新的專(zhuān)利申請(qǐng)說(shuō)明和圖紙概述了一種使用頭戴式設(shè)備檢測(cè)和翻譯手語(yǔ)的方法。新專(zhuān)利信息的另一部分詳細(xì)介紹了使用頭戴式設(shè)備識(shí)別標(biāo)牌和店面上的文字,并將該文本翻譯成耳機(jī)中顯示信息的能力。Magic Leap將這種方法稱(chēng)為手語(yǔ)和文本翻譯“感官眼鏡”。
具體而言,該專(zhuān)利申請(qǐng)描述了“用于識(shí)別環(huán)境中的手語(yǔ)和文本的混合現(xiàn)實(shí)系統(tǒng)。這些實(shí)施有利地可以允許不同能力的人之間的更多交互。感官眼鏡系統(tǒng)可以識(shí)別和解釋手語(yǔ),并且可以將這些信息翻譯呈現(xiàn)給混合現(xiàn)實(shí)設(shè)備的用戶(hù)。
盡管Magic Leap并沒(méi)有在其設(shè)備Magic Leap One:Creator EdiTIon的第一次迭代中承諾過(guò)這樣的功能,但公司正在開(kāi)發(fā)這種功能卻是一個(gè)簡(jiǎn)單的事實(shí),并且令人興奮,它將為聾人和聽(tīng)覺(jué)受損的社區(qū)打開(kāi)一個(gè)新的溝通世界。
專(zhuān)利文件中包含的圖紙顯示,一個(gè)人戴著頭戴式裝置,與使用手語(yǔ)的人進(jìn)行互動(dòng)。從佩戴者的角度來(lái)看,我們看到了一個(gè)菜單,它為使用手語(yǔ)的人提供了一組可能的響應(yīng)。
除了允許使用手語(yǔ)的人與不懂手語(yǔ)的人進(jìn)行無(wú)縫溝通之外,該應(yīng)用程序還將允許來(lái)自世界各地的手語(yǔ)使用者有效地進(jìn)行交流。
“許多人不知道任何手語(yǔ),有言語(yǔ)或聽(tīng)力障礙的人和談話(huà)伙伴可能不熟悉相同的手語(yǔ),”專(zhuān)利申請(qǐng)說(shuō)明中寫(xiě)道。
這可能會(huì)阻礙與聽(tīng)眾的對(duì)話(huà),也可能阻礙演講的人。因此,可穿戴系統(tǒng)(例如,手勢(shì))可以將對(duì)話(huà)伙伴做出的手勢(shì)等標(biāo)志進(jìn)行成像,并將其轉(zhuǎn)換為文本或圖形(例如,在系統(tǒng)用戶(hù)理解的符號(hào)語(yǔ)言中顯示手語(yǔ)手勢(shì)的圖形),然后顯示與符號(hào)相關(guān)的信息(例如,將符號(hào)翻譯成用戶(hù)理解的語(yǔ)言)將極大地幫助改善用戶(hù)與對(duì)話(huà)伙伴之間的交流。
專(zhuān)利申請(qǐng)的另一種語(yǔ)言是關(guān)于文本翻譯的細(xì)節(jié),其指出:“可穿戴系統(tǒng)還可以識(shí)別用戶(hù)環(huán)境中的文本,修改文本(例如,通過(guò)改變文本的內(nèi)容或顯示特性),并呈現(xiàn)修改文字遮蔽原文。”
這可能只是一個(gè)開(kāi)創(chuàng)性的符號(hào)語(yǔ)言功能,因?yàn)樗梢粤⒓聪粋€(gè)人在外國(guó)旅行時(shí)的語(yǔ)言障礙,例如,立即將日本漢字的路標(biāo)換成英語(yǔ),讓戴著耳機(jī)的人使用英語(yǔ)。這種工具已經(jīng)通過(guò)谷歌的智能手機(jī)翻譯應(yīng)用程序獲得,而且效果很好。但是將一個(gè)類(lèi)似的功能嵌入到一對(duì)智能眼鏡中,會(huì)使這個(gè)過(guò)程更加無(wú)縫。
專(zhuān)利申請(qǐng)文件中的一幅圖顯示一個(gè)人站在街道上,一邊是銀行的漢字,另一邊是英文翻譯,說(shuō)明已經(jīng)發(fā)生了翻譯。
除了翻譯之外,“感官眼鏡”還可以幫助用戶(hù)閱讀可能很難看到的文字。
可穿戴系統(tǒng)還可以提高文本的顯示質(zhì)量。例如,各種環(huán)境因素,如霧,霾,雨,明亮的光,低光。
專(zhuān)利申請(qǐng)文件的另一部分內(nèi)容是:“可穿戴系統(tǒng)可以讓頭戴式顯示器顯示字體大小,而字體大小不同于與原始圖像相關(guān)的字母或字符。可穿戴系統(tǒng)還可以提高文本的顯示質(zhì)量。例如,在各種環(huán)境因素,如霧、霾、雨、強(qiáng)光、低光、低光或色彩對(duì)比,以及周?chē)膱D像等,都可能妨礙用戶(hù)在沒(méi)有可穿戴設(shè)備時(shí)對(duì)文本的清晰認(rèn)識(shí)。(例如,具有增加的對(duì)比度或更大的字體),這將增加文本的清晰度。
這些最新的專(zhuān)利揭示與Magic Leap宣揚(yáng)的游戲和娛樂(lè)體驗(yàn)有很大的不同,但它們僅僅是一個(gè)重要的(如果不是更重要的話(huà))。
是的,Magic Leap需要通過(guò)游戲,電影和體育體驗(yàn)來(lái)吸引公眾的想象力,從而獲得收益。但是,實(shí)時(shí)手語(yǔ)和文本翻譯等基本輔助功能可能會(huì)將Magic Leap One(或設(shè)備的未來(lái)版本)從奢侈品購(gòu)買(mǎi)轉(zhuǎn)變?yōu)榻^對(duì)必要。