Magic Leap頭戴式設(shè)備識(shí)別手語(yǔ)和文本“感官眼鏡”

Magic Leap將這種方法稱(chēng)為手語(yǔ)和文本翻譯“感官眼鏡”。

由于3月15日本周四發(fā)布的一項(xiàng)新專(zhuān)利申請(qǐng)，另一件Magic Leap的神秘故事已被揭開(kāi)。新的專(zhuān)利申請(qǐng)說(shuō)明和圖紙概述了一種使用頭戴式設(shè)備檢測(cè)和翻譯手語(yǔ)的方法。新專(zhuān)利信息的另一部分詳細(xì)介紹了使用頭戴式設(shè)備識(shí)別標(biāo)牌和店面上的文字，并將該文本翻譯成耳機(jī)中顯示信息的能力。Magic Leap將這種方法稱(chēng)為手語(yǔ)和文本翻譯“感官眼鏡”。
 

具體而言，該專(zhuān)利申請(qǐng)描述了“用于識(shí)別環(huán)境中的手語(yǔ)和文本的混合現(xiàn)實(shí)系統(tǒng)。這些實(shí)施有利地可以允許不同能力的人之間的更多交互。感官眼鏡系統(tǒng)可以識(shí)別和解釋手語(yǔ)，并且可以將這些信息翻譯呈現(xiàn)給混合現(xiàn)實(shí)設(shè)備的用戶(hù)。

       盡管Magic Leap并沒(méi)有在其設(shè)備Magic Leap One：Creator EdiTIon的第一次迭代中承諾過(guò)這樣的功能，但公司正在開(kāi)發(fā)這種功能卻是一個(gè)簡(jiǎn)單的事實(shí)，并且令人興奮，它將為聾人和聽(tīng)覺(jué)受損的社區(qū)打開(kāi)一個(gè)新的溝通世界。

        專(zhuān)利文件中包含的圖紙顯示，一個(gè)人戴著頭戴式裝置，與使用手語(yǔ)的人進(jìn)行互動(dòng)。從佩戴者的角度來(lái)看，我們看到了一個(gè)菜單，它為使用手語(yǔ)的人提供了一組可能的響應(yīng)。
 

除了允許使用手語(yǔ)的人與不懂手語(yǔ)的人進(jìn)行無(wú)縫溝通之外，該應(yīng)用程序還將允許來(lái)自世界各地的手語(yǔ)使用者有效地進(jìn)行交流。

       “許多人不知道任何手語(yǔ)，有言語(yǔ)或聽(tīng)力障礙的人和談話(huà)伙伴可能不熟悉相同的手語(yǔ)，”專(zhuān)利申請(qǐng)說(shuō)明中寫(xiě)道。

        這可能會(huì)阻礙與聽(tīng)眾的對(duì)話(huà)，也可能阻礙演講的人。因此，可穿戴系統(tǒng)(例如，手勢(shì))可以將對(duì)話(huà)伙伴做出的手勢(shì)等標(biāo)志進(jìn)行成像，并將其轉(zhuǎn)換為文本或圖形（例如，在系統(tǒng)用戶(hù)理解的符號(hào)語(yǔ)言中顯示手語(yǔ)手勢(shì)的圖形），然后顯示與符號(hào)相關(guān)的信息（例如，將符號(hào)翻譯成用戶(hù)理解的語(yǔ)言）將極大地幫助改善用戶(hù)與對(duì)話(huà)伙伴之間的交流。
 

專(zhuān)利申請(qǐng)的另一種語(yǔ)言是關(guān)于文本翻譯的細(xì)節(jié)，其指出：“可穿戴系統(tǒng)還可以識(shí)別用戶(hù)環(huán)境中的文本，修改文本（例如，通過(guò)改變文本的內(nèi)容或顯示特性），并呈現(xiàn)修改文字遮蔽原文。”

        這可能只是一個(gè)開(kāi)創(chuàng)性的符號(hào)語(yǔ)言功能，因?yàn)樗梢粤⒓聪粋€(gè)人在外國(guó)旅行時(shí)的語(yǔ)言障礙，例如，立即將日本漢字的路標(biāo)換成英語(yǔ)，讓戴著耳機(jī)的人使用英語(yǔ)。這種工具已經(jīng)通過(guò)谷歌的智能手機(jī)翻譯應(yīng)用程序獲得，而且效果很好。但是將一個(gè)類(lèi)似的功能嵌入到一對(duì)智能眼鏡中，會(huì)使這個(gè)過(guò)程更加無(wú)縫。
 

專(zhuān)利申請(qǐng)文件中的一幅圖顯示一個(gè)人站在街道上，一邊是銀行的漢字，另一邊是英文翻譯，說(shuō)明已經(jīng)發(fā)生了翻譯。

       除了翻譯之外，“感官眼鏡”還可以幫助用戶(hù)閱讀可能很難看到的文字。
 

可穿戴系統(tǒng)還可以提高文本的顯示質(zhì)量。例如，各種環(huán)境因素，如霧，霾，雨，明亮的光，低光。

       專(zhuān)利申請(qǐng)文件的另一部分內(nèi)容是:“可穿戴系統(tǒng)可以讓頭戴式顯示器顯示字體大小，而字體大小不同于與原始圖像相關(guān)的字母或字符。可穿戴系統(tǒng)還可以提高文本的顯示質(zhì)量。例如，在各種環(huán)境因素，如霧、霾、雨、強(qiáng)光、低光、低光或色彩對(duì)比，以及周?chē)膱D像等，都可能妨礙用戶(hù)在沒(méi)有可穿戴設(shè)備時(shí)對(duì)文本的清晰認(rèn)識(shí)。（例如，具有增加的對(duì)比度或更大的字體），這將增加文本的清晰度。
 

這些最新的專(zhuān)利揭示與Magic Leap宣揚(yáng)的游戲和娛樂(lè)體驗(yàn)有很大的不同，但它們僅僅是一個(gè)重要的（如果不是更重要的話(huà)）。

       是的，Magic Leap需要通過(guò)游戲，電影和體育體驗(yàn)來(lái)吸引公眾的想象力，從而獲得收益。但是，實(shí)時(shí)手語(yǔ)和文本翻譯等基本輔助功能可能會(huì)將Magic Leap One（或設(shè)備的未來(lái)版本）從奢侈品購(gòu)買(mǎi)轉(zhuǎn)變?yōu)榻^對(duì)必要。