扎克伯格演示自制“賈維斯”表現(xiàn)不佳，問(wèn)題出在哪?

近來(lái)扎克伯格向記者公開(kāi)演示了他2016年的作品，一個(gè)類似Jarvis的人工智能助手，從記者的描述來(lái)看，這人工智能助手大部分時(shí)候還比較不錯(cuò)，但在語(yǔ)音交互環(huán)節(jié)則不太理想，對(duì)此媒體做了如下報(bào)道：

扎克伯格還建立了響應(yīng)語(yǔ)音指令的系統(tǒng)，并通過(guò)定制iOS應(yīng)用控制。但這部分展示不太理想，他重復(fù)了四次指令才讓系統(tǒng)弄明白：天黑前不要開(kāi)燈。扎克伯格略顯尷尬地說(shuō)：“喔，這應(yīng)該是它最失敗的表現(xiàn)了!”。

不過(guò)，Jarvis播放音樂(lè)的展示還算成功。扎克伯格下令：“給我們放段音樂(lè)吧!”幾秒鐘后，大衛(wèi)·庫(kù)塔(David Guetta)的《Would I Lie to You》 開(kāi)始通過(guò)客廳揚(yáng)聲器響起來(lái)。他說(shuō)了兩次“把音量調(diào)高”后，系統(tǒng)照做無(wú)誤。最后，他同樣說(shuō)了兩次才讓系統(tǒng)停止播放。

這非常有意思，因?yàn)閺男侣剚?lái)看“天黑前不要開(kāi)燈”和“把音量調(diào)高”的失誤顯然都不是命令理解(語(yǔ)義)上有問(wèn)題，否則你說(shuō)八百遍Jarvis該不好使還是不好使。如果不是語(yǔ)義的問(wèn)題，那顯然就會(huì)和各大公司所宣稱的已經(jīng)被解決的問(wèn)題：語(yǔ)音識(shí)別有關(guān)。

標(biāo)準(zhǔn)環(huán)境解決≠真實(shí)效果好

關(guān)于語(yǔ)音識(shí)別的精度今年官方的報(bào)道一般是這樣的：

11月21日到23日，搜狗、百度和科大訊飛三家公司接連召開(kāi)了三場(chǎng)發(fā)布會(huì)向外界展示了自己在語(yǔ)音識(shí)別和機(jī)器翻譯等方面的最新進(jìn)展。值得注意的是，這三家公司幾乎在同一時(shí)段宣布了各自中文語(yǔ)音識(shí)別準(zhǔn)確率達(dá)到了97%。

類似的報(bào)道也會(huì)發(fā)生在微軟等的身上，我們假設(shè)Facebook做的不是太差，水平也與此類似達(dá)到97%的準(zhǔn)確率。97%的具體含義是100個(gè)單詞上只有3個(gè)錯(cuò)誤(刪除、被替換、被插入)，那么問(wèn)題就來(lái)了，如果真實(shí)環(huán)境里真的達(dá)到了這個(gè)精度，那么小扎的演示絕對(duì)不應(yīng)該是上面這個(gè)樣子。

那問(wèn)題出在那里?

關(guān)鍵問(wèn)題并不復(fù)雜，扎克伯格用手機(jī)當(dāng)做家庭里的終端，這樣距離稍微一遠(yuǎn)，環(huán)境稍微嘈雜一點(diǎn)，那再好的手機(jī)也沒(méi)辦法幫Jarvis聽(tīng)清楚你在說(shuō)什么。手機(jī)本身是設(shè)計(jì)給近場(chǎng)用的，手機(jī)上的語(yǔ)音識(shí)別基本也是給近場(chǎng)優(yōu)化過(guò)的，怎么也不能彌補(bǔ)遠(yuǎn)場(chǎng)上帶來(lái)的不適應(yīng)。

扎克伯格對(duì)此非常坦誠(chéng)，他在博客這么寫道：

In the case of Jarvis, training an AI that you'll talk to at close range is also different from training a system you'll talk to from all the way across the room, like Echo. These systems are more specialized than it appears, and that implies we are further off from having general systems than it might seem.

原文：https://www.facebook.com/notes/mark-zuckerberg