NovelEffect用語音識(shí)別技術(shù)講故事 讓睡前故事隨著情節(jié)變化精彩紛呈
NovelEffect是一款親子閱讀App,它運(yùn)用了語音識(shí)別技術(shù),在爸媽給孩子們講故事時(shí),將朗讀出來的文字與影視主題音樂、音效、動(dòng)畫等同步,讓睡前故事隨著情節(jié)變化精彩紛呈,如同魔幻電影一般。
有一天,我正在為女兒朗讀英文繪本《好餓的毛毛蟲》(TheVeryHungryCaterpillar)。當(dāng)讀到毛毛蟲吃掉一個(gè)蘋果的時(shí)候,我停了下來,因?yàn)槲衣牭娇Х茸滥沁厒鱽砹嗣黠@的咀嚼聲。這種聲音實(shí)際上是由這款應(yīng)用程序發(fā)出的,它根據(jù)使用者正在朗讀的故事文本,通過語音識(shí)別技術(shù),根據(jù)朗讀者正在朗讀的內(nèi)容播放各種聲音效果和音樂作為背景音樂,讓家里及課堂的朗讀體驗(yàn)對(duì)于孩子來說變得更有吸引力。
打開NovelEffect應(yīng)用程序,并在系統(tǒng)設(shè)置內(nèi)打開麥克風(fēng),你會(huì)看到書架上放滿了有趣的故事書。使用NovelEffect,你需要在應(yīng)用中打開特定能匹配現(xiàn)實(shí)生活的書,這能使得應(yīng)用程序開始“傾聽”這本書的文本,并且分析朗讀者的言語來找出故事當(dāng)時(shí)所處的文本,最后同步播放各種匹配的背景音樂,從肚子疼的呻吟到馬兒的嘶鳴聲。它不需要使用者從故事的開頭一直讀到結(jié)尾,甚至可以在第10頁或者前后幾頁開始朗讀。同時(shí),不管使用者在同一頁上停留多久,抑或是在朗讀的過程中被打斷去談?wù)摃疽酝獾氖挛?,都不?huì)對(duì)應(yīng)用產(chǎn)生影響。
孩子們都是好奇的小天使,會(huì)在讀故事的過程中頻頻打斷,問出各種奇妙的問題。而此時(shí)NovelEffect正在播放,手機(jī)還屏幕朝下放在桌上,這就尷尬了,家長是應(yīng)該不顧孩子的疑問繼續(xù)跟著配樂讀故事,還是停下來回答問題,然后手忙腳亂地把故事配樂倒過來重播一遍?
孩子提出問題,這是應(yīng)該被鼓勵(lì)的。有故事情節(jié),有提問,有思考,有回答,一本好的兒童故事書才能體現(xiàn)它在親子教育中的作用。盡管停下來去滿足孩子們的好奇心吧,NovelEffect也會(huì)緊跟著爸媽朗讀的內(nèi)容,停下來耐心等待。在一定時(shí)間內(nèi),應(yīng)用程序識(shí)別不到書中的文字,便會(huì)停下,而一旦說完與故事無關(guān)的語句,只要再次大聲朗讀接下來的文字內(nèi)容,NovelEffect即可精準(zhǔn)識(shí)別段落情節(jié),將故事繼續(xù)下去。針對(duì)這一點(diǎn),該應(yīng)用在配樂、特效設(shè)置以及語音識(shí)別的技術(shù)調(diào)整上獨(dú)具匠心,朗讀者只需幾個(gè)關(guān)鍵詞,配樂便可以識(shí)別相關(guān)情節(jié)并播放。有了這樣的設(shè)計(jì),想從上次沒讀完的地方繼續(xù),或者是重新讀一遍有趣的情節(jié),都不需要用戶在App內(nèi)做任何的設(shè)置,系統(tǒng)會(huì)自動(dòng)實(shí)現(xiàn)跳轉(zhuǎn)。
對(duì)于“哄睡困難戶”的孩子們,NovelEffect推出了“哄睡故事”系列,在經(jīng)過設(shè)置后,故事配樂會(huì)逐漸變成適合睡覺的白噪音,輕柔地陪伴寶寶進(jìn)入夢鄉(xiāng)。