即構(gòu)科技SDK新增變聲立體聲和混響幾大功能
近日,即構(gòu)SDK完成了新的迭代,新增變聲、立體聲(3D環(huán)繞)、混響三大功能,讓玩家能體驗(yàn)到更多新鮮的玩法。
現(xiàn)在流行的吃雞游戲中,萌妹子開(kāi)語(yǔ)音玩,只要稍微撒個(gè)嬌,就能收獲隊(duì)友送來(lái)的福利,如果是壯漢,就沒(méi)這個(gè)待遇了。有些壯漢就想了各種辦法,比如另外安裝一個(gè)變聲軟件,偽裝成萌妹子。如果游戲自帶變聲功能,是不是就不用這么麻煩?
又比如,在語(yǔ)聊房、私聊、在線(xiàn)K歌、連麥直播場(chǎng)景中,如果有變聲功能,玩家用變聲來(lái)搞怪,烘托氣氛,不但能成功打破“尬聊”的局面,還能展示自己“一人千面”的個(gè)性,成為這個(gè)直播間最靚的仔。為了讓玩家使用變聲,打造更多新鮮有趣的玩法,即構(gòu)技術(shù)團(tuán)隊(duì)經(jīng)過(guò)多日努力,終于在實(shí)時(shí)語(yǔ)音和實(shí)時(shí)視頻SDK中正式上線(xiàn)變聲功能。
變聲的原理,是通過(guò)改變用戶(hù)的音調(diào)和音色,使輸出的聲音在感官上與原始聲音不同。即構(gòu)的SDK,通過(guò)“變調(diào)不變速”的方法,改變說(shuō)話(huà)人基頻的大小,同時(shí)保持語(yǔ)速和語(yǔ)義不變,即保持短時(shí)頻譜包絡(luò)(共振峰的位置和帶寬)和時(shí)間過(guò)程基本不變,來(lái)估算出變調(diào)后的聲音波形,從而實(shí)現(xiàn)變聲。
基于此,再在算法上不斷優(yōu)化,目前,即構(gòu)推出的變聲功能可模擬出蘿莉、大叔、歪果仁、熊孩子等多種變聲效果,實(shí)現(xiàn)男聲變女聲、女聲變男聲。另外,即構(gòu)SDK開(kāi)放了調(diào)節(jié)參數(shù)的接口,客戶(hù)可根據(jù)自己的需要,隨意設(shè)計(jì)更多特定的變聲效果。
立體聲功能可在電臺(tái)、線(xiàn)上KTV、游戲競(jìng)技、在線(xiàn)教育等多個(gè)場(chǎng)景中應(yīng)用,以線(xiàn)上KTV場(chǎng)景為例,用戶(hù)在APP內(nèi)演唱時(shí)采集到的聲音屬于單聲道,沒(méi)有聲相和方向感,比較單調(diào),加入立體聲功能后,用戶(hù)的K歌聲音在相位、音色、音調(diào)上都有調(diào)整,增加了空間感和方向感,變得更加立體。
將手機(jī)采集到的單聲道變成用戶(hù)聽(tīng)到的立體聲,需要把單聲道的聲音信號(hào)虛擬成立體聲的。即構(gòu)通過(guò)對(duì)聲音傳播路徑進(jìn)行建模,輸入原始的波形數(shù)據(jù),通過(guò)對(duì)推流聲音的角度做設(shè)置,模擬出前方180度方位的聲音來(lái)源,如左側(cè)音、右側(cè)音,同時(shí)也可以對(duì)角度進(jìn)行持續(xù)性的調(diào)整,模擬出環(huán)繞音的效果。
混響在主播直播唱歌、線(xiàn)上K歌用得最多。現(xiàn)在市面上就有外置聲卡(也叫直播聲卡)提供混響的效果,主播在麥克風(fēng)外接這個(gè)聲卡后,在唱歌模式中唱出來(lái)的歌聲就顯得豐滿(mǎn)、富有層次,帶有空間感,聽(tīng)眾就像在開(kāi)闊的音樂(lè)廳聽(tīng)音樂(lè)劇一樣,享受被被音樂(lè)包圍的感覺(jué),這就是混響音效的魅力。
即構(gòu)SDK主要通過(guò)兩個(gè)步驟實(shí)現(xiàn)混響效果:
1、通過(guò)指定延遲時(shí)間和衰減程度,以原始的聲音波形為輸入,產(chǎn)生多個(gè)延遲(模擬反彈回來(lái)的)波形;
2、把多個(gè)延遲波形和原始的波形進(jìn)行疊加,產(chǎn)生最終有混響效果的聲音波形。延遲波形的個(gè)數(shù)越多,疊加產(chǎn)生的聲音波形就比較豐滿(mǎn)和有層次感,混響的效果也越好。
有了即構(gòu)直播SDK自帶的混響功能,主播們?cè)谥辈ラg直播時(shí),不用在麥克風(fēng)上再外接一個(gè)帶混響的聲卡,直播間的觀眾也能聽(tīng)到演唱會(huì)般效果。個(gè)人用戶(hù)拿起手機(jī)打開(kāi)K歌平臺(tái),就能隨時(shí)隨地K歌自嗨。另外,即構(gòu)混響功能也開(kāi)放了調(diào)節(jié)參數(shù)的接口,除了提供的大堂、山谷、酒吧、會(huì)議室等多種模式外,用戶(hù)也可以根據(jù)需要,自己任意調(diào)節(jié)混響效果。