百度DuMix AR推出了AR視頻特效解決方案給視頻加上了AR特效
2018年11月1日,百度世界大會(huì)在北京·中國(guó)大飯店如期舉行,會(huì)上,百度公司創(chuàng)始人,董事長(zhǎng)兼CEO李彥宏宣布百度與海淀區(qū)打造的全球首個(gè)AI公園今天正式開放,百度AR將肢體識(shí)別跟蹤技術(shù)應(yīng)用于大屏人機(jī)交互所打造的AR打太極大屏也首次公開亮相。不僅有內(nèi)容形態(tài)與互動(dòng)方式的交互升級(jí),本次大會(huì),百度DuMix AR平臺(tái)也公布了全新的能力與解決方案。
在百度大腦分論壇上,百度三維視覺首席科學(xué)家楊睿剛與大家分享了百度在3D視覺方面的最新進(jìn)展,其中重點(diǎn)發(fā)布了百度AR視頻特效解決方案。立足以技術(shù)和場(chǎng)景創(chuàng)新驅(qū)動(dòng)特效能力升級(jí),DuMix AR平臺(tái)核心布局人臉特效、美化特效、人體特效、環(huán)境特效等四大方向,開放業(yè)內(nèi)領(lǐng)先的20余項(xiàng)AR視頻特效能力并持續(xù)迭代,全面賦能開發(fā)者。
基于百度核心視覺技術(shù)優(yōu)勢(shì),孵化領(lǐng)先的AR視頻特效能力作為百度大腦的核心能力之一,百度在計(jì)算機(jī)視覺領(lǐng)域首創(chuàng)了Pyramidbox、Attention Clusters等多項(xiàng)算法,在識(shí)別人、識(shí)別物、捕捉關(guān)系三個(gè)技術(shù)領(lǐng)域均具備了業(yè)界最領(lǐng)先的技術(shù)儲(chǔ)備。同時(shí)結(jié)合長(zhǎng)期積累的肢體檢測(cè)、圖像分割、目標(biāo)檢測(cè)等深度學(xué)習(xí)技術(shù),自主研發(fā)的高性能移動(dòng)端預(yù)測(cè)框架,以及先進(jìn)的模型壓縮和計(jì)算加速技術(shù),成功打造出面向移動(dòng)端的領(lǐng)先AR視頻特效解決方案。
AR特效能力應(yīng)用于視頻拍攝場(chǎng)景,為視頻拍攝用戶提供了非常便捷的創(chuàng)作工具。直觀的說,很多創(chuàng)意想法在拍攝時(shí)就能通AR特效實(shí)現(xiàn),而不需要依賴復(fù)雜的后期。世界大會(huì)現(xiàn)場(chǎng),楊睿剛向大家演示了場(chǎng)景感知、風(fēng)格遷移濾鏡、肢體變形等AR視頻特效的技術(shù)Demo。
通過整合場(chǎng)景分類、圖像分割、SLAM等核心技術(shù),百度DuMix AR平臺(tái)創(chuàng)新研發(fā)了智能化場(chǎng)景感知能力,實(shí)時(shí)感知用戶拍攝場(chǎng)景、觸發(fā)環(huán)境特效,通過特效內(nèi)容與場(chǎng)景的強(qiáng)關(guān)聯(lián)體現(xiàn)智能性,幫助創(chuàng)作者演繹完整的場(chǎng)景故事;風(fēng)格遷移濾鏡能力則實(shí)現(xiàn)了對(duì)整體環(huán)境的風(fēng)格特效加持,為環(huán)境背景“一鍵換裝”;此外,先進(jìn)的移動(dòng)端實(shí)時(shí)肢體特征點(diǎn)識(shí)別技術(shù)能夠自動(dòng)辨識(shí)畫面中人體各肢體部位位置,配合百度AR渲染引擎,為用戶視頻疊加圖像變形特效,產(chǎn)生肢體變形的趣味動(dòng)態(tài)效果。
首推以人臉特效為核心的AR視頻特效解決方案在本次大會(huì)發(fā)布的新版DuMix?AR SDK中,已率先向開發(fā)者全面開放包含人臉靜態(tài)/動(dòng)態(tài)貼紙,美顏濾鏡(美白、大眼、瘦臉等)多項(xiàng)人臉AR特效能力,據(jù)悉這些能力均具備精準(zhǔn)定位、大角度追蹤,并且在極端環(huán)境下展現(xiàn)高穩(wěn)定性的優(yōu)勢(shì)。
百度AR表示,DuMix?AR平臺(tái)將開放20余項(xiàng)AR視頻特效能力全面賦能開發(fā)者,并依靠這些基礎(chǔ)能力和相互疊加的組合玩法形成一套完整的AR視頻解決方案。涵蓋四大技術(shù)應(yīng)用方向的全面能力矩陣、整合百度AI+AR多重能力、更加易用的平臺(tái)工具和完善的服務(wù)體系,為開發(fā)者與行業(yè)合作伙伴提供了高效、低成本的內(nèi)容制作服務(wù);同時(shí)結(jié)合百度強(qiáng)大分發(fā)優(yōu)勢(shì),助力合作伙伴實(shí)現(xiàn)業(yè)務(wù)創(chuàng)新、創(chuàng)造巨大的用戶價(jià)值。
此次強(qiáng)勢(shì)布局AR視頻特效,百度AR旨在打造業(yè)界最智能的AR特效視頻拍攝解決方案,引領(lǐng)業(yè)界能力及玩法風(fēng)向標(biāo)。這是百度DuMix AR平臺(tái)在內(nèi)容形態(tài)和交互創(chuàng)新上的全新嘗試,在深耕營(yíng)銷、教育、旅游等行業(yè)應(yīng)用場(chǎng)景的基礎(chǔ)上,不斷開拓AR技術(shù)應(yīng)用的模式與邊界,擴(kuò)大AR內(nèi)容生態(tài)矩陣、推動(dòng)AR內(nèi)容產(chǎn)業(yè)變革,發(fā)掘和創(chuàng)造更廣闊的價(jià)值空間。
目前,百度AR視頻特效解決方案已經(jīng)陸續(xù)與全民小視頻、百度貼吧、好看視頻等多個(gè)垂直內(nèi)容合作伙伴開展探索合作,將持續(xù)推動(dòng)AR視頻制作成為AR技術(shù)應(yīng)用的又一常態(tài)化新場(chǎng)景,吸引越來越多的優(yōu)質(zhì)內(nèi)容生產(chǎn)者加入百度AR生態(tài)。