手機(jī)影像技術(shù)還能“卷什么”?聯(lián)發(fā)科展示“AI圖像語義分割技術(shù)”破局之道
智能手機(jī)發(fā)展到今天,AI技術(shù)已經(jīng)深入顯示、影像、游戲等多個(gè)領(lǐng)域,成為旗艦芯片產(chǎn)品力競(jìng)爭(zhēng)中的重要一環(huán)。近日,在聯(lián)發(fā)科舉辦的天璣旗艦技術(shù)溝通會(huì)上,AI圖像語義分割技術(shù)(AI Image Semantic Segmentation)吸引了大量媒體關(guān)注,精準(zhǔn)高效的處理圖像,既可大幅降低算力需求,也可兼顧效果,勢(shì)必將手機(jī)的影像和顯示應(yīng)用“卷”向了新高度。
眾所周知,在全球智能電視芯片市場(chǎng),聯(lián)發(fā)科市場(chǎng)份額占比常年穩(wěn)居第一,其智能電視芯片憑借強(qiáng)勁的性能與AI畫質(zhì)增強(qiáng)技術(shù)(AI-PQ)等技術(shù)優(yōu)勢(shì),受到電視廠商和消費(fèi)者的高度認(rèn)可。
正是在智能電視領(lǐng)域深厚的AI技術(shù)積累,賦予了聯(lián)發(fā)科在AI圖像處理能力上的競(jìng)爭(zhēng)優(yōu)勢(shì)。聯(lián)發(fā)科率先將最新的旗艦電視技術(shù)帶入到移動(dòng)平臺(tái),助力智能手機(jī)除了“用得久”“跑得快”,也能“拍得美”“看得美”。
在智能手機(jī)顯示方面,用戶對(duì)于智能手機(jī)的畫質(zhì)有較強(qiáng)的需求,而傳統(tǒng)的圖像處理方式費(fèi)時(shí)費(fèi)力且無法有效處理好復(fù)雜的場(chǎng)景與人物,如何呈現(xiàn)用戶滿意的圖像是目前手機(jī)芯片及終端廠商待解決的問題。
聯(lián)發(fā)科提出將旗艦電視芯片中先進(jìn)的圖像增強(qiáng)技術(shù),用于旗艦手機(jī)芯片的相機(jī)及顯示功能,全面提升視覺和抓拍體驗(yàn)。同時(shí)借助AI圖像語義分割技術(shù)強(qiáng)大的物體識(shí)別和精準(zhǔn)區(qū)域分割能力,既可降低手機(jī)功耗也可保證視覺效果。
AI圖像語義分割(Image Semantic Segmentation)技術(shù),可針對(duì)復(fù)雜場(chǎng)景的不同物體特征進(jìn)行差異化圖像處理,營造更立體的景深效果。還可通過圖像物體之間的組合與比例,判斷畫面場(chǎng)景, 圍繞場(chǎng)景的特征進(jìn)行針對(duì)性處理,以達(dá)成圖像優(yōu)化。
例如,畫面中出現(xiàn)的藍(lán)天、綠地、草席、人像等元素,通過AI圖像語義分割,快速將各物體分類切割,進(jìn)行有針對(duì)性的優(yōu)化,從而呈現(xiàn)出更接近真實(shí)的畫面效果,讓用戶收獲更細(xì)膩、逼真的圖像體驗(yàn)。
進(jìn)入5G時(shí)代,AI多媒體成為主流應(yīng)用,為用戶帶來更豐富的拍照、視頻錄制、直播等多媒體創(chuàng)作方式,視頻畫質(zhì)效果的提升已成為剛需。同時(shí),視頻規(guī)格的提升也意味著系統(tǒng)負(fù)擔(dān)拉高,將面臨手機(jī)發(fā)燙的情況,伴隨著溫度升高,可疊加的算法受限,導(dǎo)致整段視頻中的某一幀效果不及直接拍照。
未來,通過AI圖像語義分割技術(shù),可僅針對(duì)不同物體只做該部分的畫質(zhì)增強(qiáng)或特效處理,降低所需運(yùn)算負(fù)載,由此可疊加更多的優(yōu)化算法,快速提升視頻錄制效果。
AI圖像語義分割技術(shù)可針對(duì)復(fù)雜場(chǎng)景中不同的物體特征進(jìn)行差異化圖像處理,也可針對(duì)主體背景物體生成特殊效果。此外,這項(xiàng)技術(shù)在視頻美化處理方面具有顯著優(yōu)勢(shì),通過AI場(chǎng)景畫質(zhì)增強(qiáng)技術(shù)可實(shí)時(shí)識(shí)別圖像中的場(chǎng)景內(nèi)容,以優(yōu)化建筑、風(fēng)景、人像等場(chǎng)景下每幀畫面的對(duì)比度、銳利度和色彩。另一方面,AI區(qū)域畫質(zhì)增強(qiáng)技術(shù)還可實(shí)時(shí)進(jìn)行物體識(shí)別和切割,調(diào)節(jié)每幀畫面中不同物體的圖像參數(shù)。
除了顯示方面,AI圖像語義分割技術(shù)同樣可運(yùn)用于智能手機(jī)的影像應(yīng)用,讓追焦更精準(zhǔn)。相比傳統(tǒng)的追焦方式,通過AI圖像語義分割技術(shù)可自動(dòng)區(qū)分主體和背景,針對(duì)主體可精準(zhǔn)設(shè)定快門參數(shù)以確保準(zhǔn)確對(duì)焦,讓抓拍更清晰。
AI是智能手機(jī)發(fā)展不可或缺的核心技術(shù),AI多媒體是主流的發(fā)展趨勢(shì)。如果說高能效AI(APU)是聯(lián)發(fā)科布局手機(jī)AI的第一步,那將AI圖像語義分割技術(shù)引入智能手機(jī)則是其創(chuàng)新的第二起手式。
在今年的聯(lián)發(fā)科天璣旗艦技術(shù)溝通會(huì)上,能夠看到聯(lián)發(fā)科在AI技術(shù)方面又一次帶來令人驚喜的創(chuàng)新,洞察用戶痛點(diǎn)需求,圍繞AI圖像語義分割技術(shù)進(jìn)行應(yīng)用探索,展現(xiàn)出聯(lián)發(fā)科對(duì)于行業(yè)技術(shù)演進(jìn)趨勢(shì)的準(zhǔn)確判斷和前瞻布局,期待這項(xiàng)技術(shù)在天璣旗艦上的實(shí)力展現(xiàn)。
現(xiàn)場(chǎng),聯(lián)發(fā)科還分享了包括移動(dòng)光追、移動(dòng)GPU增效方案、5G新雙通、Wi-Fi 7、高保真藍(lán)牙音頻、高精度導(dǎo)航等主題,以先進(jìn)科技引領(lǐng)移動(dòng)平臺(tái)創(chuàng)新趨勢(shì),推動(dòng)移動(dòng)終端用戶體驗(yàn)持續(xù)升級(jí)。