當(dāng)前位置:首頁 > 消費(fèi)電子 > 音頻技術(shù)
[導(dǎo)讀]   經(jīng)過研究發(fā)現(xiàn),F(xiàn)FMPEG SDK寫入視頻的時(shí)候有兩個(gè)地方用來控制寫入的時(shí)間戳,一個(gè)是AvPacket, 一個(gè)是AvFrame。 在調(diào)用avcodec_encode_video的時(shí)候需要傳入

  經(jīng)過研究發(fā)現(xiàn),F(xiàn)FMPEG SDK寫入視頻的時(shí)候有兩個(gè)地方用來控制寫入的時(shí)間戳,一個(gè)是AvPacket, 一個(gè)是AvFrame。 在調(diào)用avcodec_encode_video的時(shí)候需要傳入AvFrame的對(duì)象指針,也就是傳入一幀未壓縮的視頻進(jìn)行壓縮處理,AvFrame包含一個(gè)pts的參數(shù),這個(gè)參數(shù)就是當(dāng)前幀將來在還原播放的時(shí)候的時(shí)間戳。而AvPacket里面也有pts,還有dts。說起這個(gè)就必須要說明一下I,P,B三種視頻壓縮幀。I幀就是關(guān)鍵幀,不依賴于其他視頻幀,P幀是向前預(yù)測(cè)的幀,只依賴于前面的視頻幀,而B幀是雙向預(yù)測(cè)視頻幀,依賴于前后視頻幀。由于B幀的存在,因?yàn)樗请p向的,必須知道前面的視頻幀和后面的視頻幀的詳細(xì)內(nèi)容后,才能知道本B幀最終該呈現(xiàn)什么圖像。而pts和dts兩個(gè)參數(shù)就是用來控制視頻幀的顯示和解碼的順序。

  pts就是幀顯示的順序。

  dts就是幀被讀取進(jìn)行解碼的順序。

  如果沒有B幀存在,dts和pts是相同的。反之,則是不相同的。關(guān)于這個(gè)的詳細(xì)介紹可以參考一下mpeg的原理。

  再說說AvPacket中包含的pts和dts兩個(gè)到底該設(shè)置什么值?

  pts和dts需要設(shè)置的就是視頻幀解碼和顯示的順序。每增加一幀就加一,并不是播放視頻的時(shí)間戳。

  但是實(shí)踐證明經(jīng)過rmvb解碼的視頻有時(shí)候并不是固定幀率的,而是變幀率的,這樣,如果每壓縮一幀,pts和dts加一的方案為導(dǎo)致音視頻不同步。

  解決音視頻不同步方法:

  lTImeStamp 是通過directshow 獲取的當(dāng)前的視頻幀的時(shí)間戳。

  m_llframe_index為當(dāng)前已經(jīng)經(jīng)過壓縮處理的幀的數(shù)量。

  首先av_rescale計(jì)算得到當(dāng)前壓縮處理已經(jīng)需要處理什么時(shí)間戳的視頻幀,如果該時(shí)間戳尚未到達(dá)directshow當(dāng)前提供的視頻幀的時(shí)間戳,則將該幀丟棄掉。

  否則進(jìn)行壓縮操作。并設(shè)置AVPacket的pts和dts。這里假設(shè)B幀不存在。

  因?yàn)樵趯聿シ诺臅r(shí)候視頻以我們?cè)O(shè)定的固定播放幀率進(jìn)行播放,所以需要根據(jù)設(shè)定的播放幀率計(jì)算得到的視頻幀時(shí)間戳和directshow提供的當(dāng)前視頻幀的時(shí)間戳進(jìn)行比較,設(shè)定是否需要進(jìn)行實(shí)施延緩播放的策略。如果需要延緩播放,則將pts增加步長2,否則以普通速度播放,則設(shè)置為1.dts與之相同。

  __int64 x =av_rescale(m_llframe_index,AV_TIME_BASE*(int64_t)c-《TIme_base.num,c-《TIme_base.den);

  if( x 《 lTimeStamp )

  {

  return TRUE;

  }

  m_pVideoFrame2-《pts = lTimeStamp;

  m_pVideoFrame2-《pict_type = 0;

  int out_size = avcodec_encode_video( c, m_pvideo_outbuf, video_outbuf_size,m_pVideoFrame2 );

  /* if zero size, it means the image was buffered */

  if (out_size 《 0)

  {

  AVPacket pkt;

  av_init_packet(&pkt);

  if( x 《 lTimeStamp )

  {

  pkt.pts = pkt.dts = m_llframe_index;

  pkt.duration = 0;

  }

  else

  {

  pkt.duration = (lTimeStamp - x)*c-《time_base.den/1000000 + 1;

  pkt.pts = m_llframe_index;

  pkt.dts = pkt.pts;

  m_llframe_index += pkt.duration;

  }

  //pkt.pts = lTimeStamp * (__int64)frame_rate.den / 1000;

  if( c-《coded_frame && c-《coded_frame-《key_frame )

  {

  pkt.flags |= PKT_FLAG_KEY;

  }

  pkt.stream_index= m_pVideoStream-《index;

  pkt.data= m_pvideo_outbuf;

  pkt.size= out_size;

  /* write the compressed frame in the media file */

  ret = av_interleaved_write_frame( m_pAvFormatContext, &pkt );

  }

  else

  {

  ret = 0;

  }

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

倫敦2024年8月29日 /美通社/ -- 英國汽車技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車。 SODA V工具的開發(fā)耗時(shí)1.5...

關(guān)鍵字: 汽車 人工智能 智能驅(qū)動(dòng) BSP

北京2024年8月28日 /美通社/ -- 越來越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時(shí)企業(yè)卻面臨越來越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對(duì)日本游戲市場(chǎng)的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)開幕式在貴陽舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國國際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱,數(shù)字世界的話語權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機(jī) 衛(wèi)星通信

要點(diǎn): 有效應(yīng)對(duì)環(huán)境變化,經(jīng)營業(yè)績穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤率延續(xù)升勢(shì) 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競(jìng)爭力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競(jìng)爭優(yōu)勢(shì)...

關(guān)鍵字: 通信 BSP 電信運(yùn)營商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺(tái)與中國電影電視技術(shù)學(xué)會(huì)聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會(huì)上宣布正式成立。 活動(dòng)現(xiàn)場(chǎng) NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會(huì)上,軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司(以下簡稱"軟通動(dòng)力")與長三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉