當(dāng)前位置:首頁(yè) > 嵌入式 > 嵌入式軟件
[導(dǎo)讀]基于異構(gòu)多核體系的汽車(chē)遠(yuǎn)程監(jiān)控系統(tǒng)設(shè)計(jì)

摘要:本文提出了基于異構(gòu)多核體系的汽車(chē)遠(yuǎn)程監(jiān)控系統(tǒng)設(shè)計(jì)方法,利用雙Nios II處理器實(shí)現(xiàn)系統(tǒng)的控制和圖像處理,同時(shí)設(shè)計(jì)了硬件協(xié)處理器模塊實(shí)現(xiàn)圖像預(yù)處理和壓縮工作,采用GPRS無(wú)線網(wǎng)絡(luò)發(fā)送監(jiān)控信息。有效提高了系統(tǒng)的采集、處理、壓縮和傳送速度,實(shí)現(xiàn)了對(duì)遠(yuǎn)程汽車(chē)的實(shí)時(shí)監(jiān)控。
關(guān)鍵詞:異構(gòu)多核;Nios II;Sobel;運(yùn)動(dòng)目標(biāo)檢測(cè);JPEG;通用無(wú)線分組業(yè)務(wù)

0 引言
    隨著汽車(chē)日益家庭化,汽車(chē)被盜事件屢屢發(fā)生,據(jù)不完全統(tǒng)計(jì),我國(guó)每年汽車(chē)被盜數(shù)目達(dá)十萬(wàn)之多。針對(duì)現(xiàn)有汽車(chē)監(jiān)控防盜系統(tǒng)存在的噪聲污染、誤報(bào)率高、不穩(wěn)定、功耗高等缺點(diǎn),本設(shè)計(jì)提出一種基于異構(gòu)多核體系的汽車(chē)遠(yuǎn)程監(jiān)控系統(tǒng),采用兩塊Nios II軟核作為主處理器構(gòu)成雙核系統(tǒng),將硬件DSP處理IP作為雙核系統(tǒng)的協(xié)處理器,構(gòu)成異構(gòu)多核的嵌入式系統(tǒng)。采用高精度CMOS攝像頭采集被監(jiān)控區(qū)域的視頻圖像,通過(guò)VGA實(shí)時(shí)進(jìn)行輸出監(jiān)控,同時(shí)對(duì)圖像數(shù)據(jù)進(jìn)行一系列處理,判斷監(jiān)控區(qū)域是否有異物闖入。從而降低誤報(bào)率的同時(shí),進(jìn)一步提高了監(jiān)控系統(tǒng)的穩(wěn)定性和實(shí)時(shí)性。

1 設(shè)計(jì)方案
    系統(tǒng)采用Altera公司提供的DEl開(kāi)發(fā)平臺(tái),檢測(cè)傳感器組包括:震動(dòng)、加速度傾角傳感器,完成對(duì)汽車(chē)監(jiān)控系統(tǒng)中的加速度、傾角、震動(dòng)能量參數(shù)的測(cè)量。CMOS圖像傳感器完圖像的采集工作,經(jīng)FPGA圖像預(yù)處理后于VGA口實(shí)時(shí)監(jiān)控,經(jīng)JPEG編碼器將圖像進(jìn)行壓縮。采用雙核Nios II進(jìn)行系統(tǒng)控制和圖像處理運(yùn)動(dòng)目標(biāo)檢測(cè)。射頻模塊完成GPRS無(wú)線通信,將圖像數(shù)據(jù)以及監(jiān)控信息通過(guò)GPRS網(wǎng)絡(luò)發(fā)送到監(jiān)控中心和用戶手機(jī)。其系統(tǒng)硬件框圖如圖l所示。

2 系統(tǒng)硬件設(shè)計(jì)
2.1 異構(gòu)多核體系
    在設(shè)計(jì)中,由于有大量的實(shí)時(shí)圖像數(shù)據(jù)運(yùn)算,一塊CPU的計(jì)算速度無(wú)法滿足要求,甚至出現(xiàn)錯(cuò)誤結(jié)果,這里采用兩塊NIOS II構(gòu)成雙核系統(tǒng),同時(shí)設(shè)計(jì)硬件DSP處理IP作為雙核系統(tǒng)的協(xié)處理器,共同完成任務(wù)。[!--empirenews.page--]
    Nios II Corel作為主控核,運(yùn)行UCOS II操作系統(tǒng),管理所有任務(wù)的調(diào)度工作,完成汽車(chē)傳感器的采集、加速度傾角震動(dòng)的計(jì)算、短信彩信的發(fā)送等。Nios II Core2作為輔助核,完成采集連續(xù)兩幀的視頻圖像,并進(jìn)行實(shí)時(shí)運(yùn)動(dòng)目標(biāo)檢測(cè)算法。雙核之間的通信通過(guò)Mailbox IP核共享On Chip Memory實(shí)現(xiàn)。同時(shí)設(shè)計(jì)Sobel算子邊界檢測(cè)硬件圖像預(yù)處理模塊和JPEG圖像壓縮IP作為雙核系統(tǒng)的協(xié)處理器,構(gòu)成異構(gòu)多核的嵌入式系統(tǒng)。結(jié)構(gòu)框圖如圖2所示。由于SDRAM作為視頻圖像的緩存,這里將Corel運(yùn)行于SRAM。Core2運(yùn)行于Flash,讀寫(xiě)數(shù)據(jù)和堆棧存儲(chǔ)于SRAM中。


2.2 汽車(chē)傳感器采集板設(shè)計(jì)
    汽車(chē)傳感器信號(hào)采集板采用AD公司的加速度傳感器ADXL202AQC,用于對(duì)汽車(chē)的X/Y方向加速度、傾角以及震動(dòng)值進(jìn)行測(cè)量,傳感器采集系統(tǒng)框圖如圖3所示。ADXL202AQC采用MEMS工藝制作,是一種低價(jià)格、低功耗、單芯片集成雙軸加速度傳感器,3~5.25V單電源供電,工作電流小于6mA,可以測(cè)量0~5kHz、±2g范圍內(nèi)的動(dòng)態(tài)或靜態(tài)加速度,60Hz時(shí)分辨率為2mg,可以數(shù)字、模擬信號(hào)形式輸出。


    ADXL202AQC采集雙軸加速度值,通過(guò)Xout、Yout輸出數(shù)字量,以和加速度值對(duì)應(yīng)的不同占空比方波輸出,將這兩路數(shù)字信號(hào)通過(guò)PIO口采集入SOPC系統(tǒng),通過(guò)Timer X、Timer Y定時(shí)器計(jì)算出精確的加速度值,NiosII Corel對(duì)兩個(gè)加速度值和重力加速度值確定三維空間的加速度傾角值。
    同時(shí)通過(guò)Xfilt、Yfilt輸出加速度的模擬信號(hào)量,通過(guò)帶通濾波器將信號(hào)范圍控制在10~200Hz,微小的震動(dòng)量可以通過(guò),經(jīng)放大、ADC轉(zhuǎn)換通過(guò)PIO口采集入SOPC系統(tǒng),處理器對(duì)這些值進(jìn)行計(jì)算,得到震動(dòng)幅值。
2.3 圖像的采集、處理與壓縮
    系統(tǒng)的圖像采集用Terasic公司的TRDB-D5M攝像頭,實(shí)際像素2592H×1944V,顏色陣列為RGB(紅綠藍(lán))模式,最大數(shù)據(jù)傳送速度為96MHz時(shí)鐘下96Mb/s,VGA(640×480)輸出幀率可達(dá)70f/s,內(nèi)置12位ADC轉(zhuǎn)換器,3.3V單電源供電,I/O口電壓范圍1.7~3.1v。完全滿足系統(tǒng)要求,系統(tǒng)將攝像頭采集的信號(hào)經(jīng)過(guò)Soble算子邊緣檢測(cè)預(yù)處理,同時(shí)通過(guò)VGA口實(shí)時(shí)監(jiān)控,然后將圖像數(shù)據(jù)送Nios IICore2進(jìn)行運(yùn)動(dòng)目標(biāo)檢測(cè),當(dāng)監(jiān)控區(qū)域內(nèi)檢測(cè)到運(yùn)動(dòng)目標(biāo)后,對(duì)圖像進(jìn)行JPEG壓縮便于GPRS的數(shù)據(jù)發(fā)送。下面對(duì)各模塊加以介紹。
2.3.1 Sobel算子邊緣檢測(cè)預(yù)處理
    圖像邊緣往往攜帶一幅圖像的大部分信息,是圖像最基本的特征之一。圖像邊緣檢測(cè)是圖像處理、圖像分析、模式識(shí)別以及計(jì)算機(jī)視覺(jué)的基本步驟,其結(jié)果的正確性和可靠性將直接影響到機(jī)器視覺(jué)系統(tǒng)對(duì)客觀事物的理解。本系統(tǒng)采用經(jīng)典的Sobel算子邊緣檢測(cè)算法,將圖像像素的左右、上下領(lǐng)域的灰度加權(quán),根據(jù)在邊緣點(diǎn)處達(dá)到極值這一原理進(jìn)行邊緣檢測(cè)。該算法處理的數(shù)據(jù)量大,通過(guò)軟件程序?qū)崿F(xiàn)將比較慢,無(wú)法滿足實(shí)時(shí)性要求,本系統(tǒng)用Verilog設(shè)計(jì)硬件模塊實(shí)現(xiàn)該功能。將CMOS攝像頭采集的圖像進(jìn)行預(yù)處理,其邊緣檢測(cè)結(jié)果送VGA實(shí)時(shí)監(jiān)控(如圖4所示),同時(shí)圖像數(shù)據(jù)交NiosⅡCore2進(jìn)行計(jì)算。設(shè)計(jì)中需要3×3的像素塊和大量乘加運(yùn)算,這里用到Altem公司的Megafuncation)庫(kù),如ALTSHIFT_TABS移位寄存器對(duì)三行像素進(jìn)行緩沖,然后將各條緩沖線送入ALTMULT ADD乘加塊。

[!--empirenews.page--]
2.3.2 運(yùn)動(dòng)目標(biāo)檢測(cè)模塊
    視頻圖像是三維圖像的二維投影,當(dāng)三維圖像發(fā)生變化時(shí)二維圖像也會(huì)發(fā)生相應(yīng)的變化,通過(guò)對(duì)連續(xù)幀間的變化進(jìn)行實(shí)時(shí)計(jì)算,當(dāng)有運(yùn)動(dòng)目標(biāo)時(shí)會(huì)引起幀差。系統(tǒng)中采用10級(jí)幀差法,可以根據(jù)對(duì)檢測(cè)靈敏度的要求設(shè)置報(bào)警級(jí)別,同時(shí)對(duì)監(jiān)控區(qū)的不同范圍采用不同的權(quán)值,以提高運(yùn)動(dòng)目標(biāo)的判斷準(zhǔn)確度。由于實(shí)行幀差算法要求很高的實(shí)時(shí)性,對(duì)連續(xù)采集的大量圖像信號(hào)要即時(shí)處理,否則影響測(cè)試結(jié)果,系統(tǒng)中用處理器NIOS II Core2單獨(dú)完成這份工作。用SDRAM作為攝像頭采集的圖像信號(hào)緩存,這里采用Teraisc公司提供的4 PortsSDRAM Controller-IP核,將CMOS攝像頭采集經(jīng)轉(zhuǎn)換的RGB信號(hào)以16位存儲(chǔ)于SDRAM中。在SDRAM中存儲(chǔ)連續(xù)的兩幀圖像信號(hào),通過(guò)4 Ports SDRAM Controller IP的兩個(gè)輸出Port(端口)同時(shí)傳輸給NIOS II Core2處理。其中的一個(gè)輸出Port再接VGA口。圖像存儲(chǔ)關(guān)系如圖5所示。


2.3.3 JPE6圖像壓縮IP核設(shè)計(jì)
    為了便于GPRS的圖像傳輸,需要對(duì)圖像進(jìn)行壓縮,這里采用JPEG壓縮標(biāo)準(zhǔn)對(duì)圖像進(jìn)行壓縮,用Verflog設(shè)計(jì)JPEG圖像壓縮DSP模塊作為系統(tǒng)的協(xié)處理器,并掛接于系統(tǒng)Avalon總線。JPEG標(biāo)準(zhǔn)中壓縮算法的步驟包括二維DCT、量化、熵編碼等。其編碼過(guò)程框圖如圖6所示。


    在設(shè)計(jì)編碼器時(shí)先對(duì)圖像進(jìn)行分塊,對(duì)RGB信號(hào)進(jìn)行YCbCr轉(zhuǎn)換,YCbCr信號(hào)進(jìn)行2D-DCT轉(zhuǎn)換并同時(shí)進(jìn)行ZigZag掃描將二維數(shù)據(jù)轉(zhuǎn)換為系數(shù)連續(xù)相關(guān)的一維數(shù)據(jù),根據(jù)JPEG組織提供的量化表對(duì)數(shù)據(jù)進(jìn)行量化壓縮,最后對(duì)量化結(jié)果進(jìn)行VLC編碼和Haffman編碼得到壓縮結(jié)果。其中核心的部分是2D-DCT轉(zhuǎn)換,這里介紹其設(shè)計(jì)過(guò)程:離散余弦變換是一種正交變換,2D-DCT的變換公式如下:

    系統(tǒng)采用矩陣乘法,查找系數(shù)表和矩陣轉(zhuǎn)置的方法實(shí)現(xiàn)2D-DCT。在設(shè)計(jì)過(guò)程中多次用到Altera提供的Megafuncation庫(kù):ALTMULT_ADD乘加運(yùn)算、LPM_ADD_SUB交替加減運(yùn)算、ALTSHIFT_TABS移位寄存器等加速設(shè)計(jì)。這里以《Image and Video CompressionStandard))中給出的測(cè)試矩陣RAW作為輸入,MATLAB的計(jì)算結(jié)果和Modelsim的時(shí)序仿真結(jié)果如圖7所示,結(jié)果表明誤差在l左右,完全滿足系統(tǒng)要求。
    圖7 2D-DCT_Z的MATLAB計(jì)算結(jié)果和Modelsim時(shí)序仿真結(jié)果比較


2.4 GPRS無(wú)線通信模塊
    GPRS是一種基于GSM的新型移動(dòng)分組數(shù)據(jù)承載業(yè)務(wù),其最高速率可達(dá)到170kb/s。GPRS允許業(yè)務(wù)用戶在端到端分組轉(zhuǎn)移模式下發(fā)送和接收數(shù)據(jù),而不需要利用電路交換模式的網(wǎng)絡(luò)資源,能夠確保分組模式數(shù)據(jù)應(yīng)用的成本效益和網(wǎng)絡(luò)資源的有效利用。系統(tǒng)通過(guò)GPRS無(wú)線通信模塊發(fā)送中文短信和彩信,采用SIMCOM公司的SIM300Z芯片。當(dāng)系統(tǒng)檢測(cè)的加速度傾角或震動(dòng)能量超過(guò)所設(shè)定的閾值時(shí),將計(jì)算值以短信發(fā)送給用戶。當(dāng)系統(tǒng)檢測(cè)到運(yùn)動(dòng)目標(biāo)時(shí),先發(fā)送短信提示,隨后將壓縮的JPG圖片以彩信發(fā)送到客戶端。[!--empirenews.page--]

3 系統(tǒng)軟件設(shè)計(jì)
3.1 系統(tǒng)的軟件層
    系統(tǒng)的驅(qū)動(dòng)程序都是基于HAL層的方式編寫(xiě),包括:GPRS通信模塊的驅(qū)動(dòng)、檢測(cè)傳感器驅(qū)動(dòng)、DMA驅(qū)動(dòng)、JPEG編碼器驅(qū)動(dòng)、CCD控制器驅(qū)動(dòng)。主核NlOS II Corel上運(yùn)行UC/OS II完成多任務(wù)的調(diào)度,PPP協(xié)議棧完成網(wǎng)絡(luò)傳輸功能。所有應(yīng)用程序在操作系統(tǒng)的管理下工作,包括對(duì)檢測(cè)傳感器信號(hào)的采集應(yīng)用程序、GPRS通信功能、圖像傳感器配置與采集、圖像數(shù)據(jù)處理分析存儲(chǔ)等。其軟件層圖如圖8所示。


3.2 UC/OS ll操作系統(tǒng)的多任務(wù)設(shè)計(jì)
    為保證系統(tǒng)軟件的實(shí)時(shí)性,在Nios II Corel上運(yùn)行UCOSⅡ?qū)崟r(shí)操作系統(tǒng),同時(shí)方便地管理系統(tǒng)多任務(wù)運(yùn)行。這里設(shè)計(jì)7個(gè)任務(wù)和兩個(gè)中斷,任務(wù)以及中斷間的通信通過(guò)信號(hào)量、郵箱、全局變量等實(shí)現(xiàn)。任務(wù)及中斷間的關(guān)系如圖9所示。


Taskl:X/Y方向加速度、傾角信號(hào)采集計(jì)算及判斷;
Task2:震動(dòng)能量信號(hào)的采集計(jì)算及判斷:
Fask3:運(yùn)動(dòng)目標(biāo)檢測(cè)結(jié)果采集;
Task4:X/Y方向加速度、傾角提示短信發(fā)送:
Task5:震動(dòng)能量提示短信發(fā)送;
Task6:運(yùn)動(dòng)目標(biāo)檢測(cè)結(jié)果短信發(fā)送;
Task7:JPG彩信發(fā)送:
ISR1:Nios II Core2發(fā)送來(lái)檢測(cè)到運(yùn)動(dòng)目標(biāo)消息;
ISR2:JPEG編碼完成:

4 結(jié)束語(yǔ)
    本方案通過(guò)汽車(chē)傳感器采集板采集信號(hào),計(jì)算出X/Y方向加速度、傾角、震動(dòng)能量,當(dāng)超過(guò)所設(shè)定閾值時(shí)通過(guò)GPRS無(wú)線模塊發(fā)送信息給客戶端。CMOS攝像頭D5M完成視頻圖像的采集,做Sobel算子邊緣檢測(cè)圖像預(yù)處理,通過(guò)VGA實(shí)時(shí)輸出監(jiān)控。對(duì)連續(xù)兩幀的信號(hào)做運(yùn)動(dòng)目標(biāo)檢測(cè),當(dāng)檢測(cè)到運(yùn)動(dòng)異物時(shí)以短信提示用戶,同時(shí)拍攝下此時(shí)的照片,對(duì)照片進(jìn)行JPEG圖像壓縮,進(jìn)行GPRS彩信發(fā)送與客戶端。其設(shè)計(jì)特點(diǎn)為實(shí)時(shí)性強(qiáng)、誤報(bào)率低、傳輸速度快、穩(wěn)定性好等,具有很好的實(shí)用性。

本站聲明: 本文章由作者或相關(guān)機(jī)構(gòu)授權(quán)發(fā)布,目的在于傳遞更多信息,并不代表本站贊同其觀點(diǎn),本站亦不保證或承諾內(nèi)容真實(shí)性等。需要轉(zhuǎn)載請(qǐng)聯(lián)系該專(zhuān)欄作者,如若文章內(nèi)容侵犯您的權(quán)益,請(qǐng)及時(shí)聯(lián)系本站刪除。
換一批
延伸閱讀

9月2日消息,不造車(chē)的華為或?qū)⒋呱龈蟮莫?dú)角獸公司,隨著阿維塔和賽力斯的入局,華為引望愈發(fā)顯得引人矚目。

關(guān)鍵字: 阿維塔 塞力斯 華為

倫敦2024年8月29日 /美通社/ -- 英國(guó)汽車(chē)技術(shù)公司SODA.Auto推出其旗艦產(chǎn)品SODA V,這是全球首款涵蓋汽車(chē)工程師從創(chuàng)意到認(rèn)證的所有需求的工具,可用于創(chuàng)建軟件定義汽車(chē)。 SODA V工具的開(kāi)發(fā)耗時(shí)1.5...

關(guān)鍵字: 汽車(chē) 人工智能 智能驅(qū)動(dòng) BSP

北京2024年8月28日 /美通社/ -- 越來(lái)越多用戶希望企業(yè)業(yè)務(wù)能7×24不間斷運(yùn)行,同時(shí)企業(yè)卻面臨越來(lái)越多業(yè)務(wù)中斷的風(fēng)險(xiǎn),如企業(yè)系統(tǒng)復(fù)雜性的增加,頻繁的功能更新和發(fā)布等。如何確保業(yè)務(wù)連續(xù)性,提升韌性,成...

關(guān)鍵字: 亞馬遜 解密 控制平面 BSP

8月30日消息,據(jù)媒體報(bào)道,騰訊和網(wǎng)易近期正在縮減他們對(duì)日本游戲市場(chǎng)的投資。

關(guān)鍵字: 騰訊 編碼器 CPU

8月28日消息,今天上午,2024中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)開(kāi)幕式在貴陽(yáng)舉行,華為董事、質(zhì)量流程IT總裁陶景文發(fā)表了演講。

關(guān)鍵字: 華為 12nm EDA 半導(dǎo)體

8月28日消息,在2024中國(guó)國(guó)際大數(shù)據(jù)產(chǎn)業(yè)博覽會(huì)上,華為常務(wù)董事、華為云CEO張平安發(fā)表演講稱(chēng),數(shù)字世界的話語(yǔ)權(quán)最終是由生態(tài)的繁榮決定的。

關(guān)鍵字: 華為 12nm 手機(jī) 衛(wèi)星通信

要點(diǎn): 有效應(yīng)對(duì)環(huán)境變化,經(jīng)營(yíng)業(yè)績(jī)穩(wěn)中有升 落實(shí)提質(zhì)增效舉措,毛利潤(rùn)率延續(xù)升勢(shì) 戰(zhàn)略布局成效顯著,戰(zhàn)新業(yè)務(wù)引領(lǐng)增長(zhǎng) 以科技創(chuàng)新為引領(lǐng),提升企業(yè)核心競(jìng)爭(zhēng)力 堅(jiān)持高質(zhì)量發(fā)展策略,塑強(qiáng)核心競(jìng)爭(zhēng)優(yōu)勢(shì)...

關(guān)鍵字: 通信 BSP 電信運(yùn)營(yíng)商 數(shù)字經(jīng)濟(jì)

北京2024年8月27日 /美通社/ -- 8月21日,由中央廣播電視總臺(tái)與中國(guó)電影電視技術(shù)學(xué)會(huì)聯(lián)合牽頭組建的NVI技術(shù)創(chuàng)新聯(lián)盟在BIRTV2024超高清全產(chǎn)業(yè)鏈發(fā)展研討會(huì)上宣布正式成立。 活動(dòng)現(xiàn)場(chǎng) NVI技術(shù)創(chuàng)新聯(lián)...

關(guān)鍵字: VI 傳輸協(xié)議 音頻 BSP

北京2024年8月27日 /美通社/ -- 在8月23日舉辦的2024年長(zhǎng)三角生態(tài)綠色一體化發(fā)展示范區(qū)聯(lián)合招商會(huì)上,軟通動(dòng)力信息技術(shù)(集團(tuán))股份有限公司(以下簡(jiǎn)稱(chēng)"軟通動(dòng)力")與長(zhǎng)三角投資(上海)有限...

關(guān)鍵字: BSP 信息技術(shù)
關(guān)閉
關(guān)閉