你提的問題應(yīng)該是在課堂上學(xué)習(xí)過
卓大大,打擾一下。我想問下您就是互相關(guān)運算和卷積在一定程度上是一樣的運算吧?那為什么卷積之后序列長度是2N-1,而互相關(guān)運算的結(jié)果按照那個頻域相乘再求快速傅里葉的逆變換得到的序列長度應(yīng)該是就是之前的序列長度N吧?為啥和卷積的長度不一致呢?
這里的頻域相乘應(yīng)該就是對應(yīng)的序列相乘吧?比如X[1]=a[1]*b[1],這樣子我是哪里想錯了呢?麻煩卓大大解惑啦。
提問分析(Analaysis)
你所提出的問題是關(guān)于“信號與系統(tǒng)”學(xué)科中十種信號[1]中的主要兩種復(fù)雜運算形式:卷積運算和相關(guān)運算。具體疑問是實現(xiàn)卷積運算的兩種方法為何得到結(jié)果的長度不一樣?
-
方法1: 直接在時域利用公式計算; -
方法2: 利用快速傅里葉變換加速計算;
這個問題涉及到關(guān)于卷積、相關(guān)運算的如何定義、結(jié)果長度是多少、如何加速卷積相關(guān)運算等問題。下面來分析一下其中的理由。
基礎(chǔ)理論(Principle)
1. 相關(guān)與卷積
你一開始提到相關(guān)運算和卷積運算在一定程度上是一樣的運算吧?對的,這兩種運算的確很相像。從它們的公式就可以看出來:兩個連續(xù)時間信號的卷積運算為:
兩個信號的相關(guān)運算為:
對于實值信號來講,這兩個運算主要區(qū)別就在于積分號內(nèi)部,第二個信號是否需要反褶[2]。如果參與運算的第二個信號是偶信號[^3],那么這兩個運算就幾乎相同。因此,你所說它們在一定程度上是一樣具有一定的道理。
當(dāng)然,這兩種運算在使用目的、數(shù)學(xué)性質(zhì)方面還是有一定的差異。下面分析就主要以卷積運算進行討論。
當(dāng)信號為離散時間序列時,相應(yīng)的運算就是累加和的形式。以卷積運算為例:
卷積也可以擴展到高維信號運算。下面是二維圖像信號的離散卷積運算。它被廣泛應(yīng)用到深度學(xué)習(xí)中的卷積神經(jīng)網(wǎng)絡(luò)中。
2. 有限長信號運算結(jié)果長度
根據(jù)卷積運算公式可以看出,參與卷積運算的兩個信號,任選其中一個信號進行反褶、平移,然后在于另外一個信號進行相乘、積分便得到計算結(jié)果。
如果參與運算的兩個信號 的長度都是有限長,分別是 ,那么它們卷積結(jié)果 也是一個有限長的信號,長度等于 。
對于有限長的離散時間序列信號,它們的卷積結(jié)果的長度等于參與卷積的兩個信號長度之和,再減去1。這些結(jié)論可以通過如下卷積運算的圖解過程分析可得。
相關(guān)運算結(jié)果的長度也是類似的。
3. 計算復(fù)雜度
你的問題中提到了使用快速傅里葉變換(FFT)來加快計算卷積結(jié)果。相比于兩個信號的乘積運算,信號的卷積(相關(guān))運算的確復(fù)雜。要獲得每一個結(jié)果值,都需要完成相應(yīng)的積分(累加和)。
比如,對于長度分別為 的兩個序列,得到對應(yīng)長度為 卷積結(jié)果,需要的乘法次數(shù)為 ,加法次數(shù)為 。
如何加快卷積運算呢?在數(shù)學(xué)上可以利用傅里葉變換的卷積定理,來將時域空間中的卷積運算轉(zhuǎn)換成頻域(變換域)中的乘積運算。由于存在著快速傅里葉變換變換算法,這就整體提高了計算的效率。
看似傅里葉變換“真香”,但它也會帶來麻煩。比如,兩個信號的時域乘積運算,經(jīng)過傅里葉變換之后,在頻域又變成了卷積運算。這還不是主要的問題,最主要的是,這種變化所完成的計算結(jié)果,是兩個信號的“圓卷積”。
4. 線卷積與圓卷積
由于快速傅里葉變換(FFT),是離散傅里葉變換(DFT)的快速算法,而離散傅里葉變換的公式來源于周期序列信號的傅里葉級數(shù)分解(DTFS)的 公式。所以本質(zhì)上講,他們反映的是周期離散序列信號中在一個周期內(nèi)有限個波形數(shù)據(jù),與它的頻譜,也是一個周期序列信號,在一個周期內(nèi)的有限個頻譜數(shù)據(jù)之間的對應(yīng)關(guān)系。因此,通常對信號的平移、反褶等操作,都需要按照圓位移、圓反褶來進行,即先把信號拓展長一個周期信號,然后進行相應(yīng)的平移,反褶。然后在結(jié)果的基礎(chǔ)上在提取其中的一個主周期[3]的數(shù)據(jù)。
下圖顯示了圓位移的過程。
將卷積運算中的反褶、位移都替換成圓反褶、圓位移,就形成了兩個信號的圓卷積操作。兩個信號進行圓卷積,它們必須長度相同,圓卷積的結(jié)果等于兩個信號的長度本身,而不是它們的長度之和,再減一。
由于有了圓卷積的定義,所以將原來的普通卷積稱為線卷積。
到此為止,我們知道為什么使用FFT加速卷積計算的結(jié)果與直接使用公式計算所得到的結(jié)果長度不同了。這是因為利用FFT所得到的卷積結(jié)果是兩個等長序列的圓卷積,與兩個序列的線卷積的結(jié)果是不同的。
那么,怎么解決這個問題呢?
問題解決(Problem)
解決方法很簡單,那就是補零,即在序列后面通過增加若干個0,來增加序列的長度。
圓卷積運算要求參與運算的兩個信號長度必須相同,滿足這一點是通過對短序列后面補零來實現(xiàn)。同樣,為了使得圓卷積也能夠得到和線卷積相同長度的結(jié)果,只要將兩個序列(長度分別為 )長度通過補零延長到 即可。這樣通過圓卷積所得到的結(jié)果不僅長度和線卷積的長度相同,實際上,結(jié)果也是一樣的。
下圖中顯示了兩個長度分別為4,6的信號,線卷積和圓卷積的結(jié)果,顯然它們是不同的。右邊通過補零,將它們的長度都擴展到 ,所得到的圓卷積結(jié)果就與線卷積相同了。
實驗觀察(Laboratory)
下面是兩個序列 以及它們的線卷積結(jié)果 。
計算結(jié)果調(diào)用了scipy.signal中的fftconvolve指令。參與運算的 長度分別為10,14,線卷積結(jié)果的長度為23。在fftconvolve命令中,還可以通過改變參數(shù)mode,使其分別為“same”,"valide",分別抽取結(jié)果中的長度為10,5的結(jié)果中心部分,這樣就可以獲得與參與卷積運算的最短序列相同,以及兩個序列完全重合的結(jié)果。
t = linspace(0, 10, 10, endpoint=False)[newaxis]
d = ones((1, 14), dtype=int16)
cv1 = fftconvolve(t, d, 'full')
cv2 = fftconvolve(t, d, 'same')
cv3 = fftconvolve(t, d, 'valid')
使用scipy.ndimage中的convolve可以實現(xiàn)圓卷積,需要將mode設(shè)置為"wrap"即可。
t = linspace(0, 10, 10, endpoint=False)[newaxis]
d = ones((1, 14), dtype=int16)
cvc = scipy.ndimage.convolve(t, d, mode='wrap')
下面是設(shè)定長度增加的圓卷積結(jié)果,長度從14一直增加到30??梢钥吹綀A卷積的結(jié)果逐步與線卷積變得相同。直道長度大于23之后,圓卷積所得到的結(jié)果就變得與線卷積一樣了。
for i in range(30):
length = 14+i
t = linspace(0, length, length, endpoint=False)[newaxis]
d = ones((1, length), dtype=int16)
t[0][10:] = 0
d[0][14:] = 0
cvc =scipy.ndimage.convolve(t,d, mode='wrap')
plt.clf()
plt.subplot(3,1,1)
plt.stem(t[0])
plt.axis([0, length+1, 0, 10])
plt.subplot(3,1,2)
plt.stem(d[0])
plt.axis([0, length+1, 0, 5])
plt.subplot(3,1,3)
plt.stem(cvc[0])
plt.axis([0, length+1, 0, 100])
plt.draw()
plt.pause(.5)
擴展聯(lián)系(Extention)
通過卷積、相關(guān)運算,可以獲得豐富的信號處理能力。相關(guān)運算就可以用于檢測信號之間的相似程度,并用于信號的位置檢測。
使用快速傅里葉變換來加速卷積,相關(guān)運算,可以達(dá)到實時信號處理的目的。通過在頻域數(shù)據(jù)的補零,還可以實現(xiàn)對卷積結(jié)果的理想插值。
應(yīng)用于今年智能車競賽信標(biāo)組比賽的相關(guān)文獻如下:
-
室外聲音信標(biāo)可行性分析[4]
-
聲音信標(biāo)調(diào)試[5]
-
聲音信標(biāo)長啥樣子?[6]
-
信標(biāo)的信號[7]
今天討論的這個問題,是本學(xué)期“信號與系統(tǒng)”課程中的具體應(yīng)用。在很多情況下,同學(xué)們也許不清楚其中的基本原理,也可以直接使用各種軟件工具獲得結(jié)果。在課堂中的學(xué)習(xí)可能更多的是這些原理的數(shù)學(xué)描述。
如果沒有具體的應(yīng)用背景,同學(xué)們可否能夠在課堂學(xué)習(xí)中激發(fā)起濃厚的興趣呢?這是我在教學(xué)中一直在擔(dān)心的一個主要問題。
還好吧,對于清華的同學(xué)來講,他們不愁找不到學(xué)習(xí)的理由。
其他相關(guān)提問
卓大大,有些同學(xué)提議學(xué)習(xí)美賽分成兩個時間段來做,我覺得這個建議不是特別妥當(dāng)。因為公平起見肯定要控制變量,比賽環(huán)節(jié)需要盡量一致。退一萬步說,一屆比賽獲獎結(jié)果也是需要一起比較得出來的,即便是美賽也是一起評的獎,八月份的比賽結(jié)果總不能等到寒假再出成績吧。望大大三思而后行。
博士您好,我在廣州的學(xué)校,學(xué)校通知六月底畢業(yè)生返校,我們這些大三的這學(xué)期估計沒辦法返校,就是有點擔(dān)心比賽的事情怎么進行,畢竟三個組員沒辦法協(xié)同工作
卓大大,雙車組可以使用現(xiàn)成的電磁鐵模塊嗎,如圖。
回復(fù):可以的。
參考資料
十種信號運算: 、相加、相乘、反褶、位移、尺度、微分、積分、卷積和相關(guān)
[2]說明: 信號反褶:信號的自變量改變符號,引起信號左右反轉(zhuǎn)對調(diào)。
[3]說明: 周期序列的主周期:定義為0~N-1對應(yīng)的一個周期內(nèi)的數(shù)據(jù)
[4]室外聲音信標(biāo)可行性分析: https://zhuoqing.blog.csdn.net/article/details/104231420
[5]聲音信標(biāo)調(diào)試: https://zhuoqing.blog.csdn.net/article/details/105004283
[6]聲音信標(biāo)長啥樣子?: https://zhuoqing.blog.csdn.net/article/details/105207528
[7]信標(biāo)的信號: https://zhuoqing.blog.csdn.net/article/details/105575349
免責(zé)聲明:本文內(nèi)容由21ic獲得授權(quán)后發(fā)布,版權(quán)歸原作者所有,本平臺僅提供信息存儲服務(wù)。文章僅代表作者個人觀點,不代表本平臺立場,如有問題,請聯(lián)系我們,謝謝!