快速傅里叶变换:修订间差异
小 →其他算法: 调整格式、排版 |
小 內容擴充 |
||
(未显示47个用户的69个中间版本) | |||
第1行: | 第1行: | ||
{{ |
{{NoteTA |
||
|G1 = Signals and Systems |
|||
|G1=Communication|1=zh:傅里叶; zh-hans:傅里叶; zh-hant:傅立葉; |
|||
|G2 = Math |
|||
|G3 = IT |
|||
|1 = zh-hans:变换; zh-hant:變換; |
|||
}} |
}} |
||
{{ |
{{redirect|FFT}} |
||
'''快速傅里叶变换'''({{lang-en|'''Fast Fourier Transform, FFT'''}}),是[[离散傅里叶变换]]的快速[[算法]],也可用于计算离散傅里叶变换的逆变换。快速傅里叶变换有广泛的应用,如[[数字信号处理]]、计算[[大整数乘法]]、求解[[偏微分方程]]等等。本条目只描述各种快速算法。 |
|||
[[File:Time Signal of Five Term Cosine Series.png|thumb|400 px | 一个五项余弦级数的时域信号。频率为 {{#tag:math| 10 {{Sqrt|2|use math=yes|in math=yes}} }} 的倍数。振幅为 1, 2, 3, 4, 5。时间步长为 0.001 s]] |
|||
对于复数序列<math>x_{0},\ x_{1},\ ...,\ x_{n-1}</math>,离散傅里叶变换公式为: |
|||
[[File:DFTs of Five Term Cosine Series.png|thumb|400 px | 用FFT(~40,000次运算)五项余弦级数及用显式积分(~1亿次运算)得出的DFT。时间窗口是10秒。FFT是用FFTW3( http://www.fftw.org/ {{Wayback|url=http://www.fftw.org/ |date=20190925140738 }} )计算的。显式积分DFT是用 https://sourceforge.net/projects/amoreaccuratefouriertransform/ {{Wayback|url=https://sourceforge.net/projects/amoreaccuratefouriertransform/ |date=20160613013603 }} 计算的。]] |
|||
[[File:Zoomed DFTs of Five Term Cosine Series.png|thumb|400 px |缩放后的五项余弦级数的DFT。注意到显式积分更细的步长大小比FFT更精确地再现了峰值(4)和频率(56.569 Hz),代价是速度慢了上千倍。]] |
|||
'''快速傅里叶变换'''({{lang-en|'''Fast Fourier Transform, FFT'''}}),是快速计算序列的[[离散傅里叶变换]](DFT)或其逆变换的方法<ref>{{Cite book|title=数字信号处理(第2版)|last=杨毅明|first=|publisher=机械工业出版社|year=2017年|isbn=9787111576235|location=北京|pages=第95页}}</ref>。[[傅里叶分析]]将信号从原始域(通常是时间或空间)转换到[[頻域]]的表示或者逆过来转换。FFT会通过把[[離散傅里葉變換矩陣|DFT矩阵]][[矩阵分解|分解]]为[[稀疏矩阵|稀疏]](大多为零)因子之积来快速计算此类变换。<ref>Charles Van Loan, ''Computational Frameworks for the Fast Fourier Transform'' (SIAM, 1992).</ref> 因此,它能够将计算DFT的[[計算複雜性理論|复杂度]]从只用DFT定义计算需要的 <math>O(n^2)</math>,降低到 <math>O(n \log n)</math>,其中 <math>n</math> 为数据大小。 |
|||
<math> |
|||
y_j = \sum_{k=0}^{n-1} e^{-{2\pi\imath \over n} j k}x_k \qquad j = 0,1,\dots,n-1. |
|||
</math> |
|||
快速傅里叶变换广泛的应用于工程、科学和数学领域。这里的基本思想在1965年才得到普及,但早在1805年就已推导出来。<ref name=Heideman84>{{cite journal |
|||
直接变换的计算复杂度是<math>\mathcal{O}(n^2)</math>(参见[[大O符号]])。快速傅里叶变换可以计算出与直接计算相同的结果,但只需要<math>\mathcal{O}(n \log n)</math>的计算复杂度。通常,快速算法要求''n''能被[[因数分解]],但不是所有的快速傅里叶变换都要求''n''是[[合数]],对于所有的整数''n'',都存在复杂度为<math>\mathcal{O}(n \log n)</math>的快速算法。 |
|||
|last1=Heideman |
|||
|first1=M. T. |
|||
|first2=D. H. |
|||
|last2=Johnson |
|||
|first3=C. S. |
|||
|last3=Burrus |
|||
|doi=10.1109/MASSP.1984.1162257 |
|||
|title=Gauss and the history of the fast Fourier transform |
|||
|journal=IEEE ASSP Magazine |
|||
|volume=1 |
|||
|issue=4 |
|||
|pages=14–21 |
|||
|year=1984 |
|||
}}</ref> 1994年美國數學家[[威廉·吉爾伯特·斯特朗|吉爾伯特·斯特朗]]把FFT描述为“我们一生中最重要的[[数值分析|数值算法]]”<ref>{{cite journal|last=Strang|first=Gilbert|title=Wavelets|journal=American Scientist|date=May–June 1994|volume=82|issue=3|page=253|jstor=29775194}}</ref>,它还被IEEE科学与工程计算期刊列入20世纪十大算法。<ref>{{Cite journal|title = Guest Editors Introduction to the top 10 algorithms|url = http://ieeexplore.ieee.org/lpdocs/epic03/wrapper.htm?arnumber=814652|journal = Computing in Science Engineering|date = January 2000|issn = 1521-9615|pages = 22–23|volume = 2|issue = 1|doi = 10.1109/MCISE.2000.814652|first = J.|last = Dongarra|first2 = F.|last2 = Sullivan}}</ref> |
|||
==定义和速度== |
|||
除了指数的符号相反、并多了一个''1/n''的因子,离散傅里叶变换的正变换与逆变换具有相同的形式。因此所有的离散傅里叶变换的快速算法同时适用于正逆变换。 |
|||
用FFT计算[[离散傅里叶变换|DFT]]会得到与直接用DFT定义计算相同的结果;最重要的区别是FFT更快。(由于[[捨入誤差]]的存在,许多FFT算法还会比直接运用定义求值精确很多,后面会讨论到这一点。) |
|||
令 ''x''<sub>0</sub>, ...., ''x''<sub>''N''-1</sub> 為[[复数 (数学)|复数]]。DFT由下式定义 |
|||
:<math> X_k = \sum_{n=0}^{N-1} x_n e^{-{i 2\pi k \frac{n}{N}}} |
|||
\qquad |
|||
k = 0,\dots,N-1. </math> |
|||
直接按这个定义求值需要 O(''N''<sup>2</sup>) 次运算:''X''<sub>''k''</sub> 共有 ''N'' 个输出,每个输出需要 ''N'' 项求和。直接使用DFT運算需使用N個複數乘法(4N 個實數乘法)與N-1個複數加法(2N-2個實數加法),因此,計算使用DFT所有N點的值需要''N''<sup>2</sup>複數乘法與''N''<sup>2</sup>-N 個複數加法。FFT则是能够在 O(''N'' log ''N'') 次操作计算出相同结果的任何方法。更准确的说,所有已知的FFT算法都需要 [[大O符号|O]](''N'' log ''N'') 次运算(技术上O只标记[[上界]]),虽然还没有已知的证据证明更低的复杂度是不可能的。<ref>Johnson and Frigo, 2007</ref> |
|||
要说明FFT节省时间的方式,就得考虑复数相乘和相加的次数。直接计算DFT的值涉及到 ''N''<sup>2</sup> 次复数相乘和 ''N''(''N''−1) 次复数相加(可以通过削去琐碎运算(如乘以1)来节省 O(''N'') 次运算)。众所周知的基2[[#库利-图基算法|库利-图基算法]],''N'' 为2的幂,可以只用 (''N''/2)log<sub>2</sub>(''N'') 次复数乘法(再次忽略乘以1的简化)和 ''N''log<sub>2</sub>(''N'') 次加法就可以得到相同结果。在实际中,现代计算机通常的实际性能通常不受算术运算的速度和对复杂主体的分析主导<ref>Frigo & Johnson, 2005</ref>,但是从 O(''N''<sup>2</sup>) 到 O(''N'' log ''N'') 的总体改进仍然能够体现出来。 |
|||
== 一般的簡化理論 == |
== 一般的簡化理論 == |
||
第20行: | 第47行: | ||
<math>\mathbf{S}=\begin{bmatrix} a_1 \\ a_2 \\ \vdots \\ a_m\end{bmatrix}\begin{bmatrix} b_1 & b_2 & \cdots & b_n\end{bmatrix}</math> |
<math>\mathbf{S}=\begin{bmatrix} a_1 \\ a_2 \\ \vdots \\ a_m\end{bmatrix}\begin{bmatrix} b_1 & b_2 & \cdots & b_n\end{bmatrix}</math> |
||
若<math>\begin{bmatrix} a_1 & a_2 & \cdots & a_m\end{bmatrix}^T</math>有<math>M_0</math>個相異的非平凡值 |
若<math>\begin{bmatrix} a_1 & a_2 & \cdots & a_m\end{bmatrix}^T</math>有<math>M_0</math>個相異的非平凡值(<math>a_m\ne\pm2^k,a_m\ne\pm2^ka_n </math> where <math> m\ne n</math>) |
||
<math>\begin{bmatrix} b_1 & b_2 & \cdots & b_n\end{bmatrix}</math>有<math>N_0</math>個相異的非平凡值 |
<math>\begin{bmatrix} b_1 & b_2 & \cdots & b_n\end{bmatrix}</math>有<math>N_0</math>個相異的非平凡值 |
||
第44行: | 第71行: | ||
假設<math>N= P_1 \times P_2 \times \cdots \times P_k </math>,其中<math>P_1,P_2, \cdots , P_k </math>彼此互質 |
假設<math>N= P_1 \times P_2 \times \cdots \times P_k </math>,其中<math>P_1,P_2, \cdots , P_k </math>彼此互質 |
||
<math>\mathbf{P_k}</math> |
<math>\mathbf{P_k}</math>點DFT的乘法量為<math> \mathbf{B_k}</math>,則<math>\mathbf{N}</math>點DFT的乘法量為: |
||
:<math>\frac{N}{P_1}B_1+\frac{N}{P_2}B_2+\cdots\cdots+\frac{N}{P_k}B_k</math> |
:<math>\frac{N}{P_1}B_1+\frac{N}{P_2}B_2+\cdots\cdots+\frac{N}{P_k}B_k</math> |
||
第52行: | 第79行: | ||
若<math>\mathbf{N_1=P^a}</math>點的DFT需要的乘法量為<math>\mathbf{B_1}</math> |
若<math>\mathbf{N_1=P^a}</math>點的DFT需要的乘法量為<math>\mathbf{B_1}</math> |
||
且<math>n_1\times n_2</math> |
且<math>n_1\times n_2</math>當中(<math> n_1=0,1,\cdots,N_1-1, \quad n_2=0,1, \cdots , N_2-1</math>) |
||
有<math>D_1</math>個值不為<math>\frac{N}{12}</math>及<math>\frac{N}{8}</math>的倍數, |
有<math>D_1</math>個值不為<math>\frac{N}{12}</math>及<math>\frac{N}{8}</math>的倍數, |
||
第62行: | 第89行: | ||
:<math>\mathbf{N_2B_1+N_1B_2+3D_1+2D_2}</math> |
:<math>\mathbf{N_2B_1+N_1B_2+3D_1+2D_2}</math> |
||
== |
== 库利-图基算法 == |
||
{{main| |
{{main|库利-图基快速傅里叶变换算法}} |
||
库利-图基算法是最常见的FFT算法。这一方法以[[分治法]]为策略[[递归]]地将长度为<math>N=N_1 N_2</math>的[[离散傅里叶变换]]分解为长度为<math>N_1</math>的<math>N_2</math>个较短序列的离散傅里叶变换,以及与<math>\Omicron (N)</math>个[[旋转因子]]的复数乘法。 |
|||
<!-- |
|||
By far the most common FFT is the algorithm. This is a divide and conquer algorithm that recursively breaks down a DFT of any composite size N = N1N2 into many smaller DFTs of sizes N1 and N2, along with O(N) multiplications by complex roots of unity traditionally called twiddle factors (after Gentleman and Sande, 1966). |
|||
--> |
|||
这种方法以及FFT的基本思路在 |
这种方法以及FFT的基本思路在1965年J. W. Cooley和J. W. Tukey合作发表''An algorithm for the machine calculation of complex Fourier series''之后开始为人所知。但后来发现,实际上这两位作者只是重新发明了[[高斯]]在1805年就已经提出的算法(此算法在历史上数次以各种形式被再次提出)。 |
||
<!--This method (and the general idea of an FFT) was popularized by a publication of J. W. Cooley and J. W. Tukey in 1965, but it was later discovered that those two authors had independently re-invented an algorithm known to Carl Friedrich Gauss around 1805 (and subsequently rediscovered several times in limited forms).--> |
|||
库利-图基算法最有名的应用,是将序列长为''N ''的DFT分割为两个长为''N/2 ''的子序列的DFT,因此这一应用只适用于序列长度为2的幂的DFT计算,即基2-FFT。实际上,如同高斯和Cooley与Tukey都指出的那样,Cooley-Tukey算法也可以用于序列长度''N ''为任意因数分解形式的DFT,即混合基FFT,而且还可以应用于其他诸如分裂基FFT等变种。尽管Cooley-Tukey算法的基本思路是采用递归的方法进行计算,大多数传统的算法实现都将显式的递归算法改写为非递归的形式。另外,因为Cooley-Tukey算法是将DFT分解为较小长度的多个DFT,因此它可以同任一种其他的DFT算法联合使用。 |
|||
<!--The most well-known use of the Cooley-Tukey algorithm is to divide the transform into two pieces of size N / 2 at each step, and is therefore limited to power-of-two sizes, but any factorization can be used in general (as was known to both Gauss and Cooley/Tukey). These are called the radix-2 and mixed-radix cases, respectively (and other variants such as the split-radix FFT have their own names as well). Although the basic idea is recursive, most traditional implementations rearrange the algorithm to avoid explicit recursion. Also, because the Cooley-Tukey algorithm breaks the DFT into smaller DFTs, it can be combined arbitrarily with any other algorithm for the DFT, such as those described below.--> |
|||
<!-- 目前最常用的快速傅里叶变换是库利-图基(Cooley-Tukey)算法。该算法利用[[分治法]],将一个常数''n''的离散傅里叶变换[[递归]]地分解为两个常数分别为<math>n_1</math>和<math>n_2</math>的变换,保证<math>n=n_1 n_2</math>,从而简化了原来的离散傅里叶变换。--> |
|||
=== 设计思想 === |
=== 设计思想 === |
||
下面,我们用'''N次单位根'''<math>W_{N}</math>来表示<math>e^{-j\frac{2\pi}{N}}</math>。 |
下面,我们用'''N次单位根'''<math>W_{N}</math>来表示<math>e^{-j\frac{2\pi}{N}}</math>。 |
||
第85行: | 第106行: | ||
# 若<math>m</math>是<math>N</math>的约数,<math>W_{N}^{mkn}=W_{\frac{N}{m}}^{kn}</math> |
# 若<math>m</math>是<math>N</math>的约数,<math>W_{N}^{mkn}=W_{\frac{N}{m}}^{kn}</math> |
||
为了简单起见,我们下面设待变换序列长度<math>n=2^r</math>。 |
为了简单起见,我们下面设待变换序列长度<math>n=2^r</math>。根据上面单位根的对称性,求级数<math>y_k=\sum_{n=0}^{N-1} W_{N}^{kn}x_n</math>时,可以将求和区间分为两部分: |
||
根据上面单位根的对称性,求级数<math>y_k=\sum_{n=0}^{N-1} W_{N}^{kn}x_n</math>时,可以将求和区间分为两部分: |
|||
<math>\begin{matrix}y_k=\sum_{n=2t} W_{N}^{kn} x_n + \sum_{n=2t+1} W_{N}^{kn}x_n\\= \sum_{t} W_{\frac{N}{2}}^{kt}x_{2t} + W_{N}^{k}\sum_{t} W_{\frac{N}{2}}^{kt}x_{2t+1}\\= F_{even}(k) + W_{N}^{k}F_{odd}(k)&&&&&&(i\in\mathbb{Z})\end{matrix}</math> |
<math>\begin{matrix}y_k=\sum_{n=2t} W_{N}^{kn} x_n + \sum_{n=2t+1} W_{N}^{kn}x_n\\= \sum_{t} W_{\frac{N}{2}}^{kt}x_{2t} + W_{N}^{k}\sum_{t} W_{\frac{N}{2}}^{kt}x_{2t+1}\\= F_{even}(k) + W_{N}^{k}F_{odd}(k)&&&&&&(i\in\mathbb{Z})\end{matrix}</math> |
||
<math>F_{odd}(k)</math> |
<math>F_{odd}(k)</math>和<math>F_{even}(k)</math>是两个分别关于序列<math>\left\{x_n\right\}_0^{N-1}</math>奇数号和偶数号序列N/2点变换。由此式只需计算出<math>y_k</math>的前N/2个点,[[库利-图基快速傅里叶变换算法|对于后N/2个点可以通过复指数函数的对称性快速求解]]。即,注意<math>F_{odd}(k)</math>和<math>F_{even}(k)</math>都是周期为N/2的函数,由单位根的对称性,有以下变换公式: |
||
* <math>y_{k+\frac{N}{2}} = F_{even}(k) - W_{N}^{k}F_{odd}(k)</math> |
* <math>y_{k+\frac{N}{2}} = F_{even}(k) - W_{N}^{k}F_{odd}(k)</math> |
||
* <math>y_k = F_{even}(k) + W_{N}^{k}F_{odd}(k)</math>。 |
* <math>y_k = F_{even}(k) + W_{N}^{k}F_{odd}(k)</math>。 |
||
这样,一个N点变换就分解成了两个N/2点变换。照这样可继续分解下去。这就是'''库利-图基快速傅里叶变换'''算法的基本原理。根据[[主定理]]不难分析出此时算法的时间复杂度为<math> |
这样,一个N点变换就分解成了两个N/2点变换。照这样可继续分解下去。这就是'''库利-图基快速傅里叶变换'''算法的基本原理。根据[[主定理]]不难分析出此时算法的时间复杂度为<math>\Omicron (N\log N)</math> |
||
<!-- |
|||
===算法实现=== |
===算法实现=== |
||
*[[蝶形结]]网络和位反转 |
*[[蝶形结]]网络和位反转(Bit Reversal): |
||
:首先将<math>n=2^N</math>个输入点列按二进制进行编号,然后对各个编号按位倒置并按此重新排序。例如,对于一个8点变换, |
|||
001 |
:001倒置以后变成 100 |
||
:000 → 000 |
|||
:001 → 100 |
|||
:010 → 010 |
|||
:011 → 110 |
|||
:100 → 001 |
|||
:101 → 101 |
|||
:110 → 011 |
|||
:111 → 111 |
|||
:倒置后的编号为{0,4,2,6,1,5,3,7}。 |
|||
:然后将这n个点列作为输入传送到[[蝶形结]]网络中,注意将因子<math>W_{N}^{k}</math>逐层加入到蝶形网络中。 |
|||
010 --〉 010 |
|||
011 --〉 110 |
|||
100 --〉 001 |
|||
101 --〉 101 |
|||
110 --〉 011 |
|||
111 --〉 111 |
|||
倒置后的编号为{0,4,2,6,1,5,3,7}。 |
|||
**然后将这n个点列作为输入传送到[[蝶形结]]网络中,注意将因子<math>W_{N}^{k}</math>逐层加入到蝶形网络中。 |
|||
===算法复杂度=== |
===算法复杂度=== |
||
由于按[[蝶形结网络]]计算n点变换要进行log ''n'' |
由于按[[蝶形结|蝶形结网络]]计算n点变换要进行log ''n''层计算,每层计算n个点的变换,故算法的时间复杂度为<math>\Omicron (n \log n)</math>。 |
||
== 其他算法 == |
== 其他算法 == |
||
<!--main articles: Prime-factor FFT algorithm, Bruun's FFT algorithm, Rader's FFT algorithm, Bluestein's FFT algorithm.--> |
|||
在[[Cooley-Tukey快速傅里叶变换算法|Cooley-Tukey算法]]之外还有其他DFT的快速演算法。对于长度<math>N = N_1N_2</math>且<math>N_1</math>与<math>N_2</math>互质的序列,可以采用基于[[中国剩余定理]]的[[互质因子算法]]将N |
在[[Cooley-Tukey快速傅里叶变换算法|Cooley-Tukey算法]]之外还有其他DFT的快速演算法。对于长度<math>N = N_1N_2</math>且<math>N_1</math>与<math>N_2</math>互质的序列,可以采用基于[[中国剩余定理]]的[[互质因子算法]]将N长序列的DFT分解为两个子序列的DFT。与Cooley-Tukey算法不同的是,[[互质因子算法]]不需要旋转因子。 |
||
Rader-Brenner |
Rader-Brenner算法是类似于Cooley-Tukey算法,但是采用的旋转因子都是纯虚数,以增加加法运算和降低了数值稳定性为代价减少了乘法运算。这方法之后被split-radix variant of Cooley-Tukey所取代,与Rader-Brenner演算法相比,有一样多的乘法量,却有较少的加法量,且不牺牲数值的准确性。 |
||
[[Bruun]]以及[[QFT]]演算法是不断的把DFT分成许多较小的DFT运算。 |
[[Bruun]]以及[[QFT]]演算法是不断的把DFT分成许多较小的DFT运算。(Rader-Brenner以及QFT演算法是为了2的指数所设计的演算法,但依然可以适用在可分解的整数上。Bruun演算法则可以运用在可被分成偶数个运算的数字)。尤其是Bruun演算法,把FFT看成是<math>z^N-1</math>,并把它分解成<math>z^{M-1}</math>与<math>z^{2M}+az^M+1</math>的形式。 |
||
另一个从多项式观点的快速傅立叶变换法是[[威诺格拉德快速傅立叶变换演算法|Winograd |
另一个从多项式观点的快速傅立叶变换法是[[威诺格拉德快速傅立叶变换演算法|Winograd算法]]。此演算法把<math>z^N-1</math>分解成cyclotomic多项式,而这些多项式的系数通常为1,0,-1。这样只需要很少的乘法量(如果有需要的话),所以winograd是可以得到最少乘法量的快速傅立叶演算法,对于较小的数字,可以找出有效率的算方式。更精确地说,winograd演算法让DFT可以用<math>2^k</math>点的DFT来简化,但减少乘法量的同时,也增加了非常多的加法量。Winograd也可以利用剩余值定理来简化DFT。 |
||
Rader演算法提出了利用点数为 |
Rader演算法提出了利用点数为N(N为质数)的DFT进行长度为N-1的回旋摺积来表示原本的DFT,如此就可利用摺积用一对基本的FFT来计算DFT。另一个prime-size的FFT演算法为chirp-Z演算法。此法也是将DFT用摺积来表示,此法与Rader演算法相比,能运用在更一般的转换上,其转换的基础为Z转换(Rabiner et al., 1969)。 |
||
<!-- |
|||
There are other FFT algorithms distinct from Cooley-Tukey. For N = N1N2 with coprime N1 and N2, one can use the Prime-Factor (Good-Thomas) algorithm (PFA), based on the Chinese Remainder Theorem, to factorize the DFT similarly to Cooley-Tukey but without the twiddle factors. The Rader-Brenner algorithm (1976) is a Cooley-Tukey-like factorization but with purely imaginary twiddle factors, reducing multiplications at the cost of increased additions and reduced numerical stability. Algorithms that recursively factorize the DFT into smaller operations other than DFTs include the Bruun and QFT algorithms. (The Rader-Brenner and QFT algorithms were proposed for power-of-two sizes, but it is possible that they could be adapted to general composite n. Bruun's algorithm applies to arbitrary even composite sizes.) Bruun's algorithm, in particular, is based on interpreting the FFT as a recursive factorization of the polynomial zN − 1, here into real-coefficient polynomials of the form zM − 1 and z2M + azM + 1. |
|||
Another polynomial viewpoint is exploited by the Winograd algorithm, which factorizes zN − 1 into cyclotomic polynomials—these often have coefficients of 1, 0, or −1, and therefore require few (if any) multiplications, so Winograd can be used to obtain minimal-multiplication FFTs and is often used to find efficient algorithms for small factors. Indeed, Winograd showed that the DFT can be computed with only O(N) irrational multiplications, leading to a proven achievable lower bound on the number of multiplications for power-of-two sizes; unfortunately, this comes at the cost of many more additions, a tradeoff no longer favorable on modern processors with hardware multipliers. In particular, Winograd also makes use of the PFA as well as an algorithm by Rader for FFTs of prime sizes. |
|||
Rader's algorithm, exploiting the existence of a generator for the multiplicative group modulo prime N, expresses a DFT of prime size n as a cyclic convolution of (composite) size N − 1, which can then be computed by a pair of ordinary FFTs via the convolution theorem (although Winograd uses other convolution methods). Another prime-size FFT is due to L. I. Bluestein, and is sometimes called the chirp-z algorithm; it also re-expresses a DFT as a convolution, but this time of the same size (which can be zero-padded to a power of two and evaluated by radix-2 Cooley-Tukey FFTs, for example), via the identity nk = − (k − n)2 / 2 + n2 / 2 + k2 / 2. |
|||
--> |
|||
== 实数或对称资料专用的演算法 == |
== 实数或对称资料专用的演算法 == |
||
第145行: | 第152行: | ||
:<math>\mathbf{X}_{N-k}</math>=<math>\mathbf{X}_k^*</math> |
:<math>\mathbf{X}_{N-k}</math>=<math>\mathbf{X}_k^*</math> |
||
而有一些演算法是专门为这种情形设计的 |
而有一些演算法是专门为这种情形设计的(e.g. Sorensen, 1987)。另一些则是利用旧有的演算法(e.g. Cooley-Tukey),删去一些不必要的演算步骤,如此省下了记忆体的使用,也省下了时间。另一方面,也可以把一个偶数长度且纯实数的DFT,用长度为原本一半的复数型态DFT来表示(实数项为原本纯实数资料的偶数项,虚数项则为奇数项)。 |
||
'''在Matlab上用一次N點FFT計算兩個N點實數信號x,y的FFT:''' |
|||
一度人们认为,用[[离散哈特利转换]](Discrete Hartley Transform)来处理纯实数的DFT会更有效率,但接着人们发现,对于同样点数的纯实数DFT,经过设计的FFT,可以比DHT省下更多的运算。Bruun演算法是第一个试着从减少实数输入的DFT运算量的演算法,但此法并没有成为人们普遍使用的方法。 |
|||
<syntaxhighlight lang="matlab"> |
|||
function [X,Y] = Real2FFT( x,y ) |
|||
% N-point FFT is used for 2 real signals both with length N |
|||
对于实数输入,且输入为偶对称或奇对称的情形,可以更进一步的省下时间以及记忆体,此时DFT可以用[[离散余弦转换]]或[[离散正弦转换]]来代替(Discrete cosine/sine transforms)。由于DCT/DST也可以设计出FFT的演算法,故在此种情形下,此方法取代了对DFT设计的FFT演算法。 |
|||
N = length(x); |
|||
z = x+y*i ; |
|||
Z = fft(z); |
|||
X = 0.5*(Z+conj(Z(1+mod(0:-1:1-N,N)))); |
|||
Y = 0.5*(Z-conj(Z(1+mod(0:-1:1-N,N))))/i; |
|||
end |
|||
</syntaxhighlight> |
|||
一度人们认为,用[[离散哈特利转换]](Discrete Hartley Transform)来处理纯实数的DFT会更有效率,但接着人们发现,对于同样点数的纯实数DFT,经过设计的FFT,可以比DHT省下更多的运算。Bruun演算法是第一个试着从减少实数输入的DFT运算量的演算法,但此法并没有成为人们普遍使用的方法。 |
|||
对于实数输入,且输入为偶对称或奇对称的情形,可以更进一步的省下时间以及记忆体,此时DFT可以用[[离散余弦转换]]或[[离散正弦转换]]来代替(Discrete cosine/sine transforms)。由于DCT/DST也可以设计出FFT的演算法,故在此种情形下,此方法取代了对DFT设计的FFT演算法。 |
|||
DFT可以应用在频谱分析以及做摺积的运算,而在此处,不同应用可以用不同的演算法来取代,列表如下: |
DFT可以应用在频谱分析以及做摺积的运算,而在此处,不同应用可以用不同的演算法来取代,列表如下: |
||
用来做[[频谱分析]]的情况下,DFT可用下列的演算法代替: |
用来做[[频谱分析]]的情况下,DFT可用下列的演算法代替: |
||
*DCT |
*DCT |
||
*DST |
*DST |
||
*DHT |
*DHT |
||
*正交基底的扩展 |
*正交基底的扩展(orthogonal basis expantion)包括正交多项式(orthogonal polynomials)以及CDMA. |
||
* |
*Walsh(Hadamard)转换 |
||
*Haar转换 |
*Haar转换 |
||
*小波 |
*小波(wavelet)转换 |
||
*时频分布 |
*时频分布(time-frequency distribution) |
||
用来做[[摺积]]的情况下,DFT可用下列的演算法代替: |
用来做[[摺积]]的情况下,DFT可用下列的演算法代替: |
||
*DCT |
*DCT |
||
*DST |
*DST |
||
*DHT |
*DHT |
||
*直接做摺积 |
*直接做摺积(direct computing) |
||
*分段式DFT摺积 |
*分段式DFT摺积(sectioned DFT convolution) |
||
*[[威諾格拉德快速傅立葉變換演算法]] |
*[[威諾格拉德快速傅立葉變換演算法]] |
||
*沃尔什(Walsh、Hadamard)转换 |
|||
*Walsh(Hadamard)转换 |
|||
*[[数论转换]] |
*[[数论转换]] |
||
== 單一路徑延遲迴授系統 == |
|||
單一路徑延遲迴授系統(英語:Single-path delay feedback,縮寫為SDF)是一種用於實現[[快速傅立葉轉換]](Fast Fourier Transform)中運算的管線式架構(pipeline architecture)。此架構的特點是資料從輸入一直到最終的輸出只會通過單一的路徑,並使用[[蝶形结|蝶形結]](butterfly diagram)做為資料的運算單元。經過蝶形結後的輸出資料會先暫存在系統的[[移位寄存器|移位暫存器]](shift registers)或是[[隨機存取記憶體]](RAM)當中,而由於只有單一路徑的關係,對於每一級的蝶形結架構我們只需要一個複數乘法器來進行和FFT當中的[[旋轉因子]](twiddle factor)的乘積運算。<ref>{{Cite journal |last=Shousheng He |last2=Torkelson |first2=M. |title=A new approach to pipeline FFT processor |url=http://ieeexplore.ieee.org/document/508145/ |publisher=IEEE Comput. Soc. Press |date=1996 |doi=10.1109/IPPS.1996.508145 |isbn=978-0-8186-7255-2}}</ref> |
|||
SDF的優點在於其架構簡單並且利用硬體實現的成本較低,原因在於其單一路徑的設計,使得資料會依序進行處理並輸出,並不會在系統中加入多個複雜的運算單元以進行平行化的運算,事實上SDF的架構在管線式[[快速傅立葉轉換]]處理器(pipelined FFT processors)中具有最高的記憶體使用效率,而由於記憶體單元數量會隨[[快速傅立葉轉換]]的級數而指數增長,記憶體使用效率進而成為影響電路面積和功耗的主要因素之一。因此在實作大型[[快速傅立葉轉換]]處理器的情況下,SDF架構一直是被優先考量採用的選擇。然而其缺點也同樣來自於單一路徑的設計,導致其[[吞吐量]](throughput)和多路徑延遲交換線路系統(英語:Multiple-path delay commutator,縮寫為MDC)相比較低。 |
|||
接著我們將以8個點的基-2單一路徑延遲迴授系統(8-point R2SDF)為例進行其演算法細節的介紹,並且展示在硬體實作中每一個cycle的運算和中間結果的存儲位置。 |
|||
[[File:New R2SDF.jpg|center|thumb|500x500px|8-point R2SDF Architecture]] |
|||
首先考慮系統輸入為x<sub>0</sub>, x<sub>1</sub>, ..., x<sub>7,</sub>並在前8個cycle依序輸入。 |
|||
* '''Cycle 0~3''': x<sub>0</sub>~x<sub>3</sub>依序存入第一級BF-2上方的暫存器中。 |
|||
* '''Cycle 4''': x<sub>0</sub>和x<sub>4</sub>輸入第一級BF-2後輸出x<sub>0</sub><sup>'</sup>和x<sub>4</sub><sup>'</sup>,x<sub>0</sub><sup>'</sup>存入第二級BF-2上方的暫存器中,x<sub>4</sub><sup>'</sup>存入第一級BF-2上方的暫存器中。 |
|||
* '''Cycle 5''': x<sub>1</sub>和x<sub>5</sub>輸入第一級BF-2後輸出x<sub>1</sub><sup>'</sup>和x<sub>5</sub><sup>'</sup>,x<sub>1</sub><sup>'</sup>存入第二級BF-2上方的暫存器中,x<sub>5</sub><sup>'</sup>存入第一級BF-2上方的暫存器中。 |
|||
* '''Cycle 6''': x<sub>2</sub>和x<sub>6</sub>輸入第一級BF-2後輸出x<sub>2</sub><sup>'</sup>和x<sub>6</sub><sup>'</sup>,x<sub>6</sub><sup>'</sup>存入第一級BF-2上方的暫存器中,x<sub>0</sub><sup>'</sup>和x<sub>2</sub><sup>'</sup>輸入第二級BF-2後輸出x<sub>0</sub><sup><nowiki>''</nowiki></sup>和x<sub>2</sub><sup><nowiki>''</nowiki></sup>,x<sub>0</sub><sup><nowiki>''</nowiki></sup>存入第三級BF-2上方的暫存器中,x<sub>2</sub><sup><nowiki>''</nowiki></sup>存入第二級BF-2上方的暫存器中。 |
|||
* '''Cycle 7''': x<sub>3</sub>和x<sub>7</sub>輸入第一級BF-2後輸出x<sub>3</sub><sup>'</sup>和x<sub>7</sub><sup>'</sup>,x<sub>7</sub><sup>'</sup>存入第一級BF-2上方的暫存器中,x<sub>1</sub><sup>'</sup>和x<sub>3</sub><sup>'</sup>輸入第二級BF-2後輸出x<sub>1</sub><sup><nowiki>''</nowiki></sup>和x<sub>3</sub><sup><nowiki>''</nowiki></sup>,x<sub>3</sub><sup><nowiki>''</nowiki></sup>存入第二級BF-2上方的暫存器中,x<sub>0</sub><sup><nowiki>''</nowiki></sup>和x<sub>1</sub><sup><nowiki>''</nowiki></sup>輸入第三級BF-2後輸出x<sub>0</sub><sup><nowiki>'''</nowiki></sup>和x<sub>1</sub><sup><nowiki>'''</nowiki></sup>,x<sub>0</sub><sup><nowiki>'''</nowiki></sup>直接輸出,x<sub>1</sub><sup><nowiki>'''</nowiki></sup>存入第三級BF-2上方的暫存器中。(此為'''第一筆輸出''',此後每一個cycle皆會輸出一筆資料。) |
|||
* '''Cycle 8''': x<sub>4</sub><sup>'</sup>乘上W<sup>0</sup>後存入第二級BF-2上方的暫存器中,x<sub>2</sub><sup><nowiki>''</nowiki></sup>乘上W<sup>0</sup>後存入第三級BF-2上方的暫存器中,x<sub>1</sub><sup><nowiki>'''</nowiki></sup>直接輸出。 |
|||
* '''Cycle 9''': x<sub>5</sub><sup>'</sup>乘上W<sup>1</sup>後存入第二級BF-2上方的暫存器中,x<sub>3</sub><sup><nowiki>''</nowiki></sup>乘上W<sup>2</sup>後和x<sub>2</sub><sup><nowiki>''</nowiki></sup>輸入第三級BF-2後輸出x<sub>2</sub><sup><nowiki>'''</nowiki></sup>和x<sub>3</sub><sup><nowiki>'''</nowiki></sup>, x<sub>2</sub><sup><nowiki>'''</nowiki></sup>直接輸出,x<sub>3</sub><sup><nowiki>'''</nowiki></sup>存入第三級BF-2上方的暫存器中。 |
|||
* '''Cycle 10''': x<sub>6</sub><sup>'</sup>乘上W<sup>2</sup>後和x<sub>4</sub><sup>'</sup>輸入第二級BF-2後輸出x<sub>4</sub><sup><nowiki>''</nowiki></sup>和x<sub>6</sub><sup><nowiki>''</nowiki></sup>,x<sub>6</sub><sup><nowiki>''</nowiki></sup>存入第二級BF-2上方的暫存器中,x<sub>4</sub><sup><nowiki>''</nowiki></sup>存入第三級BF-2上方的暫存器中,x<sub>3</sub><sup><nowiki>'''</nowiki></sup>直接輸出。 |
|||
* '''Cycle 11''': x<sub>7</sub><sup>'</sup>乘上W<sup>3</sup>後和x<sub>5</sub><sup>'</sup>輸入第二級BF-2後輸出x<sub>5</sub><sup><nowiki>''</nowiki></sup>和x<sub>7</sub><sup><nowiki>''</nowiki></sup>,x<sub>7</sub><sup><nowiki>''</nowiki></sup>存入第二級BF-2上方的暫存器中,x<sub>4</sub><sup><nowiki>''</nowiki></sup>和x<sub>5</sub><sup><nowiki>''</nowiki></sup>輸入第三級BF-2後輸出x<sub>4</sub><sup><nowiki>'''</nowiki></sup>和x<sub>5</sub><sup><nowiki>'''</nowiki></sup>,x<sub>4</sub><sup><nowiki>'''</nowiki></sup>直接輸出,x<sub>5</sub><sup><nowiki>'''</nowiki></sup>存入第三級BF-2上方的暫存器中。 |
|||
* '''Cycle 12''': x<sub>6</sub><sup><nowiki>''</nowiki></sup>乘上W<sup>0</sup>後存入第三級BF-2上方的暫存器中,x<sub>5</sub><sup><nowiki>'''</nowiki></sup>直接輸出。 |
|||
* '''Cycle 13''': x<sub>7</sub><sup><nowiki>''</nowiki></sup>乘上W<sup>2</sup>後和x<sub>6</sub><sup><nowiki>''</nowiki></sup>輸入第三級BF-2後輸出x<sub>6</sub><sup><nowiki>'''</nowiki></sup>和x<sub>7</sub><sup><nowiki>'''</nowiki></sup>,x<sub>6</sub><sup><nowiki>'''</nowiki></sup>直接輸出,x<sub>7</sub><sup><nowiki>'''</nowiki></sup>存入第三級BF-2上方的暫存器中。 |
|||
* '''Cycle 14''': x<sub>7</sub><sup><nowiki>'''</nowiki></sup>直接輸出。(此為'''最後一筆輸出'''。) |
|||
此外,我們可以在[[蝶形结|蝶形結]]中的加法器和乘法器加上額外的[[寄存器|暫存器]](register)來降低系統的關鍵路徑(critical path),來避免某些時刻不同級之間的繁重運算必須擠在同一個cycle中運算完成,進而嚴重影響整體電路在timing上的表現。但如此的管線式設計(pipeline design)也會增加整體電路的延遲(latency)和[[寄存器|暫存器]]使用量。 |
|||
=== 相似架構之硬體實作比較 === |
|||
# Radix-2 SDF: 2(log<sub>4</sub>N-1) 個乘法器、4log<sub>4</sub>N 個加法器、記憶體大小為 N-1。 |
|||
# Radix-4 SDF: log<sub>4</sub>N-1 個乘法器、8log<sub>4</sub>N 個加法器、記憶體大小為 N-1。 |
|||
# Radix-2<sup>2</sup> SDF: log<sub>4</sub>N-1 個乘法器、4log<sub>4</sub>N 個加法器、記憶體大小為 N-1。 |
|||
# Radix-2 MDC: 2(log<sub>4</sub>N-1) 個乘法器、4log<sub>4</sub>N 個加法器、記憶體大小為 1.5N-2。 |
|||
# Radix-4 MDC: 3(log<sub>4</sub>N-1) 個乘法器、8log<sub>4</sub>N 個加法器、記憶體大小為 2.5N-4。 |
|||
# Radix-4 SDC: log<sub>4</sub>N-1 個乘法器、3log<sub>4</sub>N 個加法器、記憶體大小為 2N-2。 |
|||
== 複雜度以及運算量的極限 == |
== 複雜度以及運算量的極限 == |
||
長久以來,人們對於求出快速傅立葉變換的複雜度下限以及需要多少的運算量感到很有興趣,而實際上也還有許多問題需要解決。即使是用較簡單的情形,即<math>2^k</math>點的DFT,也還沒能夠嚴謹的證明出FFT至少需要<math>\Omega( |
長久以來,人們對於求出快速傅立葉變換的複雜度下限以及需要多少的運算量感到很有興趣,而實際上也還有許多問題需要解決。即使是用較簡單的情形,即<math>2^k</math>點的DFT,也還沒能夠嚴謹的證明出FFT至少需要<math>\Omega (N\log N)</math>(不比<math>N\log N</math>小)的運算量,目前也沒有發現複雜度更低的演算法。通常數學運算量的多寡會是運算效率好壞最主要的因素,但在現實中,有許多因素也會有很大的影響,如快取記憶體以及CPU均有很大的影響。 |
||
在1978年,Winograd率先導出一個較嚴謹的FFT所需乘法量的下限:<math>\Theta(N)</math>。當<math>N=2^k</math>時,DFT只需要<math>4N-2\log_{2}^2N-2\log_{2}N-4</math> |
在1978年,Winograd率先導出一個較嚴謹的FFT所需乘法量的下限:<math>\Theta (N)</math>。當<math>N=2^k</math>時,DFT只需要<math>4N-2\log_{2}^2N-2\log_{2}N-4</math>次無理實數的乘法即可以計算出來。更詳盡,且也能趨近此下限的演算法也一一被提出(Heideman & Burrus, 1986; Duhamel, 1990)。很可惜的是,這些演算法,都需要很大量的加法計算,目前的硬體無法克服這個問題。 |
||
對於所需加法量的數目,雖然我們可以在某些受限制的假設下,推得其下限,但目前並沒有一個精確的下限被推導出來。1973年,Morgenstern在乘法常數趨近巨大的情形下 |
對於所需加法量的數目,雖然我們可以在某些受限制的假設下,推得其下限,但目前並沒有一個精確的下限被推導出來。1973年,Morgenstern在乘法常數趨近巨大的情形下(對大部分的FFT演算法為真,但不是全部)推導出加法量的下限:<math>\Omega \left(N \log N \right)</math>。Pan(1986)在假設FFT演算法的不同步的情形有其極限下證明出加法量的下限<math>\Omega (NlogN)</math>,但一般來說,此假設相當的不明確。長度為<math>N=2^k</math>的情形下,在某些假設下,Papadimitriou(1979)提出使用Cooley-Tukey演算法所需的複數加法量<math>N\log_{2}N</math>是最少的。到目前為止,在長度為<math>N=2^k</math>情況,還沒有任何FFT的演算法可以讓複數的加法量比<math>N\log_{2}N</math>還少。 |
||
還有一個問題是如何把乘法量與加法量的總和最小化,有時候稱作"演算複雜度" |
還有一個問題是如何把乘法量與加法量的總和最小化,有時候稱作"演算複雜度"(在這裡考慮的是實際的運算量,而不是漸近複雜度)。同樣的,沒有一個嚴謹下限被證明出來。從1968年開始,<math>N=2^k</math>點DFT而言,split-radix FFT演算法需要最少的運算量,在<math>N>1</math>的情形下,其需要<math>4N\log_{2}N-6N+8</math>個乘法運算以及加法運算。最近有人導出更低的運算量:<math>\frac{34}{9}N\log_{2}N</math>。(Johnson and Frigo, 2007; Lundy and Van Buskirk, 2007) |
||
大多數嘗試要降低或者證明FFT複雜度下限的人都把焦點放在複數資料輸入的情況,因其為最簡單的情形。但是,複數資料輸入的FFT演算法,與實數資料輸入的FFT演算法,離散餘 |
大多數嘗試要降低或者證明FFT複雜度下限的人都把焦點放在複數資料輸入的情況,因其為最簡單的情形。但是,複數資料輸入的FFT演算法,與實數資料輸入的FFT演算法,離散餘弦轉換(DCT),離散哈特列轉換(DHT),以及其他的演算法,均有很大的關連性。故任何一個演算法,在複雜度上有任何的改善的話,其他的演算法複雜度也會馬上獲得改善(Duhamel & Vetterli, 1990)。 |
||
== |
== 快速演算法查表 == |
||
當輸入信號長度為N時: |
|||
* N. Brenner and C. Rader, 1976, [http://ieeexplore.ieee.org/search/wrapper.jsp?arnumber=1162805 A New Principle for Fast Fourier Transformation], ''IEEE Acoustics, Speech & Signal Processing'' '''24''': 264-266. |
|||
* Cooley, James W., and [[John W. Tukey]], 1965, "An algorithm for the machine calculation of complex Fourier series," ''Math. Comput.'' '''19''': 297–301. |
|||
N = 1~60 |
|||
* [[Thomas H. Cormen]], [[Charles E. Leiserson]], [[Ronald L. Rivest]], and [[Clifford Stein]], 2001. ''[[Introduction to Algorithms]]'', 2nd. ed. MIT Press and McGraw-Hill. ISBN 0-262-03293-7. Especially chapter 30, "Polynomials and the FFT." |
|||
{| class="wikitable" |
|||
* Pierre Duhamel, 1990, {{doi-inline|10.1109/29.60070|Algorithms meeting the lower bounds on the multiplicative complexity of length-<math>2^n</math> DFTs and their connection with practical algorithms}}, ''IEEE Trans. Acoust. Speech. Sig. Proc.'' '''38''': 1504-151. |
|||
|N |
|||
* ------- and M. Vetterli, 1990, {{doi-inline|10.1016/0165-1684(90)90158-U|Fast Fourier transforms: a tutorial review and a state of the art}}, ''Signal Processing'' '''19''': 259–299. |
|||
|乘法數 |
|||
* A. Edelman, P. McCorquodale, and S. Toledo, 1999, {{doi-inline|10.1137/S1064827597316266|The Future Fast Fourier Transform?}}, ''SIAM J. Sci. Computing'' '''20''': 1094–1114. |
|||
|加法數 |
|||
* Funda Ergün, 1995, {{doi-inline|10.1145/225058.225167|Testing multivariate linear functions: Overcoming the generator bottleneck}}, ''Proc. 27th ACM Symposium on the Theory of Computing'': 407–416. |
|||
|N |
|||
* M. Frigo and S. G. Johnson, 2005, "[http://fftw.org/fftw-paper-ieee.pdf The Design and Implementation of FFTW3]," ''Proceedings of the IEEE'' '''93''': 216–231. |
|||
|乘法數 |
|||
* [[Carl Friedrich Gauss]], 1866. "Nachlass: Theoria interpolationis methodo nova tractata," ''Werke'' band '''3''', 265–327. Göttingen: Königliche Gesellschaft der Wissenschaften. |
|||
|N |
|||
* W. M. Gentleman and G. Sande, 1966, "Fast Fourier transforms—for fun and profit," ''Proc. AFIPS'' '''29''': 563–578. |
|||
|乘法數 |
|||
* H. Guo and C. S. Burrus, 1996, {{doi-inline|10.1117/12.255236|Fast approximate Fourier transform via wavelets transform}}, ''Proc. SPIE Intl. Soc. Opt. Eng.'' '''2825''': 250–259. |
|||
|N |
|||
* ------- and G. A. Sitton, 1994, {{doi-inline|10.1109/ICASSP.1994.389994|The Quick Discrete Fourier Transform}}, ''Proc. IEEE Conf. Acoust. Speech and Sig. Processing (ICASSP)'' '''3''': 445–448. |
|||
|乘法數 |
|||
* Michael T. Heideman and C. Sidney Burrus, 1986, [http://ieeexplore.ieee.org/search/wrapper.jsp?arnumber=1164785 On the number of multiplications necessary to compute a length-<math>2^n</math> DFT], ''IEEE Trans. Acoust. Speech. Sig. Proc.'' '''34''': 91-95. |
|||
|- |
|||
* -------- and D. H. Johnson, 1984, [http://ieeexplore.ieee.org/search/wrapper.jsp?arnumber=1162257 Gauss and the history of the fast Fourier transform], ''IEEE ASSP Magazine'' '''1''': 14–21. |
|||
|1 |
|||
* S. G. Johnson and M. Frigo, 2007. "[http://www.fftw.org/newsplit.pdf A modified split-radix FFT with fewer arithmetic operations]," ''IEEE Trans. Signal Processing'' '''55''' (1): 111–119. |
|||
|0 |
|||
* T. Lundy and J. Van Buskirk, 2007. "A new matrix approach to real FFTs and convolutions of length 2<sup>k</sup>," ''Computing'' '''80''' (1): 23-45. |
|||
|0 |
|||
* Jacques Morgenstern, 1973, {{doi-inline|10.1145/321752.321761|Note on a lower bound of the linear complexity of the fast Fourier transform}}, ''J. ACM'' '''20''': 305-306. |
|||
|11 |
|||
* [http://dx.doi.org/10.1007/BF01261607 M. J. Mohlenkamp, 1999, "A fast transform for spherical harmonics", ''J. Fourier Anal. Appl.'' '''5''', 159–184.] ([http://www.math.ohiou.edu/~mjm/research/MOHLEN1999P.pdf preprint]) |
|||
|46 |
|||
* H. J. Nussbaumer, 1977, {{doi-inline|10.1049/el:19770280|Digital filtering using polynomial transforms}}, ''Electronics Lett.'' '''13''': 386-387. |
|||
|24 |
|||
* V. Pan, 1986, {{doi-inline|10.1016/0020-0190(86)90035-9|The trade-off between the additive complexity and the asyncronicity of linear and bilinear algorithms}}, ''Information Proc. Lett.'' '''22''': 11-14. |
|||
|28 |
|||
* Christos H. Papadimitriou, 1979, {{doi-inline|10.1145/322108.322118|Optimality of the fast Fourier transform}}, ''J. ACM'' '''26''': 95-102. |
|||
|39 |
|||
* D. Potts, G. Steidl, and M. Tasche, 2001. "[http://www.tu-chemnitz.de/~potts/paper/ndft.pdf Fast Fourier transforms for nonequispaced data: A tutorial]", in: J.J. Benedetto and P. Ferreira (Eds.), ''Modern Sampling Theory: Mathematics and Applications'' (Birkhauser). |
|||
|182 |
|||
* Vladimir Rokhlin and Mark Tygert, 2006, "[http://pantheon.yale.edu/~mwt7/sph2.pdf Fast algorithms for spherical harmonic expansions]," ''SIAM J. Sci. Computing'' '''27''' (6): 1903-1928. |
|||
|- |
|||
* James C. Schatzman, 1996, [http://portal.acm.org/citation.cfm?id=240432 Accuracy of the discrete Fourier transform and the fast Fourier transform], ''SIAM J. Sci. Comput.'' '''17''': 1150–1166. |
|||
|2 |
|||
* O. V. Shentov, S. K. Mitra, U. Heute, and A. N. Hossen, 1995, {{doi-inline|10.1016/0165-1684(94)00103-7|Subband DFT. I. Definition, interpretations and extensions}}, ''Signal Processing'' '''41''': 261–277. |
|||
|0 |
|||
* H. V. Sorensen, D. L. Jones, M. T. Heideman, and C. S. Burrus, 1987, [http://ieeexplore.ieee.org/search/wrapper.jsp?arnumber=1165220 Real-valued fast Fourier transform algorithms], ''IEEE Trans. Acoust. Speech Sig. Processing'' '''ASSP-35''': 849–863. See also [http://ieeexplore.ieee.org/search/wrapper.jsp?arnumber=1165284 Corrections to "Real-valued fast Fourier transform algorithms"] |
|||
|4 |
|||
* Peter D. Welch, 1969, [http://ieeexplore.ieee.org/search/wrapper.jsp?arnumber=1162035 A fixed-point fast Fourier transform error analysis], ''IEEE Trans. Audio Electroacoustics'' '''17''': 151–157. |
|||
|12 |
|||
* S. Winograd, 1978, [http://www.jstor.org/view/00255718/di970565/97p0015m/0 On computing the discrete Fourier transform], ''Math. Computation'' '''32''': 175-199. |
|||
|8 |
|||
* Jian-Jiun Ding, Advanced Digital Signal Processing class note,the Department of Electrical Engineering, National Taiwan University (NTU), Taipei, Taiwan, 2007. |
|||
|25 |
|||
* E. O. Brigham, The Fast Fourier Transform,Prentice Hall,Englewood Cliffs,New Jersey,1974. |
|||
|148 |
|||
* E.O.布赖姆著,柳群译,快速富里叶变换,上海科学技术出版社,1979. |
|||
|40 |
|||
|100 |
|||
|- |
|||
|3 |
|||
|2 |
|||
|12 |
|||
|13 |
|||
|52 |
|||
|26 |
|||
|104 |
|||
|42 |
|||
|124 |
|||
|- |
|||
|4 |
|||
|0 |
|||
|16 |
|||
|14 |
|||
|32 |
|||
|27 |
|||
|114 |
|||
|44 |
|||
|160 |
|||
|- |
|||
|5 |
|||
|10 |
|||
|34 |
|||
|15 |
|||
|40 |
|||
|28 |
|||
|64 |
|||
|45 |
|||
|170 |
|||
|- |
|||
|6 |
|||
|4 |
|||
|36 |
|||
|16 |
|||
|20 |
|||
|30 |
|||
|80 |
|||
|48 |
|||
|92 |
|||
|- |
|||
|7 |
|||
|16 |
|||
|72 |
|||
|18 |
|||
|32 |
|||
|32 |
|||
|72 |
|||
|52 |
|||
|208 |
|||
|- |
|||
|8 |
|||
|4 |
|||
|52 |
|||
|20 |
|||
|40 |
|||
|33 |
|||
|160 |
|||
|54 |
|||
|228 |
|||
|- |
|||
|9 |
|||
|16 |
|||
|72 |
|||
|21 |
|||
|62 |
|||
|35 |
|||
|150 |
|||
|56 |
|||
|156 |
|||
|- |
|||
|10 |
|||
|20 |
|||
|88 |
|||
|22 |
|||
|80 |
|||
|36 |
|||
|64 |
|||
|60 |
|||
|160 |
|||
|} |
|||
N < 1000 |
|||
{| class="wikitable" |
|||
|N |
|||
|乘法數 |
|||
|N |
|||
|乘法數 |
|||
|N |
|||
|乘法數 |
|||
|N |
|||
|乘法數 |
|||
|- |
|||
|63 |
|||
|256 |
|||
|96 |
|||
|280 |
|||
|192 |
|||
|752 |
|||
|360 |
|||
|1540 |
|||
|- |
|||
|64 |
|||
|204 |
|||
|104 |
|||
|468 |
|||
|204 |
|||
|976 |
|||
|420 |
|||
|2080 |
|||
|- |
|||
|66 |
|||
|284 |
|||
|108 |
|||
|456 |
|||
|216 |
|||
|1020 |
|||
|480 |
|||
|2360 |
|||
|- |
|||
|70 |
|||
|300 |
|||
|112 |
|||
|396 |
|||
|224 |
|||
|1016 |
|||
|504 |
|||
|2300 |
|||
|- |
|||
|72 |
|||
|164 |
|||
|120 |
|||
|380 |
|||
|240 |
|||
|940 |
|||
|512 |
|||
|3180 |
|||
|- |
|||
|80 |
|||
|260 |
|||
|128 |
|||
|560 |
|||
|252 |
|||
|1024 |
|||
|560 |
|||
|3100 |
|||
|- |
|||
|81 |
|||
|480 |
|||
|144 |
|||
|436 |
|||
|256 |
|||
|1308 |
|||
|672 |
|||
|3496 |
|||
|- |
|||
|84 |
|||
|248 |
|||
|160 |
|||
|680 |
|||
|288 |
|||
|1160 |
|||
|720 |
|||
|3620 |
|||
|- |
|||
|88 |
|||
|412 |
|||
|168 |
|||
|580 |
|||
|312 |
|||
|1324 |
|||
|784 |
|||
|4412 |
|||
|- |
|||
|90 |
|||
|340 |
|||
|180 |
|||
|680 |
|||
|336 |
|||
|1412 |
|||
|840 |
|||
|4580 |
|||
|} |
|||
N > 1000 |
|||
{| class="wikitable" |
|||
|N |
|||
|乘法數 |
|||
|N |
|||
|乘法數 |
|||
|N |
|||
|乘法數 |
|||
|N |
|||
|乘法數 |
|||
|- |
|||
|1008 |
|||
|5356 |
|||
|1440 |
|||
|8680 |
|||
|2520 |
|||
|16540 |
|||
|4032 |
|||
|29488 |
|||
|- |
|||
|1024 |
|||
|7436 |
|||
|1680 |
|||
|10420 |
|||
|2688 |
|||
|19108 |
|||
|4096 |
|||
|37516 |
|||
|- |
|||
|1152 |
|||
|7088 |
|||
|2016 |
|||
|12728 |
|||
|2880 |
|||
|20060 |
|||
|4368 |
|||
|35828 |
|||
|- |
|||
|1260 |
|||
|7640 |
|||
|2048 |
|||
|16836 |
|||
|3369 |
|||
|24200 |
|||
|4608 |
|||
|36812 |
|||
|- |
|||
|1344 |
|||
|8252 |
|||
|2304 |
|||
|15868 |
|||
|3920 |
|||
|29900 |
|||
|5040 |
|||
|36860 |
|||
|} |
|||
== 参阅 == |
== 参阅 == |
||
* [[离散傅里叶变换]] |
* [[离散傅里叶变换]] |
||
* [[并行快速傅里叶变换]] |
* [[并行快速傅里叶变换]] |
||
* [[快速數論變換]] |
|||
== 参考资料 == |
|||
{{reflist|2}} |
|||
==延伸阅读== |
|||
{{refbegin|2}} |
|||
* {{cite journal |first1=N. |last1=Brenner |first2=C. |last2=Rader |year=1976 |title= A New Principle for Fast Fourier Transformation |journal=IEEE Acoustics, Speech & Signal Processing |volume=24 |issue=3 |doi=10.1109/TASSP.1976.1162805 |pages=264–266}} |
|||
* {{cite document |first=E. O. |last=Brigham |title=The Fast Fourier Transform |publication-place=New York |publisher=Prentice-Hall |date=2002}} |
|||
* {{cite book |first1=Thomas H. |last1=Cormen |author-link1=Thomas H. Cormen |first2=Charles E. |last2=Leiserson |author-link2=Charles E. Leiserson | first3=Ronald L. |last3=Rivest |author-link3=Ronald L. Rivest | first4=Clifford |last4=Stein |author-link4=Clifford Stein | date=2001 |title=Introduction to Algorithms |title-link=Introduction to Algorithms |edition=2 |publisher=MIT Press and McGraw-Hill |isbn=0-262-03293-7 |chapter=30. (Polynomials and the FFT)}} |
|||
* {{cite journal |first1=Pierre |last1=Duhamel |year=1990 |doi=10.1109/29.60070 |title=Algorithms meeting the lower bounds on the multiplicative complexity of length-2<sup>n</sup> DFTs and their connection with practical algorithms |journal=IEEE Trans. Acoust. Speech. Sig. Proc. |volume=38 |issue=9 |pages=1504–151}} |
|||
* {{cite journal |first1=P. |last1=Duhamel |first2=M. |last2=Vetterli |date=1990 |doi= 10.1016/0165-1684(90)90158-U |title=Fast Fourier transforms: a tutorial review and a state of the art |url=https://archive.org/details/sim_signal-processing_1990-11_21_3/page/259 |journal=Signal Processing |volume=19 |pages=259–299}} |
|||
* {{cite journal |first1=A. |last1=Edelman |first2=P. |last2=McCorquodale |first3=S. |last3=Toledo |date=1999 |doi=10.1137/S1064827597316266 |title=The Future Fast Fourier Transform? |journal=SIAM J. Sci. Computing |volume=20 |pages=1094–1114}} |
|||
* D. F. Elliott, & K. R. Rao, 1982, ''Fast transforms: Algorithms, analyses, applications''. New York: Academic Press. |
|||
* Funda Ergün, 1995, {{doi-inline|10.1145/225058.225167|Testing multivariate linear functions: Overcoming the generator bottleneck}}, ''Proc. 27th ACM Symposium on the Theory of Computing'': 407–416. |
|||
*{{cite journal |last1=Frigo |first1=M. |last2=Johnson |first2=S. G. |year=2005 |title=The Design and Implementation of FFTW3 |url=http://fftw.org/fftw-paper-ieee.pdf |format=PDF |journal=Proceedings of the IEEE |volume=93 |pages=216–231 |doi=10.1109/jproc.2004.840301 |access-date=2008-06-22 |archive-date=2019-07-16 |archive-url=https://web.archive.org/web/20190716053010/http://fftw.org/fftw-paper-ieee.pdf |dead-url=no }} |
|||
* H. Guo and C. S. Burrus, 1996, {{doi-inline|10.1117/12.255236|Fast approximate Fourier transform via wavelets transform}}, ''Proc. SPIE Intl. Soc. Opt. Eng.'' '''2825''': 250–259. |
|||
* H. Guo, G. A. Sitton, C. S. Burrus, 1994, {{doi-inline|10.1109/ICASSP.1994.389994|The Quick Discrete Fourier Transform}}, ''Proc. IEEE Conf. Acoust. Speech and Sig. Processing (ICASSP)'' '''3''': 445–448. |
|||
* Steve Haynal and Heidi Haynal, "[https://web.archive.org/web/20120426031804/http://jsat.ewi.tudelft.nl/content/volume7/JSAT7_13_Haynal.pdf Generating and Searching Families of FFT Algorithms]", ''Journal on Satisfiability, Boolean Modeling and Computation'' vol. 7, pp. 145–187 (2011). |
|||
* {{cite journal |first1=Michael T. |last1=Heideman |first2=C. Sidney |last2=Burrus |year=1986 |doi=10.1109/TASSP.1986.1164785 |title=On the number of multiplications necessary to compute a length-2<sup>n</sup> DFT |journal=IEEE Trans. Acoust. Speech. Sig. Proc. |volume=34 |issue=1 |pages=91–95}} |
|||
* {{cite journal |last1=Johnson |first1=S. G. |last2=Frigo |first2=M. |year=2007 |title=A modified split-radix FFT with fewer arithmetic operations |url=http://www.fftw.org/newsplit.pdf |format=PDF |journal=IEEE Trans. Signal Processing |volume=55 |issue=1 |pages=111–119 |doi=10.1109/tsp.2006.882087 |access-date=2008-06-22 |archive-date=2021-02-25 |archive-url=https://web.archive.org/web/20210225225026/http://www.fftw.org/newsplit.pdf |dead-url=no }} |
|||
* T. Lundy and J. Van Buskirk, 2007. "A new matrix approach to real FFTs and convolutions of length 2<sup>k</sup>," ''Computing'' '''80''' (1): 23–45. |
|||
*Kent, Ray D. and Read, Charles (2002). ''Acoustic Analysis of Speech''. ISBN 978-0-7693-0112-9. Cites Strang, G. (1994)/May–June). Wavelets. ''American Scientist, 82,'' 250–255. |
|||
* {{cite journal |first1=Jacques |last1=Morgenstern |year=1973 |doi=10.1145/321752.321761 |title=Note on a lower bound of the linear complexity of the fast Fourier transform |journal=J. ACM |volume=20 |issue=2 |pages=305–306}} |
|||
* {{cite journal |doi=10.1007/BF01261607 |first1=M. J. |last1=Mohlenkamp |year=1999 |title=A fast transform for spherical harmonics |journal=J. Fourier Anal. Appl. |volume=5 |issue=2–3 |pages=159–184 |url=http://www.math.ohiou.edu/~mjm/research/MOHLEN1999P.pdf |deadurl=yes |archiveurl=https://web.archive.org/web/20070206134937/http://www.math.ohiou.edu/~mjm/research/MOHLEN1999P.pdf |archivedate=2007年2月6日 |df= }} |
|||
* {{cite journal |first1=H. J. |last1=Nussbaumer |year=1977 |doi=10.1049/el:19770280 |title=Digital filtering using polynomial transforms |journal=Electronics Lett. |volume=13 |issue=13 |pages=386–387}} |
|||
* V. Pan, 1986, {{doi-inline|10.1016/0020-0190(86)90035-9|The trade-off between the additive complexity and the asyncronicity of linear and bilinear algorithms}}, ''Information Proc. Lett.'' '''22''': 11–14. |
|||
* Christos H. Papadimitriou, 1979, {{doi-inline|10.1145/322108.322118|Optimality of the fast Fourier transform}}, ''J. ACM'' '''26''': 95–102. |
|||
* D. Potts, G. Steidl, and M. Tasche, 2001. "[http://www.tu-chemnitz.de/~potts/paper/ndft.pdf Fast Fourier transforms for nonequispaced data: A tutorial] {{Wayback|url=http://www.tu-chemnitz.de/~potts/paper/ndft.pdf |date=20070926222858 }}", in: J.J. Benedetto and P. Ferreira (Eds.), ''Modern Sampling Theory: Mathematics and Applications'' (Birkhauser). |
|||
*{{Citation |last1=Press |first1=W.H. |last2=Teukolsky |first2=S.A. |last3=Vetterling |first3=W.T. |last4=Flannery |first4=B.P. |year=2007 |title=Numerical Recipes: The Art of Scientific Computing |edition=3 |publisher=Cambridge University Press |publication-place=New York |isbn=978-0-521-88068-8 |chapter=Chapter 12. Fast Fourier Transform |chapter-url=http://apps.nrbook.com/empanel/index.html#pg=600 |accessdate=2015-12-11 |archive-date=2011-08-11 |archive-url=https://web.archive.org/web/20110811154417/http://apps.nrbook.com/empanel/index.html#pg=600 |dead-url=no }} |
|||
* {{cite journal |first1=Vladimir |last1=Rokhlin |first2=Mark |last2=Tygert |year=2006 |title=Fast algorithms for spherical harmonic expansions |journal=SIAM J. Sci. Computing |volume=27 |issue=6 |doi=10.1137/050623073 |pages=1903–1928}} |
|||
* {{cite journal |last1=Schatzman |first1=James C. |year=1996 |title=Accuracy of the discrete Fourier transform and the fast Fourier transform |url=http://portal.acm.org/citation.cfm?id=240432 |journal=SIAM J. Sci. Comput |volume=17 |pages=1150–1166 |doi=10.1137/s1064827593247023}} |
|||
* {{cite journal |first1=O. V. |last1=Shentov |first2=S. K. |last2=Mitra |first3=U. |last3=Heute |first4=A. N. |last4=Hossen |year=1995 |doi=10.1016/0165-1684(94)00103-7 |title=Subband DFT. I. Definition, interpretations and extensions |url=https://archive.org/details/sim_signal-processing_1995-02_41_3/page/261 |journal=Signal Processing |volume=41 |issue=3 |pages=261–277}} |
|||
* {{cite journal |first1=H. V. |last1=Sorensen |first2=D. L. |last2=Jones |first3=M. T. |last3=Heideman |first4=C. S. |last4=Burrus |year=1987 |doi=10.1109/TASSP.1987.1165220 |title=Real-valued fast Fourier transform algorithms |journal=IEEE Trans. Acoust. Speech Sig. Processing |volume=35 |issue=35 |pages=849–863}} See also {{cite journal|doi=10.1109/TASSP.1987.1165284|last1=Sorensen|first1=H.|year=1987|pages=1353–1353|issue=9|volume=35|last2=Jones|journal=IEEE Transactions on Acoustics, Speech, and Signal Processing|first2=D.|last3=Heideman|first3=M.|last4=Burrus|first4=C.|title=Corrections to "Real-valued fast Fourier transform algorithms"}} |
|||
* {{cite journal |first1=Peter D. |last1=Welch |year=1969 |doi=10.1109/TAU.1969.1162035 |title=A fixed-point fast Fourier transform error analysis |journal=IEEE Trans. Audio Electroacoustics |volume=17 |issue=2 |pages=151–157}} |
|||
* {{cite journal |first1=S. |last1=Winograd |year=1978 |doi=10.1090/S0025-5718-1978-0468306-4 |title=On computing the discrete Fourier transform |journal=Math. Computation |volume=32 |issue=141 |pages=175–199 |jstor=2006266}} |
|||
{{refend}} |
|||
{{规范控制}} |
|||
[[Category:数字信号处理]] |
[[Category:数字信号处理]] |
||
[[Category:变换编码]] |
[[Category:变换编码]] |
||
[[分类:数学术语]] |
|||
[[Category:傅里叶变换]] |
[[Category:傅里叶变换]] |
||
[[Category:计算机科学中未解决的问题]] |
2024年12月24日 (二) 14:03的最新版本
快速傅里叶变换(英語:Fast Fourier Transform, FFT),是快速计算序列的离散傅里叶变换(DFT)或其逆变换的方法[1]。傅里叶分析将信号从原始域(通常是时间或空间)转换到頻域的表示或者逆过来转换。FFT会通过把DFT矩阵分解为稀疏(大多为零)因子之积来快速计算此类变换。[2] 因此,它能够将计算DFT的复杂度从只用DFT定义计算需要的 ,降低到 ,其中 为数据大小。
快速傅里叶变换广泛的应用于工程、科学和数学领域。这里的基本思想在1965年才得到普及,但早在1805年就已推导出来。[3] 1994年美國數學家吉爾伯特·斯特朗把FFT描述为“我们一生中最重要的数值算法”[4],它还被IEEE科学与工程计算期刊列入20世纪十大算法。[5]
定义和速度
[编辑]用FFT计算DFT会得到与直接用DFT定义计算相同的结果;最重要的区别是FFT更快。(由于捨入誤差的存在,许多FFT算法还会比直接运用定义求值精确很多,后面会讨论到这一点。)
令 x0, ...., xN-1 為复数。DFT由下式定义
直接按这个定义求值需要 O(N2) 次运算:Xk 共有 N 个输出,每个输出需要 N 项求和。直接使用DFT運算需使用N個複數乘法(4N 個實數乘法)與N-1個複數加法(2N-2個實數加法),因此,計算使用DFT所有N點的值需要N2複數乘法與N2-N 個複數加法。FFT则是能够在 O(N log N) 次操作计算出相同结果的任何方法。更准确的说,所有已知的FFT算法都需要 O(N log N) 次运算(技术上O只标记上界),虽然还没有已知的证据证明更低的复杂度是不可能的。[6]
要说明FFT节省时间的方式,就得考虑复数相乘和相加的次数。直接计算DFT的值涉及到 N2 次复数相乘和 N(N−1) 次复数相加(可以通过削去琐碎运算(如乘以1)来节省 O(N) 次运算)。众所周知的基2库利-图基算法,N 为2的幂,可以只用 (N/2)log2(N) 次复数乘法(再次忽略乘以1的简化)和 Nlog2(N) 次加法就可以得到相同结果。在实际中,现代计算机通常的实际性能通常不受算术运算的速度和对复杂主体的分析主导[7],但是从 O(N2) 到 O(N log N) 的总体改进仍然能够体现出来。
一般的簡化理論
[编辑]假設一個M*N型矩阵S可分解成列向量以及行向量相乘:
若有個相異的非平凡值( where )
有個相異的非平凡值
則S共需要個乘法。
Step 1:
Step 2:
簡化理論的變型:
也是一個M*N的矩陣。
若有個值不等於0,則的乘法量上限為。
快速傅立葉變換乘法量的計算
[编辑]假設,其中彼此互質
點DFT的乘法量為,則點DFT的乘法量為:
假設,P是一個質數。
若點的DFT需要的乘法量為
且當中()
有個值不為及的倍數,
有個值為及的倍數,但不為的倍數,
則N點DFT的乘法量為:
库利-图基算法
[编辑]库利-图基算法是最常见的FFT算法。这一方法以分治法为策略递归地将长度为的离散傅里叶变换分解为长度为的个较短序列的离散傅里叶变换,以及与个旋转因子的复数乘法。
这种方法以及FFT的基本思路在1965年J. W. Cooley和J. W. Tukey合作发表An algorithm for the machine calculation of complex Fourier series之后开始为人所知。但后来发现,实际上这两位作者只是重新发明了高斯在1805年就已经提出的算法(此算法在历史上数次以各种形式被再次提出)。
库利-图基算法最有名的应用,是将序列长为N 的DFT分割为两个长为N/2 的子序列的DFT,因此这一应用只适用于序列长度为2的幂的DFT计算,即基2-FFT。实际上,如同高斯和Cooley与Tukey都指出的那样,Cooley-Tukey算法也可以用于序列长度N 为任意因数分解形式的DFT,即混合基FFT,而且还可以应用于其他诸如分裂基FFT等变种。尽管Cooley-Tukey算法的基本思路是采用递归的方法进行计算,大多数传统的算法实现都将显式的递归算法改写为非递归的形式。另外,因为Cooley-Tukey算法是将DFT分解为较小长度的多个DFT,因此它可以同任一种其他的DFT算法联合使用。
设计思想
[编辑]下面,我们用N次单位根来表示。
的性质:
- 周期性,具有周期,即
- 对称性:。
- 若是的约数,
为了简单起见,我们下面设待变换序列长度。根据上面单位根的对称性,求级数时,可以将求和区间分为两部分:
和是两个分别关于序列奇数号和偶数号序列N/2点变换。由此式只需计算出的前N/2个点,对于后N/2个点可以通过复指数函数的对称性快速求解。即,注意和都是周期为N/2的函数,由单位根的对称性,有以下变换公式:
- 。
这样,一个N点变换就分解成了两个N/2点变换。照这样可继续分解下去。这就是库利-图基快速傅里叶变换算法的基本原理。根据主定理不难分析出此时算法的时间复杂度为
算法实现
[编辑]- 蝶形结网络和位反转(Bit Reversal):
- 首先将个输入点列按二进制进行编号,然后对各个编号按位倒置并按此重新排序。例如,对于一个8点变换,
- 001倒置以后变成 100
- 000 → 000
- 001 → 100
- 010 → 010
- 011 → 110
- 100 → 001
- 101 → 101
- 110 → 011
- 111 → 111
- 倒置后的编号为{0,4,2,6,1,5,3,7}。
- 然后将这n个点列作为输入传送到蝶形结网络中,注意将因子逐层加入到蝶形网络中。
算法复杂度
[编辑]由于按蝶形结网络计算n点变换要进行log n层计算,每层计算n个点的变换,故算法的时间复杂度为。
其他算法
[编辑]在Cooley-Tukey算法之外还有其他DFT的快速演算法。对于长度且与互质的序列,可以采用基于中国剩余定理的互质因子算法将N长序列的DFT分解为两个子序列的DFT。与Cooley-Tukey算法不同的是,互质因子算法不需要旋转因子。
Rader-Brenner算法是类似于Cooley-Tukey算法,但是采用的旋转因子都是纯虚数,以增加加法运算和降低了数值稳定性为代价减少了乘法运算。这方法之后被split-radix variant of Cooley-Tukey所取代,与Rader-Brenner演算法相比,有一样多的乘法量,却有较少的加法量,且不牺牲数值的准确性。
Bruun以及QFT演算法是不断的把DFT分成许多较小的DFT运算。(Rader-Brenner以及QFT演算法是为了2的指数所设计的演算法,但依然可以适用在可分解的整数上。Bruun演算法则可以运用在可被分成偶数个运算的数字)。尤其是Bruun演算法,把FFT看成是,并把它分解成与的形式。
另一个从多项式观点的快速傅立叶变换法是Winograd算法。此演算法把分解成cyclotomic多项式,而这些多项式的系数通常为1,0,-1。这样只需要很少的乘法量(如果有需要的话),所以winograd是可以得到最少乘法量的快速傅立叶演算法,对于较小的数字,可以找出有效率的算方式。更精确地说,winograd演算法让DFT可以用点的DFT来简化,但减少乘法量的同时,也增加了非常多的加法量。Winograd也可以利用剩余值定理来简化DFT。
Rader演算法提出了利用点数为N(N为质数)的DFT进行长度为N-1的回旋摺积来表示原本的DFT,如此就可利用摺积用一对基本的FFT来计算DFT。另一个prime-size的FFT演算法为chirp-Z演算法。此法也是将DFT用摺积来表示,此法与Rader演算法相比,能运用在更一般的转换上,其转换的基础为Z转换(Rabiner et al., 1969)。
实数或对称资料专用的演算法
[编辑]在许多的运用当中,要进行DFT的资料是纯实数,如此一来经过DFT的结果会满足对称性:
- =
而有一些演算法是专门为这种情形设计的(e.g. Sorensen, 1987)。另一些则是利用旧有的演算法(e.g. Cooley-Tukey),删去一些不必要的演算步骤,如此省下了记忆体的使用,也省下了时间。另一方面,也可以把一个偶数长度且纯实数的DFT,用长度为原本一半的复数型态DFT来表示(实数项为原本纯实数资料的偶数项,虚数项则为奇数项)。
在Matlab上用一次N點FFT計算兩個N點實數信號x,y的FFT:
function [X,Y] = Real2FFT( x,y )
% N-point FFT is used for 2 real signals both with length N
N = length(x);
z = x+y*i ;
Z = fft(z);
X = 0.5*(Z+conj(Z(1+mod(0:-1:1-N,N))));
Y = 0.5*(Z-conj(Z(1+mod(0:-1:1-N,N))))/i;
end
一度人们认为,用离散哈特利转换(Discrete Hartley Transform)来处理纯实数的DFT会更有效率,但接着人们发现,对于同样点数的纯实数DFT,经过设计的FFT,可以比DHT省下更多的运算。Bruun演算法是第一个试着从减少实数输入的DFT运算量的演算法,但此法并没有成为人们普遍使用的方法。
对于实数输入,且输入为偶对称或奇对称的情形,可以更进一步的省下时间以及记忆体,此时DFT可以用离散余弦转换或离散正弦转换来代替(Discrete cosine/sine transforms)。由于DCT/DST也可以设计出FFT的演算法,故在此种情形下,此方法取代了对DFT设计的FFT演算法。
DFT可以应用在频谱分析以及做摺积的运算,而在此处,不同应用可以用不同的演算法来取代,列表如下:
用来做频谱分析的情况下,DFT可用下列的演算法代替:
- DCT
- DST
- DHT
- 正交基底的扩展(orthogonal basis expantion)包括正交多项式(orthogonal polynomials)以及CDMA.
- Walsh(Hadamard)转换
- Haar转换
- 小波(wavelet)转换
- 时频分布(time-frequency distribution)
用来做摺积的情况下,DFT可用下列的演算法代替:
- DCT
- DST
- DHT
- 直接做摺积(direct computing)
- 分段式DFT摺积(sectioned DFT convolution)
- 威諾格拉德快速傅立葉變換演算法
- 沃尔什(Walsh、Hadamard)转换
- 数论转换
單一路徑延遲迴授系統
[编辑]單一路徑延遲迴授系統(英語:Single-path delay feedback,縮寫為SDF)是一種用於實現快速傅立葉轉換(Fast Fourier Transform)中運算的管線式架構(pipeline architecture)。此架構的特點是資料從輸入一直到最終的輸出只會通過單一的路徑,並使用蝶形結(butterfly diagram)做為資料的運算單元。經過蝶形結後的輸出資料會先暫存在系統的移位暫存器(shift registers)或是隨機存取記憶體(RAM)當中,而由於只有單一路徑的關係,對於每一級的蝶形結架構我們只需要一個複數乘法器來進行和FFT當中的旋轉因子(twiddle factor)的乘積運算。[8]
SDF的優點在於其架構簡單並且利用硬體實現的成本較低,原因在於其單一路徑的設計,使得資料會依序進行處理並輸出,並不會在系統中加入多個複雜的運算單元以進行平行化的運算,事實上SDF的架構在管線式快速傅立葉轉換處理器(pipelined FFT processors)中具有最高的記憶體使用效率,而由於記憶體單元數量會隨快速傅立葉轉換的級數而指數增長,記憶體使用效率進而成為影響電路面積和功耗的主要因素之一。因此在實作大型快速傅立葉轉換處理器的情況下,SDF架構一直是被優先考量採用的選擇。然而其缺點也同樣來自於單一路徑的設計,導致其吞吐量(throughput)和多路徑延遲交換線路系統(英語:Multiple-path delay commutator,縮寫為MDC)相比較低。
接著我們將以8個點的基-2單一路徑延遲迴授系統(8-point R2SDF)為例進行其演算法細節的介紹,並且展示在硬體實作中每一個cycle的運算和中間結果的存儲位置。
首先考慮系統輸入為x0, x1, ..., x7,並在前8個cycle依序輸入。
- Cycle 0~3: x0~x3依序存入第一級BF-2上方的暫存器中。
- Cycle 4: x0和x4輸入第一級BF-2後輸出x0'和x4',x0'存入第二級BF-2上方的暫存器中,x4'存入第一級BF-2上方的暫存器中。
- Cycle 5: x1和x5輸入第一級BF-2後輸出x1'和x5',x1'存入第二級BF-2上方的暫存器中,x5'存入第一級BF-2上方的暫存器中。
- Cycle 6: x2和x6輸入第一級BF-2後輸出x2'和x6',x6'存入第一級BF-2上方的暫存器中,x0'和x2'輸入第二級BF-2後輸出x0''和x2'',x0''存入第三級BF-2上方的暫存器中,x2''存入第二級BF-2上方的暫存器中。
- Cycle 7: x3和x7輸入第一級BF-2後輸出x3'和x7',x7'存入第一級BF-2上方的暫存器中,x1'和x3'輸入第二級BF-2後輸出x1''和x3'',x3''存入第二級BF-2上方的暫存器中,x0''和x1''輸入第三級BF-2後輸出x0'''和x1''',x0'''直接輸出,x1'''存入第三級BF-2上方的暫存器中。(此為第一筆輸出,此後每一個cycle皆會輸出一筆資料。)
- Cycle 8: x4'乘上W0後存入第二級BF-2上方的暫存器中,x2''乘上W0後存入第三級BF-2上方的暫存器中,x1'''直接輸出。
- Cycle 9: x5'乘上W1後存入第二級BF-2上方的暫存器中,x3''乘上W2後和x2''輸入第三級BF-2後輸出x2'''和x3''', x2'''直接輸出,x3'''存入第三級BF-2上方的暫存器中。
- Cycle 10: x6'乘上W2後和x4'輸入第二級BF-2後輸出x4''和x6'',x6''存入第二級BF-2上方的暫存器中,x4''存入第三級BF-2上方的暫存器中,x3'''直接輸出。
- Cycle 11: x7'乘上W3後和x5'輸入第二級BF-2後輸出x5''和x7'',x7''存入第二級BF-2上方的暫存器中,x4''和x5''輸入第三級BF-2後輸出x4'''和x5''',x4'''直接輸出,x5'''存入第三級BF-2上方的暫存器中。
- Cycle 12: x6''乘上W0後存入第三級BF-2上方的暫存器中,x5'''直接輸出。
- Cycle 13: x7''乘上W2後和x6''輸入第三級BF-2後輸出x6'''和x7''',x6'''直接輸出,x7'''存入第三級BF-2上方的暫存器中。
- Cycle 14: x7'''直接輸出。(此為最後一筆輸出。)
此外,我們可以在蝶形結中的加法器和乘法器加上額外的暫存器(register)來降低系統的關鍵路徑(critical path),來避免某些時刻不同級之間的繁重運算必須擠在同一個cycle中運算完成,進而嚴重影響整體電路在timing上的表現。但如此的管線式設計(pipeline design)也會增加整體電路的延遲(latency)和暫存器使用量。
相似架構之硬體實作比較
[编辑]- Radix-2 SDF: 2(log4N-1) 個乘法器、4log4N 個加法器、記憶體大小為 N-1。
- Radix-4 SDF: log4N-1 個乘法器、8log4N 個加法器、記憶體大小為 N-1。
- Radix-22 SDF: log4N-1 個乘法器、4log4N 個加法器、記憶體大小為 N-1。
- Radix-2 MDC: 2(log4N-1) 個乘法器、4log4N 個加法器、記憶體大小為 1.5N-2。
- Radix-4 MDC: 3(log4N-1) 個乘法器、8log4N 個加法器、記憶體大小為 2.5N-4。
- Radix-4 SDC: log4N-1 個乘法器、3log4N 個加法器、記憶體大小為 2N-2。
複雜度以及運算量的極限
[编辑]長久以來,人們對於求出快速傅立葉變換的複雜度下限以及需要多少的運算量感到很有興趣,而實際上也還有許多問題需要解決。即使是用較簡單的情形,即點的DFT,也還沒能夠嚴謹的證明出FFT至少需要(不比小)的運算量,目前也沒有發現複雜度更低的演算法。通常數學運算量的多寡會是運算效率好壞最主要的因素,但在現實中,有許多因素也會有很大的影響,如快取記憶體以及CPU均有很大的影響。
在1978年,Winograd率先導出一個較嚴謹的FFT所需乘法量的下限:。當時,DFT只需要次無理實數的乘法即可以計算出來。更詳盡,且也能趨近此下限的演算法也一一被提出(Heideman & Burrus, 1986; Duhamel, 1990)。很可惜的是,這些演算法,都需要很大量的加法計算,目前的硬體無法克服這個問題。
對於所需加法量的數目,雖然我們可以在某些受限制的假設下,推得其下限,但目前並沒有一個精確的下限被推導出來。1973年,Morgenstern在乘法常數趨近巨大的情形下(對大部分的FFT演算法為真,但不是全部)推導出加法量的下限:。Pan(1986)在假設FFT演算法的不同步的情形有其極限下證明出加法量的下限,但一般來說,此假設相當的不明確。長度為的情形下,在某些假設下,Papadimitriou(1979)提出使用Cooley-Tukey演算法所需的複數加法量是最少的。到目前為止,在長度為情況,還沒有任何FFT的演算法可以讓複數的加法量比還少。
還有一個問題是如何把乘法量與加法量的總和最小化,有時候稱作"演算複雜度"(在這裡考慮的是實際的運算量,而不是漸近複雜度)。同樣的,沒有一個嚴謹下限被證明出來。從1968年開始,點DFT而言,split-radix FFT演算法需要最少的運算量,在的情形下,其需要個乘法運算以及加法運算。最近有人導出更低的運算量:。(Johnson and Frigo, 2007; Lundy and Van Buskirk, 2007)
大多數嘗試要降低或者證明FFT複雜度下限的人都把焦點放在複數資料輸入的情況,因其為最簡單的情形。但是,複數資料輸入的FFT演算法,與實數資料輸入的FFT演算法,離散餘弦轉換(DCT),離散哈特列轉換(DHT),以及其他的演算法,均有很大的關連性。故任何一個演算法,在複雜度上有任何的改善的話,其他的演算法複雜度也會馬上獲得改善(Duhamel & Vetterli, 1990)。
快速演算法查表
[编辑]當輸入信號長度為N時:
N = 1~60
N | 乘法數 | 加法數 | N | 乘法數 | N | 乘法數 | N | 乘法數 |
1 | 0 | 0 | 11 | 46 | 24 | 28 | 39 | 182 |
2 | 0 | 4 | 12 | 8 | 25 | 148 | 40 | 100 |
3 | 2 | 12 | 13 | 52 | 26 | 104 | 42 | 124 |
4 | 0 | 16 | 14 | 32 | 27 | 114 | 44 | 160 |
5 | 10 | 34 | 15 | 40 | 28 | 64 | 45 | 170 |
6 | 4 | 36 | 16 | 20 | 30 | 80 | 48 | 92 |
7 | 16 | 72 | 18 | 32 | 32 | 72 | 52 | 208 |
8 | 4 | 52 | 20 | 40 | 33 | 160 | 54 | 228 |
9 | 16 | 72 | 21 | 62 | 35 | 150 | 56 | 156 |
10 | 20 | 88 | 22 | 80 | 36 | 64 | 60 | 160 |
N < 1000
N | 乘法數 | N | 乘法數 | N | 乘法數 | N | 乘法數 |
63 | 256 | 96 | 280 | 192 | 752 | 360 | 1540 |
64 | 204 | 104 | 468 | 204 | 976 | 420 | 2080 |
66 | 284 | 108 | 456 | 216 | 1020 | 480 | 2360 |
70 | 300 | 112 | 396 | 224 | 1016 | 504 | 2300 |
72 | 164 | 120 | 380 | 240 | 940 | 512 | 3180 |
80 | 260 | 128 | 560 | 252 | 1024 | 560 | 3100 |
81 | 480 | 144 | 436 | 256 | 1308 | 672 | 3496 |
84 | 248 | 160 | 680 | 288 | 1160 | 720 | 3620 |
88 | 412 | 168 | 580 | 312 | 1324 | 784 | 4412 |
90 | 340 | 180 | 680 | 336 | 1412 | 840 | 4580 |
N > 1000
N | 乘法數 | N | 乘法數 | N | 乘法數 | N | 乘法數 |
1008 | 5356 | 1440 | 8680 | 2520 | 16540 | 4032 | 29488 |
1024 | 7436 | 1680 | 10420 | 2688 | 19108 | 4096 | 37516 |
1152 | 7088 | 2016 | 12728 | 2880 | 20060 | 4368 | 35828 |
1260 | 7640 | 2048 | 16836 | 3369 | 24200 | 4608 | 36812 |
1344 | 8252 | 2304 | 15868 | 3920 | 29900 | 5040 | 36860 |
参阅
[编辑]参考资料
[编辑]- ^ 杨毅明. 数字信号处理(第2版). 北京: 机械工业出版社. 2017年: 第95页. ISBN 9787111576235.
- ^ Charles Van Loan, Computational Frameworks for the Fast Fourier Transform (SIAM, 1992).
- ^ Heideman, M. T.; Johnson, D. H.; Burrus, C. S. Gauss and the history of the fast Fourier transform. IEEE ASSP Magazine. 1984, 1 (4): 14–21. doi:10.1109/MASSP.1984.1162257.
- ^ Strang, Gilbert. Wavelets. American Scientist. May–June 1994, 82 (3): 253. JSTOR 29775194.
- ^ Dongarra, J.; Sullivan, F. Guest Editors Introduction to the top 10 algorithms. Computing in Science Engineering. January 2000, 2 (1): 22–23. ISSN 1521-9615. doi:10.1109/MCISE.2000.814652.
- ^ Johnson and Frigo, 2007
- ^ Frigo & Johnson, 2005
- ^ Shousheng He; Torkelson, M. A new approach to pipeline FFT processor. IEEE Comput. Soc. Press. 1996. ISBN 978-0-8186-7255-2. doi:10.1109/IPPS.1996.508145.
延伸阅读
[编辑]- Brenner, N.; Rader, C. A New Principle for Fast Fourier Transformation. IEEE Acoustics, Speech & Signal Processing. 1976, 24 (3): 264–266. doi:10.1109/TASSP.1976.1162805.
- Brigham, E. O. The Fast Fourier Transform. New York: Prentice-Hall. 2002.
- Cormen, Thomas H.; Leiserson, Charles E.; Rivest, Ronald L.; Stein, Clifford. 30. (Polynomials and the FFT). Introduction to Algorithms 2. MIT Press and McGraw-Hill. 2001. ISBN 0-262-03293-7.
- Duhamel, Pierre. Algorithms meeting the lower bounds on the multiplicative complexity of length-2n DFTs and their connection with practical algorithms. IEEE Trans. Acoust. Speech. Sig. Proc. 1990, 38 (9): 1504–151. doi:10.1109/29.60070.
- Duhamel, P.; Vetterli, M. Fast Fourier transforms: a tutorial review and a state of the art. Signal Processing. 1990, 19: 259–299. doi:10.1016/0165-1684(90)90158-U.
- Edelman, A.; McCorquodale, P.; Toledo, S. The Future Fast Fourier Transform?. SIAM J. Sci. Computing. 1999, 20: 1094–1114. doi:10.1137/S1064827597316266.
- D. F. Elliott, & K. R. Rao, 1982, Fast transforms: Algorithms, analyses, applications. New York: Academic Press.
- Funda Ergün, 1995, , Proc. 27th ACM Symposium on the Theory of Computing: 407–416.
- Frigo, M.; Johnson, S. G. The Design and Implementation of FFTW3 (PDF). Proceedings of the IEEE. 2005, 93: 216–231 [2008-06-22]. doi:10.1109/jproc.2004.840301. (原始内容存档 (PDF)于2019-07-16).
- H. Guo and C. S. Burrus, 1996, , Proc. SPIE Intl. Soc. Opt. Eng. 2825: 250–259.
- H. Guo, G. A. Sitton, C. S. Burrus, 1994, , Proc. IEEE Conf. Acoust. Speech and Sig. Processing (ICASSP) 3: 445–448.
- Steve Haynal and Heidi Haynal, "Generating and Searching Families of FFT Algorithms", Journal on Satisfiability, Boolean Modeling and Computation vol. 7, pp. 145–187 (2011).
- Heideman, Michael T.; Burrus, C. Sidney. On the number of multiplications necessary to compute a length-2n DFT. IEEE Trans. Acoust. Speech. Sig. Proc. 1986, 34 (1): 91–95. doi:10.1109/TASSP.1986.1164785.
- Johnson, S. G.; Frigo, M. A modified split-radix FFT with fewer arithmetic operations (PDF). IEEE Trans. Signal Processing. 2007, 55 (1): 111–119 [2008-06-22]. doi:10.1109/tsp.2006.882087. (原始内容存档 (PDF)于2021-02-25).
- T. Lundy and J. Van Buskirk, 2007. "A new matrix approach to real FFTs and convolutions of length 2k," Computing 80 (1): 23–45.
- Kent, Ray D. and Read, Charles (2002). Acoustic Analysis of Speech. ISBN 978-0-7693-0112-9. Cites Strang, G. (1994)/May–June). Wavelets. American Scientist, 82, 250–255.
- Morgenstern, Jacques. Note on a lower bound of the linear complexity of the fast Fourier transform. J. ACM. 1973, 20 (2): 305–306. doi:10.1145/321752.321761.
- Mohlenkamp, M. J. A fast transform for spherical harmonics (PDF). J. Fourier Anal. Appl. 1999, 5 (2–3): 159–184. doi:10.1007/BF01261607. (原始内容 (PDF)存档于2007年2月6日).
- Nussbaumer, H. J. Digital filtering using polynomial transforms. Electronics Lett. 1977, 13 (13): 386–387. doi:10.1049/el:19770280.
- V. Pan, 1986, , Information Proc. Lett. 22: 11–14.
- Christos H. Papadimitriou, 1979, , J. ACM 26: 95–102.
- D. Potts, G. Steidl, and M. Tasche, 2001. "Fast Fourier transforms for nonequispaced data: A tutorial (页面存档备份,存于互联网档案馆)", in: J.J. Benedetto and P. Ferreira (Eds.), Modern Sampling Theory: Mathematics and Applications (Birkhauser).
- Press, W.H.; Teukolsky, S.A.; Vetterling, W.T.; Flannery, B.P., Chapter 12. Fast Fourier Transform, Numerical Recipes: The Art of Scientific Computing 3, New York: Cambridge University Press, 2007 [2015-12-11], ISBN 978-0-521-88068-8, (原始内容存档于2011-08-11)
- Rokhlin, Vladimir; Tygert, Mark. Fast algorithms for spherical harmonic expansions. SIAM J. Sci. Computing. 2006, 27 (6): 1903–1928. doi:10.1137/050623073.
- Schatzman, James C. Accuracy of the discrete Fourier transform and the fast Fourier transform. SIAM J. Sci. Comput. 1996, 17: 1150–1166. doi:10.1137/s1064827593247023.
- Shentov, O. V.; Mitra, S. K.; Heute, U.; Hossen, A. N. Subband DFT. I. Definition, interpretations and extensions. Signal Processing. 1995, 41 (3): 261–277. doi:10.1016/0165-1684(94)00103-7.
- Sorensen, H. V.; Jones, D. L.; Heideman, M. T.; Burrus, C. S. Real-valued fast Fourier transform algorithms. IEEE Trans. Acoust. Speech Sig. Processing. 1987, 35 (35): 849–863. doi:10.1109/TASSP.1987.1165220. See also Sorensen, H.; Jones, D.; Heideman, M.; Burrus, C. Corrections to "Real-valued fast Fourier transform algorithms". IEEE Transactions on Acoustics, Speech, and Signal Processing. 1987, 35 (9): 1353–1353. doi:10.1109/TASSP.1987.1165284.
- Welch, Peter D. A fixed-point fast Fourier transform error analysis. IEEE Trans. Audio Electroacoustics. 1969, 17 (2): 151–157. doi:10.1109/TAU.1969.1162035.
- Winograd, S. On computing the discrete Fourier transform. Math. Computation. 1978, 32 (141): 175–199. JSTOR 2006266. doi:10.1090/S0025-5718-1978-0468306-4.