基于FPGA的ARM圖像縮放器的實(shí)現

3 FPGA內部模塊工作原理

3.1輸入時(shí)序控制模塊與輸出時(shí)序控制模塊

輸入時(shí)序控制模塊是根據輸入視頻信號的同步信號和時(shí)序要求，確保有效的圖像數據能夠順利寫(xiě)入FIFO進(jìn)行緩存。例如當模塊接收到場(chǎng)同步信號時(shí)，FIFO進(jìn)入即將寫(xiě)入的狀態(tài)，當模塊接收到使能信號時(shí)， FIFO開(kāi)始寫(xiě)入數據，這樣能確保寫(xiě)入FIFO的數據是從完整1幀圖像的起始開(kāi)始寫(xiě)入。

輸出時(shí)序控制模塊的功能是產(chǎn)生輸出圖像所必需的同步信號、場(chǎng)同步信號和行同步信號，以保證輸出圖像的數據與時(shí)序一致，從而使圖像可以正確地顯示在顯示器上。

輸入輸出時(shí)序控制模塊，按照計數器的方法進(jìn)行設計[2]。例如VGA信號的1幀圖像的總像素要求為800×525，其中有效像素為640×480。對于行掃描來(lái)說(shuō)可設置1~96像素時(shí)鐘計數為行同步信號，97~144像素時(shí)鐘計數為行消隱后肩，145~784像素時(shí)鐘計數為圖像有效像素顯示，685~800像素時(shí)鐘計數為行消隱前肩。完成一行后，計數器置0，等待新的行同步信號到來(lái)再重新計數。在圖像有效像素時(shí)鐘內，讓寫(xiě)入FIFO使能信號處于有效狀態(tài)，而其余時(shí)間使能信號處于無(wú)效狀態(tài)，這樣可保證有效圖像數據能準確寫(xiě)入FIFO進(jìn)行緩存，并等待下一步的處理。

3.2 圖像縮放器模塊

如圖3所示，圖像縮放器模塊主要完成對輸入圖像數據源進(jìn)行分辨率的縮放。根據設計，輸入的圖像數據為VGA 640×480格式，輸出的圖像數據為XGA 1024×768格式。由于輸入圖像數據與輸出圖像數據在完整1幀中的每一行像素點(diǎn)和每一列的數量上之比都為5:8，因此可考慮對輸入的VGA信號作5:8的放大。先對數據在水平方向上進(jìn)行插值放大，然后再進(jìn)行垂直方向上的放大，設計中水平方向和垂直方向的插值放大均使用分級雙線(xiàn)性插值算法。

圖3 圖像縮放器模塊框圖

3.2.1分級雙線(xiàn)性插值 [3]

在雙線(xiàn)性插值算法中，插值點(diǎn)的值根據其相鄰的4個(gè)已知點(diǎn)計算得出，如圖4所示。

圖4 雙線(xiàn)性插值算法原理圖

已知a、b、c、d為輸入圖像內的相鄰的4個(gè)點(diǎn)，其灰度值表示為f(x)。待插像素f點(diǎn)映射到原圖像后的坐標值小數部分為[m,n]。計算f點(diǎn)灰度值的過(guò)程如式(1)~式(3)所示：

f[g]=f[a]+m(f(b)-f(a)) (1)

f[h]=f[c]+m(f(d)-f(c)) (2)

f[f]=f[g]+m(f(h)-f(g))

=(1-m)(1-n)f(a)+m(1-n)f(b)+(1-m)nf(c)+mnf(d) (3)

分級雙線(xiàn)性插值使用的4個(gè)源圖像像素點(diǎn)都是待插值點(diǎn)的直接鄰點(diǎn)。插值的計算過(guò)程如下：

g(x)=(f(a)(m×N)+f(b)×(1-m)N)/N

其中，m與1-m分別是a點(diǎn)與b點(diǎn)的權值。因為是做5:8的轉換，這里取C=N=8， 將原來(lái)為5個(gè)像素點(diǎn)的長(cháng)度區間劃分為8個(gè)區間，每個(gè)區間都有m×N與(1-m)N這一對權值組成的整數對。每個(gè)區間內部的待插值點(diǎn)都與該區間左邊界取同樣的值。8個(gè)區間的權值對應于(8,0)、(7,1)、(6,2)、(5,3)(4,4)、(3,5)、(2,6)和(1,7)。在確定好了點(diǎn)位置后，以查找表的方式寫(xiě)入權值與位置之間的關(guān)系，最后可根據內插點(diǎn)與臨近點(diǎn)的相對位置查找對應系數，并通過(guò)計算得出各像素點(diǎn)的灰階值。

3.2.2具體插值過(guò)程

3.2.2.1水平插值

將雙線(xiàn)性插值分解為水平和垂直方向進(jìn)行，由于是把原圖像作5：8的放大，所以根據分級雙線(xiàn)性插值，把原水平方向的5個(gè)像素點(diǎn)采用分8級雙線(xiàn)性插值送入水平插值器。水平插值器由計數器與使能信號同時(shí)控制，每間隔5個(gè)時(shí)鐘，水平插值器使能端置于計算插值狀態(tài)，把進(jìn)入的5個(gè)值進(jìn)行一次插值變成新的8個(gè)像素點(diǎn)，之后再間隔5個(gè)時(shí)鐘，將新的值進(jìn)入插值器進(jìn)行插值,直到把1行640個(gè)像素點(diǎn)插值為1行1 024個(gè)像素點(diǎn)。

3.2.2.2 垂直插值

垂直插值器完成垂直方向5:8的轉換，即5行數據變?yōu)?行數據的轉換，插值過(guò)程是按垂直方向對原來(lái)的5行數據采用分8級雙線(xiàn)性插值,變換為新的8行數據。

完成水平插值的數據流水線(xiàn)型通過(guò)FIFO1與FIFO2模塊，期間將FIFO1與FIFO2的值送入垂直插值器進(jìn)行插值，完成垂直插值后的數據送入FIFO3與FIFO4模塊，輸出順序排列在先的送入FIFO3，而另外一行數據進(jìn)入FIFO4。FIFO3與FIFO4之間的數據也是流水線(xiàn)型進(jìn)入到DDR2 SDRAM模塊中，整個(gè)過(guò)程通過(guò)使用狀態(tài)機對垂直插值進(jìn)行控制，使經(jīng)過(guò)垂直插值后的數據能以正確的順序完成插值，并且送入DDR2 SDRAM模塊。把對原5行數據經(jīng)過(guò)水平和垂直插值變?yōu)?行數據的時(shí)間作為一個(gè)周期，直到完成整1幀VGA格式圖像到1幀XGA圖像的放大。

3.3 DDR2 SDRAM控制器模塊

控制器模塊的具體作用為：當SCALER完成圖像數據處理后，把圖像數據送進(jìn)DDR2中儲存,在確保DDR2中存儲有2幀完整圖像時(shí)，DDR2的讀出端才開(kāi)始讀取，從第一幀圖像地址讀取圖像數據，然后據根據時(shí)序控制從DDR2輸出。當讀完第一幀后，繼續讀取第二幀，此時(shí)第三幀繼續寫(xiě)入原第一幀地址，之后的讀取寫(xiě)入都按此過(guò)程進(jìn)行。

由于DDR2 SDRAM不能同時(shí)寫(xiě)入和讀出，所以需要DDR2 SDRAM控制器加以控制?？筛鶕B接到DDR2 SDRAM模塊寫(xiě)入端和讀出端的FIFO內部已存數據數量進(jìn)行讀寫(xiě)控制。寫(xiě)入端前的FIFO即為圖3的FIFO3。連接到DDR2讀出端的FIFO為圖3的FIFO2，它與輸出時(shí)序控制模塊共同完成最終所需XGA圖像的輸出。DDR2 SDRAM每次操作指令時(shí)，以1行數據為單位，即接受1次讀命令，則讀出1行數據;同樣，接受1次寫(xiě)入命令，則寫(xiě)入1行數據，此1行數據同時(shí)為XGA格式的1行(1 024個(gè)像素點(diǎn)數據)。