【轉自互聯(lián)網(wǎng),如需引用請聯(lián)系原作者】
隨著計算機技術的快速發(fā)展和市場需要的逐步擴大,各種視頻信息處理技術發(fā)揮了越來越重要的作用,廣泛應用于網(wǎng)絡多媒體通信、實時監(jiān)控系統(tǒng)、高清晰度數(shù)字電視等方面。在視頻處理領域中,由于處理的數(shù)據(jù)量大,算法復雜度高,因此處理的實時性成為一大難題。在這種情況下,多媒體處理器TMS320DM642以其豐富的外設接口和高速的處理能力,使基于其設計出的產品在圖像質量、硬件成本和靈活性等方面都優(yōu)于專門的視頻編解碼芯片。本系統(tǒng)主要研究基于TMS320DM642罔像采集和處理系統(tǒng)的設計及應用。
1 系統(tǒng)基本原理 本系統(tǒng)主要由視頻解碼模塊、DSP(TMS320DM642)模塊、外部存儲器模塊(包括數(shù)據(jù)存儲器和程序存儲器)、PCI總線驅動模塊、電源管理模塊及JTAG接口等六大模塊組成。 由攝像機輸入的1路復合視頻信號(CVBS)進入視頻解碼芯片SAA7115,在解碼芯片中完成模擬視頻的數(shù)字化、圖像信號與同步信號的分離;從解碼器中輸出的數(shù)字圖像數(shù)據(jù)進入DSP視頻輸入口的FIFO緩存,通過EDMA送到DSP的外部數(shù)據(jù)存儲器中;處理后的圖像存人輸出緩存,再由DSP自帶的PCI接口將處理后的圖像送給外部主設備。系統(tǒng)的工作原理框圖見圖1。
圖1 系統(tǒng)工作原理框圖
2 圖像采集處理系統(tǒng)硬件設計 2.1 視頻解碼模塊 由于設計中采用模擬攝像機進行視頻數(shù)據(jù)的采集,因此需要使用視頻解碼芯片將采集到的模擬數(shù)據(jù)進行數(shù)字化,然后傳給DM642的視頻端口進行處理。視頻解碼芯片采用SAA7115,省去時鐘同步電路的設計,簡化接口電路,提高系統(tǒng)的可靠性。由攝像機采集到的模擬信號經(jīng)過視頻端子進入到解碼器SAA7115的模擬端AI11,經(jīng)模擬處理和A/D轉換后產生數(shù)字色度信號和亮度信號,分別對其進行處理。亮度信號處理的結果一路送到信號處理器,進行綜合處理,產生Y和uV信號,經(jīng)格式化后采用4:2:2 YUV格式從IPD[7..0]輸出直接連接到DM642視頻口的VP0[9..2]管腳;另一路經(jīng)過同步分離器,由數(shù)字PLL產生相應的同步信號與DM642的VP0CTL0和VP0CTL1相連,同時PLL驅動時鐘發(fā)生器,產生27MHz的時鐘同步信號LLC,輸出到DM642的VP0CLK0管腳。解碼器SAA7115與DM642的視頻接口的原理見圖2。
圖2 SAA7115與DM642視頻口原理圖 所有這些功能均在I2C總線控制下完成。SCL作為I2C接口的時鐘線與DM642的SCL相連,SDA作為I2C接口的數(shù)據(jù)線與DM642的SDA相連。通過SCL和SDA的時序配合,可由DM642向SAA7115的寄存器寫入數(shù)據(jù)或讀出數(shù)據(jù)。 2.2 DSP圖像處理模塊 本系統(tǒng)中視頻口VP0作為輸入,與視頻解碼器SAA7115的IPD(image port)相連。從解碼器SAA7115出來的BT.656數(shù)據(jù)流進入VP口后,經(jīng)由BT.656捕獲通道,進入到視頻口緩沖區(qū)中,每個視頻口都有1個5120B的視頻輸入/輸出緩沖區(qū),視頻口輸入的數(shù)據(jù)分別進入捕獲FIFO A和FIFO B,其中Y緩存2560B,Cb和Cr緩存分別為1280B。根據(jù)輸出的同步脈沖產生幀存儲器的地址信號、讀寫和片選等控制信號,將圖像逐幀存入SDRAM存儲器中,通過中斷通知DSP讀取。DM642通過EDMA事件實現(xiàn)視頻口緩沖區(qū)和片內L2存儲器之間的數(shù)據(jù)傳遞。用戶編程設定1個緩沖區(qū)閾值用以產生EDMA事件。BT.656格式的數(shù)據(jù)流經(jīng)由捕獲通道分別進入各自的緩沖區(qū),并打包成64b的雙字。當雙字增至緩沖區(qū)閾值時觸發(fā)EDMA事件,存儲器映射寄存器即作為EDMA數(shù)據(jù)傳輸?shù)脑吹刂贰楸WC每一場的數(shù)據(jù)能夠全部傳完且沒有遺漏,每次EDMA傳輸?shù)臄?shù)據(jù)大小應等于閾值。由于DM642的強大處理能力,用戶算法作為任務線程嵌入DSP軟件系統(tǒng)中。此時,DSP自動將Flash存儲器中的程序自舉到DSP的內部程序存儲區(qū),并開始執(zhí)行程序,調用用戶算法對緩存中的視頻數(shù)據(jù)逐幀進行處理。處理后的數(shù)據(jù)暫時存入SDRAM存儲器中,或通過DM642的PCI接口傳輸?shù)絇CI總線接口然后進入計算機。DM642的PCI接口和PCI總線接口之間用3片總線驅動芯片連接,這樣既能增強PCI總線驅動能力,又能實現(xiàn)PCI總線接口與DM642的I/O口的電平轉換功能。 2.3 外圍存儲模塊 本系統(tǒng)主要用于視頻圖像的處理,因此在處理過程中會產生大量數(shù)據(jù);而DM642內部最多僅有256kB的RAM,所以需要擴展大容量的外部存儲器才能滿足數(shù)據(jù)處理的需要。系統(tǒng)通過DM642的EMIF接口外部擴展存儲器,擴展兩片SDRAM用于存儲程序、數(shù)據(jù)和緩存數(shù)字視頻信息,擴展1片F(xiàn)lash存儲器用于固化程序和一些掉電后仍需保存的用戶數(shù)據(jù)。系統(tǒng)采用MT48LCAM32B2 SDRAM 存儲器,大小為1Meg×32bit×4banks,1片F(xiàn)lash AM29LV081B存儲器。EMIF提供了對SDRAM的無縫接口,在CEO空間提供了64bit寬的SDRAM接口總線,把2片32位的SDRAM并接,實現(xiàn)CEO空間的64bit存取,用于存放程序和緩存數(shù)字視頻。EMIFA提供了4個彼此獨立的外部存儲接口CE[3:0],為從Flash啟動,將Flash連接到CE1,將SDRAM連接到CE0。DM642的EMIF和64位SDRAM及Flash存儲器的接口原理圖見圖3。
圖3 DM642的EMIF和64位SDRAM 及Flash存儲器的接口原理圖 2.4 電源管理部分 本系統(tǒng)所需電源為+5V、+3.3V和+1.4V,其中+5V為電平轉換芯片電源,+3.3V為DM642的I/O口、解碼器及其他芯片的電源,+1.4V為DM642 CPU內核電源。TMS320DM642采用低電壓供電方式,大大降低DSP芯片的功耗。CPU內核電壓+1.4V,外設I/O電壓+3.3V,降低內核電壓主要是降低功耗。 外部接口引腳采用+3.3V電壓,便于直接與外部器件接口。由于是兩種不同的電壓,所以要考慮供電系統(tǒng)的配合問題。在上電過程中,保證CPU內核電源先上電,最晚也應當與外設I/O電源 同時上電。關閉電源時,先關閉I/O電源,再關閉內核電源。如果內核上電晚于I/O,則會發(fā)生內部總線競爭,從而產生不可預定的結果;因此,在本系統(tǒng)中加入了電壓監(jiān)控電路。
3 系統(tǒng)軟件編程部分 為了搭建1個可以實現(xiàn)各種圖像算法的硬件平臺,本系統(tǒng)的程序主要包括以下幾個部分:系統(tǒng)引導部分,DM642的初始化程序(包括片內外設的選擇、EMIFA初始化、IIC模塊的初始化、VP口初始化),解碼器的初始化,F(xiàn)lash的讀寫程序,EDMA進行視頻數(shù)據(jù)傳輸?shù)脑O置等。 系統(tǒng)斷電時,程序、初始化數(shù)據(jù)等都存在片外的Flash里。上電后,DM642從外部Flash中將程序引導到片內存儲器,開始運行程序。系統(tǒng)啟動時,系統(tǒng)上電復位,從Flash加載程序,并進行系統(tǒng)初始化,主要完成芯片初始化、外圍硬件配置,為圖像輸入及處理做好準備。DM642發(fā)啟動采集信號,送入圖像信號,產生SDRAM的地址、讀寫、選通等邏輯信號,將圖像寫入SDRAM中。寫完1幀圖像發(fā)中斷信號通知DM642讀取,DM642從SDRAM中將1幀圖像讀入,運用圖像處理算法進行處理。 系統(tǒng)自動將0x9000 0000~0x9000 03FF地址的程序和數(shù)據(jù)搬移到0x0000~0x0000 03FF地址,對EMIFA中的CE0、CE1寄存器進行配置;然后將片外0x9000 0400以后的Flash中的程序搬移到0x0000 0400以后的片內RAM中或片外SDRAM中,程序指針跳轉到rts6400.Lib中的C入口點c_int00執(zhí)行C初始化函數(shù)。初始化工作完成后,便進行圖像采集。由攝像機攝入的PAL制式圖像傳送到SAA7115解碼器,解碼器將信號轉變成并行的BT.656圖像碼流送到DM642的視頻口VP0口,DM642視頻口解碼BT.656,得到YUV(4:2:2)格式的圖像,并通過EDMA傳輸?shù)絊DRAM中存儲。圖像每場為720×288(寬×高),每幀720×576(寬×高)。CPU通過訪問SDRAM中的圖像數(shù)據(jù),根據(jù)程序進行圖像處理。系統(tǒng)的主程序結構框圖見圖4。
圖4 系統(tǒng)的主程序結構框圖
4 結束語 本系統(tǒng)研究并設計了1個通用的基于DM642的視頻采集處理系統(tǒng)。與其他視頻處理系統(tǒng)相比,它有著諸多優(yōu)勢:在處理器方面,為了實現(xiàn)較高的實時性,且能夠滿足對運動圖像進行處理的要求,系統(tǒng)采用了專門用于多媒體處理的TMS320DM642芯片作為處理器,使得系統(tǒng)硬件設計相對容易,提高了系統(tǒng)整體的性價比;在視頻采集方面,采用了專門的解碼芯片來完成,這樣避免出現(xiàn)傳統(tǒng)視頻采集電路中存在的“DSP花費大量時間進行圖像采集的控制”問題,從而將DSP解放出來,更高效地進行圖像處理工作;具有很強的可編程性.可以利用外接的SDRAM編程實現(xiàn)MPEG2、MPEG4、H.263等多種視頻壓縮編解碼算法,在適用性上遠優(yōu)于專用視頻編解碼系統(tǒng);由于DSP的運算速度快,所以實時性強也是本系統(tǒng)的一大優(yōu)勢。 因此,本系統(tǒng)可以作為許多視頻圖像處理算法開發(fā)、驗證的硬件平臺,也可以作為各種多媒體應用系統(tǒng)的核心部件。 |