高速嵌入式硬件設計培訓_基于嵌入式Linux與S3C2410平臺的視頻采集

小嵌

高速嵌入式硬件設計培訓_基于嵌入式Linux與S3C2410平臺的視頻采集,   

隨著計算機技術和網(wǎng)絡技術的發(fā)展，在單片機領域也發(fā)生著日新月異的改變，如高速信號處理器、SoC片上系統(tǒng)等新技術、新應用如雨后春筍般蓬勃發(fā)展起來。在現(xiàn)實生活中經常會遇到這樣一些問題：比如如何對機房的溫濕度進行遠程監(jiān)控;如何一手掌握家里的安全狀況，這都需要應用一種耗電量小、24小時不間斷工作，體積小的遠程視頻監(jiān)控系統(tǒng)。

針對網(wǎng)絡視頻監(jiān)控設備的實際應用需求，結合圖像采集壓縮編碼、嵌入式系統(tǒng)和網(wǎng)絡技術等幾方面的新技術，設計了一套嵌入式網(wǎng)絡視頻監(jiān)控系統(tǒng)，用以實現(xiàn)視頻數(shù)據(jù)的采集、壓縮與網(wǎng)絡傳輸。該系統(tǒng)基于S3C2410的ARM920T芯片和嵌入式Linux操作系統(tǒng)，采用USB攝像頭捕捉視頻，經MPG440芯片壓縮編碼，系統(tǒng)直接與網(wǎng)絡相連，用戶使用標準的網(wǎng)絡瀏覽器和流媒體播放程序即可查看遠程視頻影像。

1 系統(tǒng)總體設計

系統(tǒng)總體設計包括硬件設計和軟件設計2部分。硬件設計模塊主要包括微控制器模塊、壓縮編碼模塊、網(wǎng)絡接口模塊3部分。微控制器模塊主要由主控芯片、 DATAFLASH和SDRAM組成。其中，主控芯片是整個控制系統(tǒng)的核心，它負責整個系統(tǒng)的調度工作。DATAFLASH中固化了嵌入式Linux內核及其文件系統(tǒng)、應用軟件和系統(tǒng)配置文件。SDRAM作為內存供系統(tǒng)運行使用。壓縮編碼模塊由視頻數(shù)據(jù)采集芯片、MPEG-4壓縮編碼芯片、SDRAM組成，負責將視頻流轉化為MPEG-4碼流。網(wǎng)絡接口模塊主要是配合主控芯片傳送MPEG-4碼流。當系統(tǒng)啟動時，微控制器將Linux內核調入SDRAM 中，系統(tǒng)從SDRAM中啟動。系統(tǒng)啟動后，微控制器控制MPEG-4編碼模塊進行工作。

軟件設計部分主要包括嵌入式Linux移植、視頻采集與 MPEG-4壓縮編碼模塊、JRTPLIB網(wǎng)絡傳輸模塊和MPEG-4解碼程序4部分。嵌入式 Lin-ux系統(tǒng)存放到由S3C2410控制的DATAFLASH中，它負責整個系統(tǒng)軟件的調度工作。MPEG-4壓縮編碼模塊主要負責將采集到的視頻流壓縮為MPEG-4數(shù)據(jù)流。JRTPLIB網(wǎng)絡傳輸模塊主要負責MPEG-4視頻流傳輸與控制的相關設置。MPEG-4解碼程序主要負責對通過網(wǎng)絡得到的 MPEG-4數(shù)據(jù)流進行解碼工作。

2 硬件系統(tǒng)設計

系統(tǒng)的硬件平臺采用Samsung公司的處理器S3C2410。該處理器內部集成了ARM公司ARM920T處理器核的32位微控制器，資源豐富：帶獨立的16 kB指令Cache和16 kB數(shù)據(jù)Cache，還有LCD控制器、RAM控制器、NAND閃存控制器、3路UART、4路DMA、4路帶PWM的Timer、并行I/O口、8路 10位ADC、TouchScreen接口、I2C接口、I2S接口、2個USB接口控制器、2路SPI，主頻最高可達203 MHz。在處理器豐富資源的基礎上，還進行了相關的配置和擴展，平臺配置了16 MB，16位的FLASH和64 MB，32位的SDRAM。通過以太網(wǎng)控制器芯片DM9000擴展了一個網(wǎng)口，另外引出了一個HOST、USB接口，通過在USB接口上外接一個帶USB 接口的攝像頭。硬件系統(tǒng)結構如圖1所示。

  

  

3 軟件系統(tǒng)設計

Linux具有內核小，效率高，源代碼開放，內核直接提供網(wǎng)絡支持等優(yōu)點。但嵌入式系統(tǒng)的硬件資源畢竟有限，因此不能直接把Linux作為操作系統(tǒng)，要針對具體的應用通過配置內核、裁減shell和嵌入式C庫對系統(tǒng)進行定制，使整個系統(tǒng)能夠存放到容量較小的FLASH中。Linux的動態(tài)模塊加載，使 Linux的裁減極為方便，高度模塊化的部件使添加非常容易。嵌入式Linux系統(tǒng)主要由4個部分組成：引導內核啟動的文件（bootloader）、 Linux內核文件（kernel）、虛擬磁盤文件（ramdisk）、用戶空間文件（user）。它們分別被放在 DATAFLASH內的4個分區(qū)模塊中。根據(jù)不同模塊的具體功能采用不同的文件系統(tǒng)，如：bootloader，kernel，ramdisk等，移植完成后不需要動態(tài)改變，使用較節(jié)省空間的ROM-FS只讀文件系統(tǒng);user模塊內放置一些可以動態(tài)更新的配置文件等，需要進行較多的讀寫操作，所以使用支持動態(tài)擦寫保存的JFFS2文件系統(tǒng)�；�于Linux的上述優(yōu)點，實現(xiàn)的平臺使用操作系統(tǒng)μclinux。通常嵌入式系統(tǒng)軟件的開發(fā)采用交叉編譯調試方式。宿主機通常為Intel處理器，而目標板如圖1所示為S3C2410，因此程序需要使用針對處理器特點的編譯器才能生成在相應平臺上可運行的代碼。對于嵌入式Linux，宿主機PC上應安裝Linux系統(tǒng)，之后在宿主機上建立交叉編譯調試的開發(fā)環(huán)境。采用移植性很強的C語言在宿主機上編寫視頻采集程序，再利用交叉編譯調試工具編譯鏈接生成可執(zhí)行代碼，最后向目標平臺移植。

Linux移植技術已經成熟，在此不做詳細闡述，主要介紹USB攝像頭驅動、基于V4L設計的視頻采集模塊和JRTPLIB網(wǎng)絡傳輸模塊的程序設計。

3.1 USB攝像頭驅動

搭建好嵌入式Linux的開發(fā)環(huán)境后，第一步工作就是USB攝像頭的安裝與驅動。

在Linux下，設備驅動程序可以看成是Linux內核與外部設備之間的接口。設備驅動程序向應用程序屏蔽了硬件實現(xiàn)的細節(jié)，使得應用程序可以像操作普通文件一樣來操作外部設備，可以使用并操作文件中相同的、標準的系統(tǒng)調用接口函數(shù)來完成對硬件設備的打開、關閉、讀/寫和I/O控制操作，而驅動程序的主要任務也就是要實現(xiàn)這些系統(tǒng)的調用函數(shù)。

Video4Linux（V4L）是Linux中關于視頻設備的內核驅動，它是針對視頻設備應用程序編程提供的一系列接口函數(shù)。對于USB口攝像頭，其驅動程序中需要提供基本的I/O操作接口函數(shù)open，read，write，close來實現(xiàn)。當應用程序對設備文件進行系統(tǒng)調用操作時，Linux內核將通過file-operations結構訪問驅動程序提供的函數(shù)，在系統(tǒng)平臺上對USB口數(shù)碼攝像頭進行驅動，首先把USB控制器驅動模塊靜態(tài)編譯進內核，使平臺中支持USB接口，再在需要使用攝像頭采集時，使用insmode動態(tài)加載其驅動模塊，這樣攝像頭就可正常工作。

確定USB攝像頭被正常驅動后，下一步就是使用Video4Linux提供的API函數(shù)集來編寫視頻采集程序。

3.2 基于V4L設計的視頻采集模塊

在Linux下，所有外設都被看成是一種特殊的文件，稱為設備文件。系統(tǒng)調用的是內核與應用程序之間的接口，而設備驅動程序則是內核與外設之間的接口。他完成設備的初始化和釋放，對設備文件的各種操作和中斷處理等功能，為應用程序屏蔽了外設硬件的細節(jié)，使應用程序可以像普通文件一樣對外設進行操作。 Linux下的視頻采集過程如圖2所示。[!--empirenews.page--]

  

  

Linux系統(tǒng)中的視頻子系統(tǒng)Video4Linux為視頻應用程序提供了一套統(tǒng)一的API，視頻應用程序通過標準的系統(tǒng)調用即可操作各種不同的視頻捕獲設備。Video4Linux向虛擬文件系統(tǒng)注冊視頻設備文件，應用程序通過操作視頻設備文件實現(xiàn)對視頻設備的訪問。

在此主要針對設備文件/dev/video進行視頻捕捉方面的程序設計。

其中用到的主要函數(shù)有：

Camera_open（）：用來開啟視頻設備文件，使用前需要首先聲明一個video_device類型的設備文件。自動化有嵌入式, 嵌入式系統(tǒng)人機界面, 嵌入式高速通信, 研究生再學嵌入式, 嵌入式面試的問題, word嵌入式怎么, 嵌入式加載指令取數(shù), 嵌入式軟件試題, 嵌入式清除中段, 江蘇自考嵌入式試卷, 嵌入式應聘題庫, 嵌入式三線軌道條, 哈爾濱嵌入式工程師, 物聯(lián)網(wǎng)嵌入式設備, 企業(yè)嵌入式案例分析, 軍用級嵌入式主板, 嵌入式電路板是什么, 繁星嵌入式1000, 常見的嵌入式應用, 嵌入式基本概念, 嵌入式臺面茶盤玻璃,

Camera_get_capability（）：通過調用ioctl（）函數(shù)取得設備文件的相關信息，并存放到video_capability結構中。

Camera_get_picture（）：通過調用ioctl（）函數(shù)取得圖像的相關信息，并且存放到video_picture結構中。

Camera_close（）：用來關閉設備文件。

Camera_grab_image（）：用來抓取圖像，采用mmap方式，直接將設備文件/dev/video0映射到內存，加速文件I/O操作，還可以使多個線程共享數(shù)據(jù)。

剩下的還有設備初始化、參數(shù)設備等相關函數(shù)，這里不再詳述。

3.3 視頻壓縮編碼模塊

獲取圖像數(shù)據(jù)后，可以直接輸出到FrameBuffer進行顯示，由于該系統(tǒng)要將采集到的視頻影響通過網(wǎng)絡傳輸出去，所以在傳輸之前要對原始的圖像數(shù)據(jù)進行壓縮編碼，在此選用映佳公司的MPG440芯片來實現(xiàn)MPEG-4視頻編解碼方案。與其他標準相比，MPEG-4壓縮比更高，節(jié)省存儲空間，圖像質量更好，特別適合在低帶寬條件下傳輸視頻，并能保持圖像的質量。對視頻流進行壓縮編碼以后，接下來就要實現(xiàn)網(wǎng)絡傳輸部分的功能。

3.4 JRTPLIB網(wǎng)絡傳輸模塊

流媒體指的是在網(wǎng)絡中使用流技術傳輸?shù)倪B續(xù)時基媒體，RTP是目前解決流媒體實時傳輸問題的最好辦法，JRTPLIB是一個面向對象的RTP庫，他完全遵循RFCl889設計，下面講述如何在Linux平臺上運用RTP協(xié)議進行實時流媒體編程。

3.4.1 初始化

在使用JRTPLIB進行實時流媒體數(shù)據(jù)傳輸之前，首先應該生成RTPSession類的一個實例來表示此次RTP會話，然后調用 Create（）方法來對其進行初始化操作。RTPSession類的Create（）方法只有一個參數(shù)，用來指明此次RTP會話所采用的端口號。

3.4.2 數(shù)據(jù)發(fā)送

當RTP會話成功建立起來之后，接下來就可以開始進行流媒體數(shù)據(jù)的實時傳輸了。首先需要設置好數(shù)據(jù)發(fā)送的目標地址，RTP協(xié)議允許同一會話存在多個目標地址，這可以通過調用RTPSession類的AddDestination（）、DeleteDestination（）和 ClearDestinations（）方法來完成。目標地址全部指定之后，接著就可以調用RTPSession類的SendPacket（）方法，向所有的目標地址發(fā)送流媒體數(shù)據(jù)。

3.4.3 數(shù)據(jù)接收

對于流媒體數(shù)據(jù)接收端，首先需要調用PollData（）方法來接收發(fā)送過來的RTP或者RTCP數(shù)據(jù)報。由于同一個RTP會話中允許有多個參與者 （源），因此既可以通過調用GotoFirstSource（）和GotoNextSource（）方法來遍歷所有的源，也可以通過調用 GotoFisstSourceWithDat（）和Got-oNextSourceWithData（）方法來遍歷那些攜帶有數(shù)據(jù)的源。在從RTP會話中檢測出有效的數(shù)據(jù)源之后，接下去就可以調用RTPSession類的Get-NextPacket（）方法從中抽取RTP數(shù)據(jù)報，當接收到的RTP數(shù)據(jù)報處理完之后，要及時釋放。

JRTPLIB為RTP數(shù)據(jù)報定義了3種接收模塊，通過調用RTPSession類的SetReeeiveMode（）方法可以設置下列這些接收模式：

RECEIVEMODE_ALL：缺省的接收模式，所有到達的RTP數(shù)據(jù)報都將被接受;

RECEIVEMODE_IGNORESOME：除了某些特定的發(fā)送者之外，所有到達的RTP數(shù)據(jù)報都將被接受，而被拒絕的發(fā)送者列表可以通過調用 AddTo-IgnoreList（），DeleteFromlgnoreList（）和ClearIgnoreList（）方法進行設置;

RECEIVEMODE_ACCEPTSOME：除了某些特定的發(fā)送者之外，所有到達的RTP數(shù)據(jù)報都將被拒絕，而被接受的發(fā)送者列表可以通過調用 AddTo-AcceptList（），DeleteFromAcceptList和ClearAcceptList（）方法來進行設置。

3.4.4 控制信息

JRTPLIB是一個高度封裝后的RTP庫，只要PollData（）或SendPacket（）方法被成功調用，JRTPLIB就能夠自動對達到 RTCP數(shù)據(jù)報進行處理，并且還會在需要的時候發(fā)送RTCP數(shù)據(jù)報，從而能夠確保整個RTP會話過程的正確性。在系統(tǒng)中，使用 RTPSessionJRTPLIB類庫提供的方法來實現(xiàn)底層的RTP/RTCP操作，并且把他封裝在CrtpTransmitter類中，該類從 MediaSink類繼承而來，接收到相應的媒體幀數(shù)據(jù)，使用RTPSession類庫的操作把數(shù)據(jù)發(fā)送到網(wǎng)絡上。

4 結語

因為系統(tǒng)是以S3C2410平臺和Linux操作系統(tǒng)為基礎，利用Video4Linux設計采集程序，使用MPEG-4壓縮編碼，通過實時流媒體傳輸技術實現(xiàn)網(wǎng)絡傳輸?shù)�，所以軟硬件成本低廉，體積小巧，整個系統(tǒng)具有穩(wěn)定可靠、安裝簡便等特點，而且監(jiān)控距離可隨網(wǎng)絡延伸不斷加長，具有良好的發(fā)展應用前景。可擴展應用在工業(yè)控制、視頻會議系統(tǒng)、可視電話、遠程監(jiān)控系統(tǒng)等諸多領域。