我們已經(jīng)介紹過在ESM7100主板上支持多路模擬攝像頭的方案，詳細(xì)資料可以參考《Linux主板多通道視頻采集方案》。在很多工業(yè)現(xiàn)場中還會使用到網(wǎng)絡(luò)攝像頭，它的優(yōu)點(diǎn)是可以通過網(wǎng)絡(luò)獲取數(shù)據(jù)，沒有距離的限制，只需要提供一個常用的普通網(wǎng)絡(luò)接口就可以進(jìn)行通訊，非常靈活。但是網(wǎng)絡(luò)攝像頭傳輸?shù)臄?shù)據(jù)都是通過了編碼（現(xiàn)在常見格式有 H.264、MPEG-4、MJPEG）的，在接收到數(shù)據(jù)后，如果要在主板上進(jìn)行處理和顯示，就需要對數(shù)據(jù)進(jìn)行解碼。實(shí)現(xiàn)解碼功能需要硬件的支持，依靠軟件解碼會消耗大量的CPU資源，而且性能也不理想，所以如果要連接網(wǎng)絡(luò)攝像頭，就只能夠使用擁有硬件編解碼功能的ESM6802這一款核心板。

ESM6802的處理器為雙核Crotex-A9，主頻1GHz的i.MX6DL，CPU內(nèi)部集成了一個擁有編解碼功能的VPU（Video Processing Unit），通過VPU進(jìn)行解碼不會消耗過多的CPU資源，而ESM6802內(nèi)部的VPU可以支持多種格式的解碼，包括了常見的H.264、MPEG-4、MJPEG等格式，能夠支持的最大分辨率為1920x1088，同時最多可以處理4路攝像頭的數(shù)據(jù)。下面我們就以ESM6802為例，介紹如何使用在Qt界面中顯示網(wǎng)絡(luò)攝像頭的數(shù)據(jù)。

軟件上同樣還是使用gstreamer和Qt來實(shí)現(xiàn)，ESM6802的文件系統(tǒng)中已經(jīng)集成了gstreamer和Qt5.8相關(guān)的庫和工具，并且包含了處理網(wǎng)絡(luò)攝像頭通訊協(xié)議rtsp和操作VPU編解碼的插件，而gstreamer能夠支持多種圖形系統(tǒng)包括Qt。所以利用gstreame能夠快速方便的獲取網(wǎng)絡(luò)攝像頭的數(shù)據(jù)并顯示到Qt界面中，關(guān)于gstreamer的詳細(xì)介紹，可以參考網(wǎng)站https://gstreamer.freedesktop.org/documentation/index.html?gi-language=c。

考慮到部分客戶可能對gstreamer不熟悉，英創(chuàng)公司在gstreamer提供的API函數(shù)基礎(chǔ)上重新封裝了一層，通過庫文件libemgst.so提供三個API函數(shù)和一個包含網(wǎng)絡(luò)攝像頭信息的結(jié)構(gòu)體變量，利用這三個API函數(shù)，客戶就可以將視頻數(shù)據(jù)顯示在Qt實(shí)現(xiàn)的界面上，而不需要使用代碼對gstreamer單獨(dú)進(jìn)行操作，客戶可以專注于Qt程序的開發(fā)。下面就詳細(xì)介紹libemgst.so的三個API函數(shù)和結(jié)構(gòu)體變量：

init_emgst函數(shù)進(jìn)行g(shù)streamer的初始化，在啟動gstreamer功能之前需要調(diào)用一次，客戶配合Qt使用時在main函數(shù)中調(diào)用即可：

config_emrtsp函數(shù)會配置并啟動gstreamer，要將網(wǎng)絡(luò)攝像頭的數(shù)據(jù)顯示在指定的窗口中，客戶只要得到用來顯示視頻的窗口控件的id就可以了，在每一個Qt窗口控件類中都有對應(yīng)的成員變量，可以很簡單的獲取到。通過rtsp_config填入網(wǎng)絡(luò)攝像頭的信息，包含網(wǎng)絡(luò)攝像頭的ip，用戶名，密碼和錄像文件路徑，如果只是播放實(shí)時圖像，錄像文件路徑填為NULL就行了，函數(shù)會動態(tài)監(jiān)測網(wǎng)絡(luò)攝像頭的連接，只有當(dāng)播放完成才會退出，比如錄像文件播放完畢或者手動關(guān)閉的情況，所以建議在線程中調(diào)用函數(shù)config_emrtsp。和網(wǎng)絡(luò)攝像頭的連接建立后，ESM6802主板會根據(jù)網(wǎng)絡(luò)攝像頭的編碼格式自行選擇合適的解碼方式，不需要客戶做任何設(shè)置，網(wǎng)絡(luò)攝像頭常用的H.264、MPEG-4、MJPEG編碼格式都可以支持。

config_emrtsp函數(shù)會根據(jù)width和height的值自動分配顯示區(qū)域，listsize指定同時顯示的通道數(shù)，支持的值為1、2、4，顯示的方式如下圖：

視頻數(shù)據(jù)顯示排列方式

函數(shù)調(diào)用后gstreamer會將對應(yīng)通道數(shù)的視頻顯示在指定的Qt窗口控件中，每一個區(qū)域所顯示的網(wǎng)絡(luò)攝像頭數(shù)據(jù)是通過結(jié)構(gòu)體指針rtsp_config指定的，下面是部分參考代碼，創(chuàng)建了一個線程，通過一個按鈕啟動，把將graphicsView控件的id傳給gstreamer，并顯示設(shè)置的網(wǎng)絡(luò)攝像頭數(shù)據(jù)：

庫文件libemgst.so已經(jīng)預(yù)裝在ESM6802主板的文件系統(tǒng)中了，客戶不需要針對主板再做任何設(shè)置。在開發(fā)程序的時候，Qt工程中需要將英創(chuàng)公司提供的emgst.h頭文件和libemgst.so庫文件添加進(jìn)去。頭文件添加的方法十分簡單，增加一個新的頭文件即可。關(guān)于外部庫的添加，Qt的開發(fā)工具QtCreator提供了非常簡便的方法，客戶只需要將libemgst.so拷貝到工程目錄下，然后在QtCreator中的項(xiàng)目欄用鼠標(biāo)右鍵單擊工程，選擇添加庫（外部庫），如下圖：

添加庫操作界面

選擇外部庫后，點(diǎn)擊下一步，按照下圖設(shè)置，在庫文件一欄中選擇到工程下的libemgst.so文件，如下圖：

選擇庫文件

這樣就完成了外部庫的設(shè)置，客戶可以在代碼中調(diào)用libemgst.so提供的API函數(shù)了。英創(chuàng)公司提供了一個通過按鈕切換顯示視頻通道數(shù)的例程，效果如下：

通過這種方式，英創(chuàng)公司希望能夠幫助客戶縮短開發(fā)周期，讓客戶可以專注于Qt程序的開發(fā)，而不用花時間去學(xué)習(xí)并在代碼中設(shè)置gstreamer。對于例程感興趣的客戶可以和工程師聯(lián)系，索取相關(guān)代碼。