在之前的文章中(卷積神經(jīng)網(wǎng)絡(luò)中為什么會(huì)有矩陣乘法?),我們提到的情形是只有一個(gè)通道的輸入數(shù)據(jù),相應(yīng)的,也就只有一個(gè)與之對(duì)應(yīng)的Kernel。如果是多通道輸入數(shù)據(jù),是否依然存在矩陣乘法呢?我們看下面的例子。
在這個(gè)例子中,有3個(gè)輸入通道(RGB),每個(gè)通道有與之對(duì)應(yīng)的Kernel,此時(shí)的卷積運(yùn)算并沒(méi)有本質(zhì)的變化,就每個(gè)通道而言,仍然是二維濾波器。將每個(gè)通道的輸出結(jié)果對(duì)應(yīng)元素相加即為多通道情形下的卷積結(jié)果。這里可以設(shè)置偏置(Bias)。圖中的偏置值為1。此時(shí),輸入為多通道,輸出為單通道。
進(jìn)一步擴(kuò)展,如果每個(gè)通道有多個(gè)與之對(duì)應(yīng)的Kernel,會(huì)是什么情形呢?如下圖所示。圖中,每個(gè)通道有4個(gè)Kernel。從而,最終輸出有4個(gè)通道。輸出每個(gè)通道的計(jì)算方式與上圖保持一致。
基于以上兩圖,我們不難得出如下結(jié)論:
輸入通道與Kernel通道保持一致,例如上圖中有3個(gè)輸入通道和3個(gè)Kernel通道。
輸出通道個(gè)數(shù)與每個(gè)Kernel通道內(nèi)的濾波器個(gè)數(shù)一致,例如上圖中每個(gè)Kernel通道內(nèi)有4個(gè)濾波器,故輸出通道個(gè)數(shù)為4。
每個(gè)輸出通道所包含的元素個(gè)數(shù)與滑窗個(gè)數(shù)一致。這再次證明多通道本質(zhì)上與單通道的卷積運(yùn)算是一致的。
現(xiàn)在,我們對(duì)輸入通道數(shù)據(jù)進(jìn)行重組,如下圖所示方式。取出每個(gè)通道滑窗內(nèi)的數(shù)據(jù),排成一列,最終構(gòu)成一個(gè)矩陣。
緊接著,將每個(gè)通道對(duì)應(yīng)的Kernel也進(jìn)行重組,如下圖所示方式。最終形成Kernel矩陣。與輸入通道數(shù)據(jù)重組不同的是這里將Kernel系數(shù)按行排列,每個(gè)Kernel通道內(nèi)濾波器的個(gè)數(shù)決定了行數(shù)。
至此,輸入數(shù)據(jù)和Kernel系數(shù)都被重組為矩陣,重組的目的就是為了滿(mǎn)足矩陣運(yùn)算的需求,這樣就可以按照矩陣乘法計(jì)算卷積運(yùn)算了。
責(zé)任編輯:lq
-
濾波器
+關(guān)注
關(guān)注
162文章
8076瀏覽量
181082 -
神經(jīng)網(wǎng)絡(luò)
+關(guān)注
關(guān)注
42文章
4809瀏覽量
102822 -
矩陣
+關(guān)注
關(guān)注
0文章
434瀏覽量
35028
原文標(biāo)題:再談卷積神經(jīng)網(wǎng)絡(luò)中為什么會(huì)有矩陣乘法
文章出處:【微信號(hào):Lauren_FPGA,微信公眾號(hào):FPGA技術(shù)驛站】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
TXB0108輸入數(shù)據(jù)為100Mbps時(shí)會(huì)存在什么問(wèn)題?
DAC8728多通道輸出數(shù)據(jù),不能保持上一個(gè)數(shù)據(jù)嗎?
ADS1118如果雙通道同時(shí)采樣時(shí)就是兩個(gè)通道亂跳 ,數(shù)據(jù)是對(duì)的,但是通道不對(duì)應(yīng)怎么辦呢?
求助,LMX2572LP參考時(shí)鐘路徑中的乘法器MULT的輸入頻率范圍問(wèn)題求解
OPA1622處于關(guān)斷模式下,此時(shí)輸入引腳依然存在前一級(jí)的音頻信號(hào)輸入,這樣會(huì)對(duì)前一級(jí)IC存在什么影響呢?
多通道高壓數(shù)字輸入模塊的空間節(jié)省設(shè)計(jì)技術(shù)

多通道數(shù)據(jù)采集卡各通道不獨(dú)立的原因
多通道數(shù)據(jù)采集儀的作用與用途
多通道數(shù)據(jù)采集儀怎么用的
多通道數(shù)據(jù)采集器的作用有哪些
多通道數(shù)據(jù)采集系統(tǒng)的設(shè)計(jì)的意義
多通道數(shù)據(jù)采集串?dāng)_問(wèn)題怎么解決
多通道數(shù)據(jù)采集器怎么看數(shù)據(jù)
多通道數(shù)據(jù)采集系統(tǒng)的優(yōu)缺點(diǎn)
DAC8812雙通道、串行輸入16位乘法數(shù)模轉(zhuǎn)換器數(shù)據(jù)表

評(píng)論