在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

視頻拼接的實時性要求

新機(jī)器視覺 ? 來源:3d tof ? 作者:3d tof ? 2022-07-28 11:13 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

輸入輸出接口 Input: (1)4個攝像頭采集的圖像視頻分辨率 (整型int) (2)4個攝像頭采集的圖像視頻格式 (RGB,YUV,MP4等) (3)攝像頭標(biāo)定參數(shù)(中心位置(x,y)和5個畸變 系數(shù)(2徑向,2切向,1棱向),浮點型float) (4)攝像頭初始化參數(shù)(攝像頭初始位置和三個坐標(biāo)方向 的旋轉(zhuǎn)角度,車輛寬度高度車速等等,浮點型float) Output: (1)圖像融合和拼接的image/video的坐標(biāo)位置(浮點型float) (2)圖像融合和拼接的圖像視頻分辨率(整型int) (3)圖像融合和拼接的圖像視頻格式 (RGB,YUV,MP4等) (4)車輛周圍障礙物報警 (字符型char)22.1功能定義 1)計算圖像融合和拼接的image/video的坐標(biāo)位置。 2)算出圖像融合和拼接的圖像視頻分辨率。 3)確定圖像融合和拼接的圖像視頻格式。 4)檢測車輛周圍障礙物并報警。22.2技術(shù)路線方案 在360°全景視圖泊車輔助系統(tǒng)中,通過安裝在車輛前、后、左、右 4 個方位的廣角攝像頭采集車輛四周的視頻影像,利用圖像融合和拼接技術(shù)合成一幅車身周圍的全景視圖,最后在中控臺的屏幕上顯示,以擴(kuò)大駕駛員視野。借助360°全景視圖泊車輔助系統(tǒng),駕駛員坐在車中即可直觀地看到車輛周圍是否存在障礙物以及障礙物的相對方位與距離,以便在狹窄擁堵的停車場從容操控車輛泊車入位或通過復(fù)雜的路面,可有效防止刮蹭、碰撞、陷落等事故的發(fā)生。同時,全景視圖也可以為自動駕駛系統(tǒng)中識別、檢測、跟蹤等算法提供支持。 富士通(Fujitsu)開發(fā)的視頻成像技術(shù), 可實時實現(xiàn)車輛的完整360°環(huán)繞視圖。四個相機(jī)安裝在車輛前后左右周邊,車輛周圍環(huán)境的視頻圖像通過富士通的3D虛擬投影/視點轉(zhuǎn)換技術(shù)進(jìn)行合成。先進(jìn)的三維算法可以比較流暢地結(jié)合四個獨立相機(jī)的圖像,提供一個無縫和清晰的360°視圖。具體來說,四個攝像頭的圖像被發(fā)送到視頻處理LSI,包括視頻捕捉和3D功能,然后相機(jī)圖像合成為單個實時3D圖像并投影到三維碗形網(wǎng)格,生成虛擬3D環(huán)繞視頻,可以任意轉(zhuǎn)換車輛周圍環(huán)境視圖視角。1942ae42-0d62-11ed-ba43-dac502259ad0.png 圖1. 富士通環(huán)視方案流程圖 為了滿足視頻拼接的實時性要求,同時考慮到攝像頭安裝的位置、角度以及不同攝像頭之間相互位置相對固定,在本項目中可以使用基于特定圖像拼接與查表法相結(jié)合的多視點視頻拼接方法。在初始化階段,首先采集預(yù)先放置于車輛前、后、左、右 4個方位的帶有棋盤格的標(biāo)定圖像,利用標(biāo)定圖像分別對4個攝像頭進(jìn)行參數(shù)標(biāo)定,求出并保存每個攝像頭圖像畸變矯正參數(shù),對標(biāo)定圖像進(jìn)行畸變矯正,消除攝像頭成像失真;然后對畸變矯正后的標(biāo)定圖像進(jìn)行射影變換,求出并保存射影變換參數(shù);接著采集預(yù)先放置于車輛前、后、左、右4個方位的帶有豐富特征點的特定圖像,并通過查找攝像頭圖像畸變矯正參數(shù)進(jìn)行畸變矯正,通過查找射影變換參數(shù)將矯正后的特定圖像變換成俯瞰圖;最后對4個俯瞰圖提取 ORB( Oriented FAST and Rotated BRIEF) 特征并進(jìn)行粗匹配,利用 RANSAC( Random Sample Consensus,隨機(jī)抽樣一致) 算法剔除誤匹配點,并擬合出單應(yīng)性矩陣的初始值,再使用 Levenberg-Marquardt 非線性迭代最小逼近法進(jìn)行求精,經(jīng)圖像配準(zhǔn)、融合和拼接后,生成360°俯瞰全景視圖。在泊車輔助系統(tǒng)啟用期間,通過查找已保存的攝像頭圖像畸變矯正參數(shù)、射影變換參數(shù)以及單應(yīng)性矩陣參數(shù),將4個攝像頭的視頻圖像進(jìn)行拼接,生成虛擬的俯瞰全景視圖。 由于攝像頭內(nèi)外參數(shù)校正準(zhǔn)確性對圖像投影效果影響大;需要結(jié)合攝像頭安裝具體情況進(jìn)行算法的調(diào)整;為滿足嵌入式系統(tǒng)實時性需求,需要不斷優(yōu)化算法;盡量進(jìn)行流程簡化或者流程自動化。1983970e-0d62-11ed-ba43-dac502259ad0.png 圖2. 算法流程1993220a-0d62-11ed-ba43-dac502259ad0.png 圖3. 攝像頭成像及其坐標(biāo)系 主要數(shù)學(xué)原理,世界坐標(biāo)系中某點19b5e164-0d62-11ed-ba43-dac502259ad0.png投影到圖像平面上的像素點( u,v).該過程要經(jīng)過齊次坐標(biāo)轉(zhuǎn)換:19c77ec4-0d62-11ed-ba43-dac502259ad0.png 其中,s為任意的非零比例因子;αu=f/dx,f是攝像頭的焦距,dx代表x軸方向一個像素的寬度19f11bbc-0d62-11ed-ba43-dac502259ad0.png是圖像在 u 軸上的尺度因子,或稱為u軸上的歸一化焦距;1a04c13a-0d62-11ed-ba43-dac502259ad0.png ?,其中dy代表y軸方向一個像素的高度,αv是圖像在v軸上的尺度因子,或稱為v軸上的歸一化焦距;1a192c6a-0d62-11ed-ba43-dac502259ad0.png,它們是攝像頭坐標(biāo)系相對于世界坐標(biāo)系的旋轉(zhuǎn)向量;?1a2ba1d8-0d62-11ed-ba43-dac502259ad0.png是攝像頭坐標(biāo)系相對于世界坐標(biāo)系的平移向量;M1 由1a3c8d72-0d62-11ed-ba43-dac502259ad0.png決定,只與攝像頭內(nèi)部參數(shù)有關(guān),稱為攝像頭內(nèi)部參數(shù)矩陣;M2 由攝像頭相對于世界坐標(biāo)系的方位決定,稱為攝像頭外部參數(shù)矩陣;M 是一個3×4矩陣,稱作投影矩陣,用于計算從世界坐標(biāo)系到圖像坐標(biāo)系的轉(zhuǎn)換。可見,若已知攝像頭的內(nèi)、外參數(shù),就能夠知道投影矩陣 M,對空間內(nèi)任何一點,如果已知它的空間坐標(biāo)1a4e8428-0d62-11ed-ba43-dac502259ad0.png,就可以求出對應(yīng)的像素點坐標(biāo)(u,v) 。 ?1a6605e4-0d62-11ed-ba43-dac502259ad0.png ? ?張正友標(biāo)定法,采用棋盤格平面靶標(biāo)作為標(biāo)定物,可以把世界坐標(biāo)系構(gòu)造在 Zw = 0的平面上。 ?1a84e1b2-0d62-11ed-ba43-dac502259ad0.png ? ?其中,1a992118-0d62-11ed-ba43-dac502259ad0.png1aa82f78-0d62-11ed-ba43-dac502259ad0.png是徑向畸變系數(shù)。將式(3)化成矩陣形式為 ?1ab613ae-0d62-11ed-ba43-dac502259ad0.png ? ?以上是畸變矯正公式。1ac3ee52-0d62-11ed-ba43-dac502259ad0.png ? ?以上是射影變換。 ?1ad9a9cc-0d62-11ed-ba43-dac502259ad0.png ? ?以上是畸變矯正及射影變換所對應(yīng)的坐標(biāo)像素計算公式。 ?1ae928d4-0d62-11ed-ba43-dac502259ad0.png ? ?以上是圖像拼接單應(yīng)性矩陣求解公式。 ?1b001954-0d62-11ed-ba43-dac502259ad0.png ? ?以上是平均值法對拼接重疊區(qū)域進(jìn)行融合。 ?1b13bdba-0d62-11ed-ba43-dac502259ad0.png ? ?以上是3-D ship模型視角轉(zhuǎn)換矩陣。 ?1b2b09de-0d62-11ed-ba43-dac502259ad0.png

圖4. alpha fusion22.3關(guān)鍵技術(shù)參數(shù)和性能指標(biāo) 一種基于自適應(yīng)特征點配準(zhǔn)的環(huán)視系統(tǒng)拼接效果評估和自動微調(diào)方法,其特征在于:包括以下步驟: 步驟A、獲得拼接前圖像,并截取根據(jù)拼接參數(shù)算出的拍攝的相同位置的圖像; 步驟B、采用自適應(yīng)特征點配準(zhǔn)算法來獲得拼接前相同位置的圖像的旋轉(zhuǎn)平移矩陣; 步驟C、將旋轉(zhuǎn)平移矩陣或者對其進(jìn)行計算得到的角度信息和位移信息作為環(huán)視系統(tǒng)拼接效果的評估指標(biāo),并用此矩陣對拼接效果進(jìn)行微調(diào)。
審核編輯:彭靜

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 接口
    +關(guān)注

    關(guān)注

    33

    文章

    8992

    瀏覽量

    153670
  • 攝像頭
    +關(guān)注

    關(guān)注

    61

    文章

    4973

    瀏覽量

    98264
  • 視頻拼接
    +關(guān)注

    關(guān)注

    0

    文章

    7

    瀏覽量

    6283

原文標(biāo)題:ADAS攝像頭圖像環(huán)視拼接算法

文章出處:【微信號:vision263com,微信公眾號:新機(jī)器視覺】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點推薦

    視頻處理器晶振應(yīng)用方案

    技術(shù)干貨丨視頻處理器晶振應(yīng)用方案一、定義與作用視頻拼接控制器也稱視頻處理器,在液晶拼接屏中起了重要的作用,它是大屏
    發(fā)表于 02-07 09:32 ?0次下載

    低空視頻傳輸在望獲實時linux系統(tǒng)上的應(yīng)用

    望獲實時linux系統(tǒng)因其高確定性和低延遲的特性,在低空視頻傳輸中扮演著關(guān)鍵角色。低空經(jīng)濟(jì)涵蓋無人機(jī)物流、農(nóng)業(yè)監(jiān)控、低空交通管理等場景,這些場景對視頻傳輸?shù)?b class='flag-5'>實時性、可靠性和高效性有極高
    的頭像 發(fā)表于 01-24 17:21 ?504次閱讀

    AMS-MS16K系列:重塑4K視頻拼接處理的新標(biāo)桿

    這場視覺盛宴的背后,離不開一款強(qiáng)大而靈活的視頻拼接處理器——AMS-MS16K系列。 AMS-MS16K系列,作為Amoonsky推出的新一代4K輸入多畫面視頻拼接處理器,以其卓越的性
    的頭像 發(fā)表于 12-26 10:34 ?445次閱讀
    AMS-MS16K系列:重塑4K<b class='flag-5'>視頻</b><b class='flag-5'>拼接</b>處理的新標(biāo)桿

    AMS-MC158:重塑LED視頻拼接新境界

    在當(dāng)今視覺傳達(dá)占據(jù)主導(dǎo)地位的時代,LED顯示屏以其高亮度、高清晰度和靈活性成為各類場景的寵兒。而LED視頻拼接處理器作為LED顯示系統(tǒng)的核心樞紐,對于實現(xiàn)震撼視覺效果、滿足多樣化應(yīng)用需求起著不可或缺
    的頭像 發(fā)表于 12-24 10:07 ?666次閱讀
    AMS-MC158:重塑LED<b class='flag-5'>視頻</b><b class='flag-5'>拼接</b>新境界

    盛顯科技:拼接處理器連接大屏方法是什么?

    拼接處理器作為大屏幕顯示系統(tǒng)的控制核心,負(fù)責(zé)將信號源的圖像精準(zhǔn)地按照用戶的要求傳送到輸出的大屏幕上,并通過系統(tǒng)中的控制服務(wù)器對整個顯示系統(tǒng)進(jìn)行高效管理。那么您知道拼接處理器連接大屏方法是什嗎?下面盛
    的頭像 發(fā)表于 12-05 21:55 ?734次閱讀
    盛顯科技:<b class='flag-5'>拼接</b>處理器連接大屏方法是什么?

    盛顯科技:拼接處理器是什么設(shè)備類型

    是什么設(shè)備類型嗎?下面盛顯科技小編為您介紹: ? 拼接處理器是一種專門用于視頻信號處理和顯示控制的硬件設(shè)備,它主要用于將多路視頻信號進(jìn)行分割、縮放、拼接和顯示控制。通過
    的頭像 發(fā)表于 11-28 11:32 ?617次閱讀

    AMS-MS4K_C:4K多畫面視頻拼接處理器,重塑視覺盛宴的新標(biāo)桿

    在追求高清、大屏、多畫面的現(xiàn)代視覺展示領(lǐng)域,一款強(qiáng)大的視頻拼接處理器無疑是不可或缺的核心設(shè)備。AMS-MS4K_C系列4K輸入多畫面視頻拼接處理器,憑借其卓越的性能、靈活的功能和廣泛的
    的頭像 發(fā)表于 11-28 09:10 ?945次閱讀

    AMS-SC159:開啟LED視頻處理與拼接的新篇章

    隨著LED顯示屏技術(shù)的飛速發(fā)展,其在商業(yè)展示、舞臺演出、體育賽事等領(lǐng)域的應(yīng)用愈發(fā)廣泛。在這個追求極致視覺效果的時代,一款能夠精準(zhǔn)控制、靈活拼接的LED視頻處理器顯得尤為重要。AMS-SC159,作為
    的頭像 發(fā)表于 11-28 09:08 ?873次閱讀

    盛顯科技:異形拼接處理器和傳統(tǒng)拼接處理器有什么區(qū)別?

    現(xiàn)如今,隨著科技的不斷發(fā)展,拼接處理器已在眾多領(lǐng)域展現(xiàn)出其廣泛的適用性,尤其是異形拼接處理器,作為實現(xiàn)異形拼接屏功能的尖端設(shè)備,更是脫穎而出,它能夠巧妙地整合多個顯示屏,包括液晶顯示屏、LED顯示屏
    的頭像 發(fā)表于 11-06 10:52 ?586次閱讀

    用OLED拼接屏制作一個電話,是什么體驗?

    OLED拼接屏電話是一種新型的電話設(shè)備,它采用了OLED技術(shù),可以將多個OLED屏幕拼接在一起,形成一個大屏幕,從而實現(xiàn)更加清晰、更加流暢的通話和視頻通話體驗。OLED技術(shù)是一種新型的顯示技術(shù),它
    的頭像 發(fā)表于 11-01 11:14 ?482次閱讀
    用OLED<b class='flag-5'>拼接</b>屏制作一個電話,是什么體驗?

    盛顯科技:拼接處理器如何實現(xiàn)高效數(shù)據(jù)拼接操作?

    眾所周知,高效的數(shù)據(jù)拼接操作無疑是數(shù)據(jù)處理領(lǐng)域的核心優(yōu)勢,它能極大地縮短了處理時間,讓拼接處理器能夠迅速應(yīng)對海量數(shù)據(jù)的挑戰(zhàn),實現(xiàn)數(shù)據(jù)的快速整合與輸出。因此,高效數(shù)據(jù)拼接操作不僅是技術(shù)進(jìn)步的體現(xiàn),更是
    的頭像 發(fā)表于 10-23 10:58 ?573次閱讀
    盛顯科技:<b class='flag-5'>拼接</b>處理器如何實現(xiàn)高效數(shù)據(jù)<b class='flag-5'>拼接</b>操作?

    盛顯科技:拼接處理器如何設(shè)置滿屏顯示?

    在不少的用戶在使用拼接處理器的過程中,都很喜歡設(shè)置為滿屏顯示,這是因為滿屏顯示能夠充分利用拼接屏的整個顯示區(qū)域,使得圖像或視頻內(nèi)容無縫覆蓋整個屏幕,從而增強(qiáng)觀眾的沉浸感和體驗感。否則,非滿屏顯示
    的頭像 發(fā)表于 10-10 11:33 ?522次閱讀
    盛顯科技:<b class='flag-5'>拼接</b>處理器如何設(shè)置滿屏顯示?

    盛顯科技:在拼接處理器上配置混合矩陣的步驟是什么?

    相信大家都知道,在拼接處理器上配置混合矩陣,主要涉及到將混合矩陣的輸出與拼接處理器的輸入相連接,并通過拼接處理器的軟件或界面進(jìn)行配置,以實現(xiàn)多屏顯示和視頻信號的靈活處理。在此過程中,了
    的頭像 發(fā)表于 09-26 18:09 ?622次閱讀

    盛顯科技:拼接處理器為什么要配置混合矩陣?

    拼接處理器和混合矩陣作為視頻顯示與控制系統(tǒng)的關(guān)鍵組件,各自具有獨特的功能和優(yōu)勢。它們之間既存在區(qū)別又相互關(guān)聯(lián),共同為用戶提供了高效、靈活的視頻處理與顯示解決方案。在實際應(yīng)用中,我們通常會把兩者搭配
    的頭像 發(fā)表于 09-06 11:23 ?620次閱讀
    盛顯科技:<b class='flag-5'>拼接</b>處理器為什么要配置混合矩陣?

    液晶拼接屏有無縫拼接的嗎

    液晶拼接屏存在無縫拼接的技術(shù)。具體來說,無縫液晶拼接屏的實現(xiàn)方式主要有兩種:
    的頭像 發(fā)表于 08-01 09:27 ?883次閱讀
    主站蜘蛛池模板: 欧美色网络 | 天堂在线网 | 国产色婷婷精品综合在线观看 | 欧美另类色 | 97理论三级九七午夜在线观看 | 中文字幕亚洲一区二区三区 | 一女被两男吃奶玩乳尖口述 | 伦理片日本韩国电影三级在线观看 | 国产成人精品1024在线 | 亚洲视频在线免费看 | aaa特级毛片 | 午夜美女网站 | 五月天色丁香 | 亚洲 欧美 自拍 卡通 综合 | 99久热只有精品视频免费观看17 | 2021精品综合久久久久 | 成人综合婷婷国产精品久久免费 | 四虎国产精品永久在线 | 天天操操操操操操 | 国产福利vr专区精品 | 久久综合成人网 | 亚洲最大的黄色网址 | 一区二区精品 | 色噜噜狠狠狠狠色综合久 | 爱爱动态视频免费视频 | 午夜精品久久久久 | 亚洲羞羞裸色私人影院 | 欧美一级特黄啪啪片免费看 | 国产真实野战在线视频 | 一本大道高清在线视频 视频 | 2020av在线| 色久优优 欧美色久优优 | 国产免费久久 | 色视频在线播放 | 久久福利青草精品资源站免费 | 亚洲电影一区二区三区 | 国产精品www夜色影视 | 色多多a | 久操视频网站 | 亚洲国产精品婷婷久久久久 | 国产一级aaa全黄毛片 |