資料介紹
1.1概述
汽車是現(xiàn)代社會最為有效、使用最為廣泛的交通工具之一,是維持人們正常生活工作所不可或缺的一部分。然而,汽車的大量涌現(xiàn),日益頻繁的交通堵塞和交通事故,嚴重影響到人們?nèi)粘I畹姆奖愫凸ぷ鞯男?,甚至危害到人們的生命安全。研究分析表明,每個交通事故均不同程度地涉及到駕駛員、汽車和道路環(huán)境因素,而與駕駛員因素有關(guān)的事故約占九成,駕駛員的人為失誤已經(jīng)被公認為是交通事故的主要原因。如何減少“人”在交通系統(tǒng)中發(fā)揮的不確定因素,已經(jīng)成為汽車安全領(lǐng)域研究的重點。通過先進的技術(shù)手段增強駕駛員感知能力,甚至替代部分駕駛?cè)蝿?wù),為車輛提供日益完善的安全預(yù)警和輔助駕駛功能,逐步實現(xiàn)車輛的智能化,并最終走向完全無人駕駛的智能車輛,必將是解決交通安全問題的根本途徑。
隨著圖像處理和計算機視覺的快速發(fā)展,越來越多的先進技術(shù)被應(yīng)用到汽車電子領(lǐng)域,傳統(tǒng)的基于圖像的輔助駕駛只在汽車車尾安裝倒車攝像頭,只能覆蓋汽車周圍的有限區(qū)域,而車兩側(cè)和前方的視覺盲區(qū)無疑增加了安全駕駛的隱患。
我們具有自主知識產(chǎn)權(quán)的車載全景視覺技術(shù)是將分布安裝于車輛周邊的圖像傳感器捕捉的圖像進行合成和投影,在人機界面虛擬一個單一的全景圖像,并且這個圖像時無盲區(qū)的,能夠360°的觀察車身周邊的狀況。同時,這個圖像經(jīng)過合成和投影,形成符合人的思維習(xí)慣的全景圖像。
1.2研究現(xiàn)狀
車載傳感器類型如表1所示,在這其中,全景視覺傳感器技術(shù)受到越來越多的關(guān)注,并成為車載電子裝置未來發(fā)展的主要方向。屬于視覺感知技術(shù)之一的全景視覺傳感器技術(shù)是智能感知交通環(huán)境重要的技術(shù)手段,它可以全方位、全天候、全時段地監(jiān)視、分析和記錄車內(nèi)外的情況,為報警系統(tǒng)、控制系統(tǒng)和安全避讓系統(tǒng)提供最直觀的狀態(tài)信息,也為車輛和乘員的安全保護提供了事前告之、過程記錄和事后重現(xiàn)的技術(shù)手段。特別是在復(fù)雜的道路環(huán)境下,通過全面的視覺技術(shù),可以使駕駛者的觀察得以延伸和擴大,真正做到“眼觀六路”,掌控全局。
車載全景視覺傳感器分為兩種,即把拍攝的圖像提供給駕駛者觀看的“顯示用視覺傳感器”,以及把拍攝的圖像傳送至計算機進行處理的“處理用視覺傳感器”。 車載全景視覺傳感器今后的發(fā)展趨勢有如下幾個方面:
?。?)處理用視覺傳感器的迅速普及;
?。?)處理用視覺傳感器的多功能化;
?。?)顯示用視覺傳感器和處理用視覺傳感器的融合。
表1:各種行駛傳感技術(shù)的比較
行駛傳感技術(shù)技術(shù)特點缺點探測范圍
超聲波成本低、探測精確。范圍小、受雨雪影響。《5m
脈沖雷達測量距離遠、精確。波束窄,只適合前后盲區(qū)探測?!?00m
多普勒雷達測量距離遠、測量精確、可多天線矩陣配合使用。系統(tǒng)復(fù)雜、成本高?!?00m
射頻標識互相通知位置、成本低,系統(tǒng)可靠。必須為每個設(shè)備、人裝備發(fā)射標識,使用不方便?!?00m
全景系統(tǒng)360度全景、直觀(非量化信息)有效性高、有良好的人機界面、便于再現(xiàn)重放?!?00m
在BMW和NISSAN的高端車型上,已經(jīng)開始使用多個攝像頭來輔助駕駛員的操作和泊車,在VOLVO的XC60,XC90等概念車型上,已經(jīng)開始使用圖像識別技術(shù)來輔助駕駛?cè)藛T的并線和巡航操作。在LEXUS的部分概念車型上,也有使用單目攝像頭來進行簡單的自動泊車的演示系統(tǒng)。
根據(jù)第三方的市場研究公司 Techno Systems Research (TSR) 的研究指出,在 2008 年時約有 20% 的新車配備整合式攝影機,而到了 2012 年時預(yù)計將增加到接近 70%,并且會有很大比例新車安裝至少2個以上攝像機,車用視頻裝置即將成為各類車輛的主流配置。
表2:已采用視覺感知技術(shù)的汽車領(lǐng)域應(yīng)用比較
形態(tài)廠商功能技術(shù)含量備注
低端產(chǎn)品倒車后視鏡眾多小品牌后方視頻低產(chǎn)品成熟
中低端
產(chǎn)品倒車可視系統(tǒng)國內(nèi)的銀聲、
合正等后方視頻
雷達測距
GPS低產(chǎn)品成熟
中高端
產(chǎn)品倒車可視系統(tǒng)
車載多媒體常見于高端車型后方視頻(側(cè)方視頻)
多媒體功能
GPS低產(chǎn)品成熟
研發(fā)類
產(chǎn)品夜視和行人檢測豐田夜視攝像頭提供紅外圖像,通過紅外攝像頭頭實現(xiàn)行人,動物檢測較高研發(fā)階段
可視全景系統(tǒng)日產(chǎn)汽車
松下電器
三洋電機多攝像頭實時視頻合成無盲區(qū)全景俯視圖高研發(fā)階段
主動駕駛輔助系統(tǒng)富士重工通過雙目攝像頭主動探測前方行人,車輛,障礙的距離,以攝像頭模擬人眼。高研發(fā)階段
圖像能夠提供給使用者最直觀高效的輔助信息。人類大腦的模糊思維和判斷能力決定了,人隨意掃視圖像所獲得的信息量和信息準確性遠遠大于費力地觀察若干儀表所能得到的信息量和信息準確性,并且圖像方式得到的信息更加直觀可靠。如表2所示,可以預(yù)見在不遠的將來,基于全景視覺傳感器技術(shù)和圖像識別技術(shù)來實現(xiàn)輔助駕駛和安全功能的系統(tǒng)將廣泛應(yīng)用于各類車輛,進而成為無人駕駛汽車和智能導(dǎo)航系統(tǒng)的關(guān)鍵技術(shù)。
本設(shè)計的最終目標就是要給出基于FPGA技術(shù)來構(gòu)架SOC實現(xiàn)的以全景視覺處理為基礎(chǔ)的汽車環(huán)視系統(tǒng)。通過4路廣角攝像頭實時采集數(shù)據(jù),并將采集到的4路視頻數(shù)據(jù)進行預(yù)處理和配準拼接等一系列處理實現(xiàn)360度的實時全景視覺圖像,并通過VGA顯示器進行顯示。
研究方法和技術(shù)路線
在系統(tǒng)構(gòu)成方面,系統(tǒng)主要分為三個部分,圖像采集、圖像處理及顯示。圖像的采集是使用4路模擬攝像頭,通過自行設(shè)計的視頻采集電路板接入圖像,并通過DMA將實時圖像數(shù)據(jù)搬到存儲器中。這里采用了NTSC制式的模擬攝像頭,攝像頭的性能和顯示效果一般。我們的研究重點是采用更加高效的算法和設(shè)計思路,在目前有限的資源條件下,最大限度的利用資源以達到最佳的設(shè)計和顯示效果。
汽車是現(xiàn)代社會最為有效、使用最為廣泛的交通工具之一,是維持人們正常生活工作所不可或缺的一部分。然而,汽車的大量涌現(xiàn),日益頻繁的交通堵塞和交通事故,嚴重影響到人們?nèi)粘I畹姆奖愫凸ぷ鞯男?,甚至危害到人們的生命安全。研究分析表明,每個交通事故均不同程度地涉及到駕駛員、汽車和道路環(huán)境因素,而與駕駛員因素有關(guān)的事故約占九成,駕駛員的人為失誤已經(jīng)被公認為是交通事故的主要原因。如何減少“人”在交通系統(tǒng)中發(fā)揮的不確定因素,已經(jīng)成為汽車安全領(lǐng)域研究的重點。通過先進的技術(shù)手段增強駕駛員感知能力,甚至替代部分駕駛?cè)蝿?wù),為車輛提供日益完善的安全預(yù)警和輔助駕駛功能,逐步實現(xiàn)車輛的智能化,并最終走向完全無人駕駛的智能車輛,必將是解決交通安全問題的根本途徑。
隨著圖像處理和計算機視覺的快速發(fā)展,越來越多的先進技術(shù)被應(yīng)用到汽車電子領(lǐng)域,傳統(tǒng)的基于圖像的輔助駕駛只在汽車車尾安裝倒車攝像頭,只能覆蓋汽車周圍的有限區(qū)域,而車兩側(cè)和前方的視覺盲區(qū)無疑增加了安全駕駛的隱患。
我們具有自主知識產(chǎn)權(quán)的車載全景視覺技術(shù)是將分布安裝于車輛周邊的圖像傳感器捕捉的圖像進行合成和投影,在人機界面虛擬一個單一的全景圖像,并且這個圖像時無盲區(qū)的,能夠360°的觀察車身周邊的狀況。同時,這個圖像經(jīng)過合成和投影,形成符合人的思維習(xí)慣的全景圖像。
1.2研究現(xiàn)狀
車載傳感器類型如表1所示,在這其中,全景視覺傳感器技術(shù)受到越來越多的關(guān)注,并成為車載電子裝置未來發(fā)展的主要方向。屬于視覺感知技術(shù)之一的全景視覺傳感器技術(shù)是智能感知交通環(huán)境重要的技術(shù)手段,它可以全方位、全天候、全時段地監(jiān)視、分析和記錄車內(nèi)外的情況,為報警系統(tǒng)、控制系統(tǒng)和安全避讓系統(tǒng)提供最直觀的狀態(tài)信息,也為車輛和乘員的安全保護提供了事前告之、過程記錄和事后重現(xiàn)的技術(shù)手段。特別是在復(fù)雜的道路環(huán)境下,通過全面的視覺技術(shù),可以使駕駛者的觀察得以延伸和擴大,真正做到“眼觀六路”,掌控全局。
車載全景視覺傳感器分為兩種,即把拍攝的圖像提供給駕駛者觀看的“顯示用視覺傳感器”,以及把拍攝的圖像傳送至計算機進行處理的“處理用視覺傳感器”。 車載全景視覺傳感器今后的發(fā)展趨勢有如下幾個方面:
?。?)處理用視覺傳感器的迅速普及;
?。?)處理用視覺傳感器的多功能化;
?。?)顯示用視覺傳感器和處理用視覺傳感器的融合。
表1:各種行駛傳感技術(shù)的比較
行駛傳感技術(shù)技術(shù)特點缺點探測范圍
超聲波成本低、探測精確。范圍小、受雨雪影響。《5m
脈沖雷達測量距離遠、精確。波束窄,只適合前后盲區(qū)探測?!?00m
多普勒雷達測量距離遠、測量精確、可多天線矩陣配合使用。系統(tǒng)復(fù)雜、成本高?!?00m
射頻標識互相通知位置、成本低,系統(tǒng)可靠。必須為每個設(shè)備、人裝備發(fā)射標識,使用不方便?!?00m
全景系統(tǒng)360度全景、直觀(非量化信息)有效性高、有良好的人機界面、便于再現(xiàn)重放?!?00m
在BMW和NISSAN的高端車型上,已經(jīng)開始使用多個攝像頭來輔助駕駛員的操作和泊車,在VOLVO的XC60,XC90等概念車型上,已經(jīng)開始使用圖像識別技術(shù)來輔助駕駛?cè)藛T的并線和巡航操作。在LEXUS的部分概念車型上,也有使用單目攝像頭來進行簡單的自動泊車的演示系統(tǒng)。
根據(jù)第三方的市場研究公司 Techno Systems Research (TSR) 的研究指出,在 2008 年時約有 20% 的新車配備整合式攝影機,而到了 2012 年時預(yù)計將增加到接近 70%,并且會有很大比例新車安裝至少2個以上攝像機,車用視頻裝置即將成為各類車輛的主流配置。
表2:已采用視覺感知技術(shù)的汽車領(lǐng)域應(yīng)用比較
形態(tài)廠商功能技術(shù)含量備注
低端產(chǎn)品倒車后視鏡眾多小品牌后方視頻低產(chǎn)品成熟
中低端
產(chǎn)品倒車可視系統(tǒng)國內(nèi)的銀聲、
合正等后方視頻
雷達測距
GPS低產(chǎn)品成熟
中高端
產(chǎn)品倒車可視系統(tǒng)
車載多媒體常見于高端車型后方視頻(側(cè)方視頻)
多媒體功能
GPS低產(chǎn)品成熟
研發(fā)類
產(chǎn)品夜視和行人檢測豐田夜視攝像頭提供紅外圖像,通過紅外攝像頭頭實現(xiàn)行人,動物檢測較高研發(fā)階段
可視全景系統(tǒng)日產(chǎn)汽車
松下電器
三洋電機多攝像頭實時視頻合成無盲區(qū)全景俯視圖高研發(fā)階段
主動駕駛輔助系統(tǒng)富士重工通過雙目攝像頭主動探測前方行人,車輛,障礙的距離,以攝像頭模擬人眼。高研發(fā)階段
圖像能夠提供給使用者最直觀高效的輔助信息。人類大腦的模糊思維和判斷能力決定了,人隨意掃視圖像所獲得的信息量和信息準確性遠遠大于費力地觀察若干儀表所能得到的信息量和信息準確性,并且圖像方式得到的信息更加直觀可靠。如表2所示,可以預(yù)見在不遠的將來,基于全景視覺傳感器技術(shù)和圖像識別技術(shù)來實現(xiàn)輔助駕駛和安全功能的系統(tǒng)將廣泛應(yīng)用于各類車輛,進而成為無人駕駛汽車和智能導(dǎo)航系統(tǒng)的關(guān)鍵技術(shù)。
本設(shè)計的最終目標就是要給出基于FPGA技術(shù)來構(gòu)架SOC實現(xiàn)的以全景視覺處理為基礎(chǔ)的汽車環(huán)視系統(tǒng)。通過4路廣角攝像頭實時采集數(shù)據(jù),并將采集到的4路視頻數(shù)據(jù)進行預(yù)處理和配準拼接等一系列處理實現(xiàn)360度的實時全景視覺圖像,并通過VGA顯示器進行顯示。
研究方法和技術(shù)路線
在系統(tǒng)構(gòu)成方面,系統(tǒng)主要分為三個部分,圖像采集、圖像處理及顯示。圖像的采集是使用4路模擬攝像頭,通過自行設(shè)計的視頻采集電路板接入圖像,并通過DMA將實時圖像數(shù)據(jù)搬到存儲器中。這里采用了NTSC制式的模擬攝像頭,攝像頭的性能和顯示效果一般。我們的研究重點是采用更加高效的算法和設(shè)計思路,在目前有限的資源條件下,最大限度的利用資源以達到最佳的設(shè)計和顯示效果。
下載該資料的人也在下載
下載該資料的人還在閱讀
更多 >
- 360全景環(huán)視系統(tǒng) 8次下載
- 360全景環(huán)視原理說明
- 360全景環(huán)視發(fā)展歷程
- 東芝CCD線性圖像傳感器TCD1702C數(shù)據(jù)手冊 15次下載
- 壓力傳感器和速度傳感器在汽車系統(tǒng)中的應(yīng)用及趨勢 35次下載
- 如何實現(xiàn)脈沖陣列式圖像傳感器成像系統(tǒng)的設(shè)計 34次下載
- CMOS圖像傳感器的原理參數(shù)和CCD圖像傳感器有什么區(qū)別等資料概述 59次下載
- 汽車環(huán)視系統(tǒng)設(shè)計完整硬件平臺設(shè)計方案 19次下載
- 汽車圖像傳感器的應(yīng)用 0次下載
- 高級駕駛輔助系統(tǒng)(ADAS)汽車環(huán)視技術(shù)簡述 15次下載
- CMOS圖像傳感器的抗暈光圖像采集系統(tǒng)設(shè)計
- 基于圖像傳感器的太陽方位檢測系統(tǒng)研究
- 基于CMOS圖像傳感器的成像系統(tǒng)設(shè)計
- 接觸式圖像傳感器的發(fā)展與應(yīng)用
- 基于CMOS圖像傳感器的成像系統(tǒng)設(shè)計
- 索尼圖像傳感器芯片有哪些 2.4k次閱讀
- 圖像傳感器的參數(shù)有哪些 2.3k次閱讀
- 圖像傳感器的原理是什么? 2.6k次閱讀
- 機器視覺系統(tǒng)如何選擇圖像傳感器 1.4k次閱讀
- 安森美汽車圖像傳感器發(fā)展趨勢 1.3k次閱讀
- CMOS圖像傳感器的制造工藝 5.8k次閱讀
- 關(guān)于圖像傳感器的圖像質(zhì)量要糾正的幾個誤區(qū) 808次閱讀
- 對圖像傳感器的認識誤區(qū):傳感器類型 1.2k次閱讀
- 關(guān)于圖像傳感器的像素誤區(qū) 1.1k次閱讀
- 關(guān)于圖像傳感器圖像質(zhì)量的四大認知誤區(qū) 966次閱讀
- CMOS圖像傳感器的FPGA邏輯設(shè)計解析 7.2k次閱讀
- cmos圖像傳感器結(jié)構(gòu)_cmos圖像傳感器市場 6.4k次閱讀
- 汽車:符合AEC-Q100認證的圖像傳感器 6k次閱讀
- 基于DSP和CMOS圖像傳感器的實時圖像采集系統(tǒng)的實現(xiàn)方案 3.4k次閱讀
- CMOS圖像傳感器的基本原理及設(shè)計考慮 1w次閱讀
下載排行
本周
- 1MDD品牌三極管MMBT3906數(shù)據(jù)手冊
- 2.33 MB | 次下載 | 免費
- 2MDD品牌三極管S9012數(shù)據(jù)手冊
- 2.62 MB | 次下載 | 免費
- 3聯(lián)想flex2-14D/15D說明書
- 4.92 MB | 次下載 | 免費
- 4收音環(huán)繞擴音機 AVR-1507手冊
- 2.50 MB | 次下載 | 免費
- 524Pin Type-C連接器設(shè)計報告
- 1.06 MB | 次下載 | 免費
- 6新一代網(wǎng)絡(luò)可視化(NPB 2.0)
- 3.40 MB | 次下載 | 免費
- 7MS1000TA 超聲波測量模擬前端芯片技術(shù)手冊
- 0.60 MB | 次下載 | 免費
- 8MS1022高精度時間測量(TDC)電路數(shù)據(jù)手冊
- 1.81 MB | 次下載 | 免費
本月
- 1愛華AIWA HS-J202維修手冊
- 3.34 MB | 37次下載 | 免費
- 2PC5502負載均流控制電路數(shù)據(jù)手冊
- 1.63 MB | 23次下載 | 免費
- 3NB-IoT芯片廠商的資料說明
- 0.31 MB | 22次下載 | 1 積分
- 4H110主板CPU PWM芯片ISL95858HRZ-T核心供電電路圖資料
- 0.63 MB | 6次下載 | 1 積分
- 5UWB653Pro USB口測距通信定位模塊規(guī)格書
- 838.47 KB | 5次下載 | 免費
- 6技嘉H110主板IT8628E_BX IO電路圖資料
- 2.61 MB | 4次下載 | 1 積分
- 7蘇泊爾DCL6907(即CHK-S007)單芯片電磁爐原理圖資料
- 0.04 MB | 4次下載 | 1 積分
- 8100W準諧振反激式恒流電源電路圖資料
- 0.09 MB | 2次下載 | 1 積分
總榜
- 1matlab軟件下載入口
- 未知 | 935137次下載 | 10 積分
- 2開源硬件-PMP21529.1-4 開關(guān)降壓/升壓雙向直流/直流轉(zhuǎn)換器 PCB layout 設(shè)計
- 1.48MB | 420064次下載 | 10 積分
- 3Altium DXP2002下載入口
- 未知 | 233089次下載 | 10 積分
- 4電路仿真軟件multisim 10.0免費下載
- 340992 | 191439次下載 | 10 積分
- 5十天學(xué)會AVR單片機與C語言視頻教程 下載
- 158M | 183353次下載 | 10 積分
- 6labview8.5下載
- 未知 | 81602次下載 | 10 積分
- 7Keil工具MDK-Arm免費下載
- 0.02 MB | 73822次下載 | 10 積分
- 8LabVIEW 8.6下載
- 未知 | 65991次下載 | 10 積分
電子發(fā)燒友App





創(chuàng)作
發(fā)文章
發(fā)帖
提問
發(fā)資料
發(fā)視頻
上傳資料賺積分
評論