1光羞、引言 隨著社會的發(fā)展和人口的增長幅类,汽車越來越多的進(jìn)入我們的日常生活西寸,交通也日益擁擠得惩。駕駛汽車是一項復(fù)雜的活動碎痘,長時間的駕駛很容易使人感到疲勞技碍,從而容易導(dǎo)致交通事故。此外一些工程車輛在作業(yè)時環(huán)境惡劣创靴、勞動強(qiáng)度大云许,這些車輛的駕駛自動化是非常有必要的。為了使汽車駕駛操作簡單偶刃、安全辣候、舒適,把人從繁重枯燥的汽車駕駛中解脫出來嘹谎,當(dāng)今世界各國都在積極研究開發(fā)自動駕駛技術(shù)大熟。 德國、美國和日本等國在汽車自動駕駛領(lǐng)域開展了積極的研究并取得了很大的成績囤恶。我國國防科技大學(xué)機(jī)電工程學(xué)院一直在進(jìn)行汽車自動駕駛技術(shù)的研究偿荷,其與第一汽車集團(tuán)公司聯(lián)合研制的無人駕駛型“紅旗”CA7460于2003年6月在湖南長沙試車成功,穩(wěn)定行駛時速達(dá)130KM/h(美國最高水平100KM/h唠椭、德國120 KM/h)跳纳,最高時速達(dá)170 KM/h,具備安全超車能力泪蔫。但他們的系統(tǒng)主要是依靠車載雷達(dá)棒旗、紅外測距儀和圖像傳感器來識別測量路面環(huán)境狀況,所得到的路面環(huán)境信息不豐富撩荣,不能滿足汽車智能駕駛的要求,所以這些系統(tǒng)都還只能在路況良好的高速公路上應(yīng)用饶深,無法適應(yīng)道路環(huán)境惡劣的低級公路和城市公路餐曹。 視覺是人類觀察世界、認(rèn)識世界的重要功能手段,人類從外界獲得的信息約有75%來自視覺系統(tǒng),特別是駕駛員駕駛需要的信息90%來自視覺敌厘。在目前汽車輔助駕駛所采用的環(huán)境感知手段中台猴,視覺傳感器比超聲、激光雷達(dá)等可獲得更高俱两、更精確饱狂、更豐富的道路結(jié)構(gòu)環(huán)境信息[5>。隨著計算機(jī)技術(shù)的發(fā)展和圖像處理/識別技術(shù)的成熟舶酒,機(jī)器視覺技術(shù)獲得長足的發(fā)展装魁,目前廣泛的應(yīng)用在三維測量、三維重建缰橘、虛擬現(xiàn)實逐程、運(yùn)動目標(biāo)檢測和目標(biāo)識別等方面。在汽車的自動駕駛發(fā)面赞拼,一個前提性的問題就是路況識別和車輛飒自、障礙物的距離、速度檢測,解決了這個問題才可能去控制汽車的駕駛秘驻。而機(jī)器視覺技術(shù)融合三維測量和圖像識別技術(shù)于一身值豫。 目前,機(jī)器視覺在智能機(jī)器人領(lǐng)域的研究熱火朝天:Klaus Fleischer等人提出的基于機(jī)器視覺的城外公路基礎(chǔ)設(shè)施固定對象的檢測與跟蹤(Machine-Vision-Based Detection and Tracking of Stationary Infrastructural Objects Beside Inner-city Roads)[3>;D. Brzakovie等人提出道路邊緣檢測在移動機(jī)器人導(dǎo)航中應(yīng)用(Road edge detection for mobile robot navigation) [2> ; O.Djekoune等人提出基于神經(jīng)網(wǎng)絡(luò)的視覺引導(dǎo)機(jī)器人導(dǎo)航(Vision-guided mobile robot navigation using neural network ) [4>戳明。這些研究成果對機(jī)器視覺在智能駕駛中應(yīng)用有著重要的啟迪胚览。 本文把機(jī)器視覺技術(shù)為主要的路況感知手段應(yīng)用到車輛自動駕駛中去,為實現(xiàn)車輛智能化駕駛提供一個不同的思考角度需五。 2鹉动、機(jī)器視覺技術(shù) 自從MARR視覺計算理論提出以來,機(jī)器視覺技術(shù)迅速發(fā)展宏邮,是目前智能駕駛領(lǐng)域發(fā)展最快的技術(shù)之一泽示,也是智能駕駛領(lǐng)域研究的主要方向之一。 2.1機(jī)器視覺基本原理 獲取場景中各點(diǎn)相對于攝像機(jī)的距離是立體視覺系統(tǒng)的重要任務(wù)之一蜜氨,場景中各點(diǎn)相對于攝像機(jī)的距離可以用深度圖(depth map)來表示械筛。機(jī)器視覺系統(tǒng)主要是依靠雙(多)目CCD在不同的空間位置上上獲取兩(多)幅圖像,通過這兩(多)幅圖像的深度信息和成像幾何來生成深度圖飒炎。 本文以比較簡單常用的雙目CCD視覺系統(tǒng)為例埋哟,它的幾何關(guān)系如圖所示。它由兩個完全相同的CCD攝像機(jī)(攝像頭)構(gòu)成郎汪,兩個圖像平面位于同一個平面上赤赊,兩個攝像機(jī)(攝像頭)的坐標(biāo)軸相互平行,且x軸重合煞赢,攝像機(jī)之間在下x方向上的間距為極限距離B抛计。
場景點(diǎn)P在左右圖像平面中的投影點(diǎn)分別為P左和P右,假設(shè)坐標(biāo)系原點(diǎn)與左透鏡中心重合照筑,比較相似三角形PMCl和PlLCl得到
同理嫡澄,從相似三角形PNCr和PlRCr,得到: 其中F是焦距诽矩。 由上面推導(dǎo)可知各種場景中的深度信息可以通過計算視差來實現(xiàn)改擂。在機(jī)器視覺系中統(tǒng)要能準(zhǔn)確的計算視差,一個重要的前提就是能夠找到左右圖像對中投影點(diǎn)的共軛對(場景中同一點(diǎn)在不同的圖像中的投影點(diǎn)稱作共軛對)租触,即立體匹配胶棕。匹配的方法主要有邊緣特征匹配、區(qū)域特征匹配和相位匹配三類误扯。立體配對是機(jī)器視覺里面研究的一個重要方向颓之,在這方面有很多有用的研究成果,O.Djekoune等人在[4>文中提出了應(yīng)用神經(jīng)網(wǎng)絡(luò)的方法提高立體像對的匹配速度和準(zhǔn)確度的新算法骇瓦。 2.2 機(jī)器視覺技術(shù)在智能駕駛中應(yīng)用 在智能駕駛中應(yīng)用機(jī)器視覺技術(shù),機(jī)器視覺技術(shù)必須具備實時性鹤梳、魯棒性诽粪、實用性這三個特點(diǎn)[7>。實時性要求機(jī)器視覺系統(tǒng)的數(shù)據(jù)處理必須與車輛的高速行駛同步進(jìn)行;魯棒性是要求智能車輛對不同的道路環(huán)境如高速公路岁九、市內(nèi)公路君铁、普通公路等,復(fù)雜的路面環(huán)境如路面的寬度、顏色据块、紋理码邻、彎道、坡度另假、坑洼像屋、障礙與車流等,各種天氣晴、陰边篮、雨己莺、雪、霧等均具有良好的適應(yīng)性;實用性指智能車輛能夠為普通用戶所接受[7>戈轿。 目前,機(jī)器視覺主要用于路徑的識別與跟蹤[7>凌受。與其它傳感器相比,機(jī)器視覺具有檢測信息量豐富、無接觸測量和能實現(xiàn)道路環(huán)境三維建模等優(yōu)點(diǎn)思杯,但數(shù)據(jù)處理量極大,存在系統(tǒng)實時性和穩(wěn)定性問題胜蛉,要靠開發(fā)高性能的計算機(jī)硬件,研究新算法來解決色乾。隨著計算機(jī)技術(shù)和圖像處理技術(shù)的飛速發(fā)展,三維重建道路環(huán)境為車輛高速智能駕駛提供強(qiáng)大的信息,在不遠(yuǎn)的將來具有現(xiàn)實可行性誊册。 機(jī)器視覺的道路識別基本原理為,公路路面的環(huán)境(白色路標(biāo)、邊緣铭梯、路面顏色靡隔、坑洼、障礙物等)的CCD圖像灰度值和圖像紋理巷同、光流有差異。根據(jù)這種差異,經(jīng)圖像處理后可以獲得需要的路徑圖像信息,如方位偏差搔绿、側(cè)向偏差豁箱、車輛在道路中的位置等信息。將這些信息與車輛的動力學(xué)方程相結(jié)合,可構(gòu)成車輛控制系統(tǒng)數(shù)學(xué)模型法顺。 3归闺、智能駕駛系統(tǒng)的結(jié)構(gòu)設(shè)計 (1) 機(jī)器視覺系統(tǒng) 機(jī)器視覺系統(tǒng)的硬件構(gòu)成:主要由參數(shù)快挡、型號临辨、性能一樣的兩個CCD攝像頭、兩片同樣的視頻采集卡和計算機(jī)上的視頻處理軟件構(gòu)成现蹂。我們利用左右兩路CCD攝像頭攝取的照片對進(jìn)行圖像處理而得到相關(guān)的深度信息筏拢,必須保證左右兩路CCD攝像頭信號是同步的术陶,否則攝取的圖片不對應(yīng),就無法正確的提取相關(guān)深度信息煤痕。因此我們左右兩路CCD攝像頭是經(jīng)過同步處理的攝像頭梧宫,就是從左路攝像頭的幀同步電路里引出幀同步信號到右路CCD攝像頭的幀同步電路里,從而保證左右兩路的圖像總是同步的摆碉。 機(jī)器視覺處理軟件系統(tǒng)主要是擔(dān)負(fù)著障礙物檢測識別塘匣、交通信號檢測識別、交通圖案識別檢測巷帝、公路邊緣識別檢測忌卤、彎道弧度識別檢測和前方車輛距離速度檢測和路面坑洼坡度識別檢測這些主要信息的提取,在這些信息數(shù)據(jù)的基礎(chǔ)上進(jìn)行道路環(huán)境的三維重建楞泼。機(jī)器視覺處理軟件系統(tǒng)處理得到的道路環(huán)境信息和輔助系統(tǒng)的多傳感器的信息進(jìn)行融合驰徊,結(jié)合車輛動力學(xué)模型(已經(jīng)有很多科學(xué)家在研究模糊控制技術(shù)和神經(jīng)網(wǎng)絡(luò)技術(shù)在車輛動力學(xué)模型上的應(yīng)用)和車輛行駛狀態(tài)參數(shù),由車輛行為決策調(diào)度系統(tǒng)做出合理的決策調(diào)度现拒,然后由路徑規(guī)劃系統(tǒng)生成合理的路徑規(guī)劃和車輛控制命令辣垒,對汽車進(jìn)行控制。 公路邊緣識別檢測關(guān)系著汽車能否正確識別公路印蔬,尤其是缺乏交通圖案的低等級公路勋桶。我們機(jī)器視覺檢測公路的邊緣信息和公路的寬度信息。公路的邊緣檢測铅州,對CCD攝取的圖像進(jìn)行二值化處理牛跷,就可以提取出公路邊緣;公路寬度信息檢測,利用左右兩路CCD攝取的公路圖像進(jìn)行立體匹配溶瞬,提取里面的深度信息叛榆,依據(jù)機(jī)器視覺理論計算出公路的寬度。依據(jù)其他傳感器的數(shù)據(jù)確定汽車在公路中的位置和汽車的行駛狀態(tài)參數(shù)鄙骏,做出合理的路徑規(guī)劃码遥,優(yōu)化控制汽車在公路中的位置,做好路徑跟蹤碗冈,不至于行駛中偏離公路路面班粥。 交通圖案、道路標(biāo)識怪褐、交通信號的識別檢測溜勃。交通圖案包括常見的斑馬線、車道線蝠欲、箭頭等廉丽。這些交通圖案都是有固定的顏色(比如斑馬線都是白色的)和固定的形狀,因此對他們的識別只要使用簡單的圖像處理妻味,然后對照我們預(yù)先建立的交通圖案模型就可以快速的識別正压。交通標(biāo)識識別就要相對麻煩一些欣福。有些交通標(biāo)識上面有文字,我們不僅需要利用圖像處理技術(shù)提取這些文字信息蔑匣,而且需要分析這些文字蘊(yùn)含的交通信息劣欢。交通信號包括交通信號燈和交警旗語,他們都有固定的運(yùn)行模式裁良,可以預(yù)先建模凿将,然后根據(jù)圖像處理結(jié)合其他傳感器的信息,進(jìn)行檢測識別价脾。 前方汽車牧抵、障礙物的距離、速度的檢測和識別侨把。能否安全準(zhǔn)確的識別檢測出前方汽車犀变、障礙物對汽車智能駕駛是十分關(guān)鍵的。不僅要識別出前方汽車秋柄、障礙物考叽,而且要檢測出它們的運(yùn)動速度、運(yùn)動方向和離本車的距離主渤,要能依據(jù)連續(xù)幾次測定的它們離本車的距離和運(yùn)動速度连碎、運(yùn)動方向預(yù)測出它們的可能運(yùn)動軌跡,為本車超車瘪叉、減速弧哥、規(guī)避障礙物、降低危險風(fēng)險提供可靠的數(shù)據(jù)药扒。利用機(jī)器視覺技術(shù)榆眷,可以使用基于成像模型的對應(yīng)點(diǎn)估計三維運(yùn)動檢測方法和基于光流的估計的三維運(yùn)動檢測方法。模型法隙殴、光流法有很多成熟的算法可以選擇屡旺,有利于系統(tǒng)程序的實現(xiàn)。 機(jī)器視覺系統(tǒng)中攝像機(jī)標(biāo)定:攝像機(jī)標(biāo)定的目的是確定攝像機(jī)的內(nèi)外部屬性參數(shù)并建立空間成像模型掷栋,以便確定空間坐標(biāo)系中物體點(diǎn)與它在圖像平上像點(diǎn)之間的相應(yīng)關(guān)系贼酵。攝像機(jī)的標(biāo)定分為攝像機(jī)內(nèi)部參數(shù)標(biāo)定和外部參數(shù)標(biāo)定。內(nèi)部參數(shù)確定了攝像機(jī)內(nèi)部的幾何和光學(xué)特征模庐,不隨攝像機(jī)的移動而改變;外部參數(shù)是確定攝像機(jī)像平面相對于客觀世界坐標(biāo)系統(tǒng)的三維位置和朝向,攝像機(jī)移動后油宜,需重新校正。本文中攝像機(jī)隨車運(yùn)動,但我們所需要的參數(shù)都是內(nèi)部參數(shù)喉钢,只需預(yù)先標(biāo)定攝像機(jī)的內(nèi)部參數(shù)就可以。 〔茁(2) 主控制系統(tǒng) 整個智能駕駛系統(tǒng)的核心是主控制系統(tǒng),它負(fù)責(zé)各種傳感器的信息采集醉者、識別但狭,然后進(jìn)行處理,最后依據(jù)處理后的信息進(jìn)行車輛行為決策調(diào)度撬即,規(guī)劃路徑并生成汽車控制命令立磁。本文整個智能駕駛系統(tǒng)的設(shè)計思想也是基于模擬人工駕駛來進(jìn)行的,主控制系統(tǒng)是汽車的大腦剥槐,機(jī)器視覺系統(tǒng)好比人的雙眼唱歧。主控制系統(tǒng)一旦出現(xiàn)系統(tǒng)死機(jī)或者控制軟件運(yùn)行不穩(wěn)定,則會帶來車毀人亡的重大交通事故助潭。而主控制系統(tǒng)計算機(jī)工作環(huán)境惡劣烙凝,汽車在高速行駛的時候震動很大,靠近汽車引擎的部位溫度較高打且,為了保證主控制系統(tǒng)的安全穩(wěn)定的運(yùn)行宠录,主控制系統(tǒng)計算機(jī)應(yīng)該選用高性能高穩(wěn)定的工控機(jī)。 ×闭健(3) 輔助測距定位系統(tǒng) 主要包括車載GPS定位系統(tǒng)祸麸、測距雷達(dá)、電子地圖等憋勇。隨著交通信息化的發(fā)展碧碉,基于GIS的電子地圖已經(jīng)開始應(yīng)用在日常汽車駕駛中》蚱荆基于GIS的電子地圖它包括了大范圍層次的地理位置信息炒肚,可以利用它來設(shè)定大的方向上的汽車駕駛的宏觀路徑。然后通過車載GPS全球定位系統(tǒng)來確定汽車當(dāng)時位置點(diǎn)的地理位置信息妇乏,把它跟電子地圖上該點(diǎn)的地理位置信息比較酱赘,就可以知道汽車現(xiàn)在處于我們設(shè)定的宏觀路徑中的什么位置,可以防止汽車在自動駕駛的時候走錯路口肺素,走錯方向恨锚,偏離預(yù)先設(shè)定的宏觀路徑”睹遥基于GIS的電子地圖和車載GPS全球定位系統(tǒng)的綜合運(yùn)用猴伶,保證了汽車能在宏觀上按照我們預(yù)先設(shè)定的宏觀路徑進(jìn)行自動駕駛而不偏離我們預(yù)先設(shè)定的路徑。 車載測距雷達(dá)主要是輔助機(jī)器視覺系統(tǒng)在一些特殊的環(huán)境下測定前方車輛的速度和距離塌西,以及路面障礙物的距離他挎。因為跟人一樣,由雙CCD構(gòu)成的立體視覺系統(tǒng)在天陰捡需、大霧办桨、暴雨等能見度不好的條件下筹淫,對前方車輛障礙物的識別效果會有很大的降低,測定車輛(障礙物)速度和距離更存在精度上的誤差呢撞,不能測定能見度外的前方車輛和障礙物损姜。而車載測距雷達(dá)可以在天氣晴好的時候輔助立體視覺系統(tǒng)提高測量車輛(障礙物)的距離精度和測量車輛(障礙物)速度的精度,在惡劣天氣可以彌補(bǔ)立體視覺測量效果不好的缺點(diǎn)殊霞,提高系統(tǒng)的可靠性摧阅。 (4) 車輛行駛參數(shù)檢測系統(tǒng) 車輛行駛參數(shù)檢測系統(tǒng)的主要作用是檢測汽車的前輪轉(zhuǎn)角荡档、后輪速度腥默、油門大小等車輛行駛狀態(tài)的關(guān)鍵參數(shù),為主控制系統(tǒng)進(jìn)行車輛決策調(diào)度和路徑規(guī)劃提供參數(shù)俭般。這個系統(tǒng)相對簡單匿微,車輛行駛狀態(tài)參數(shù)都被車輛儀表檢測出,只要想把這些參數(shù)讀取到主控制系統(tǒng)就可以雕零。 ◆嵛丁(5) 執(zhí)行機(jī)構(gòu) 整個車輛的自動駕駛執(zhí)行機(jī)構(gòu)主要是電液壓伺服系統(tǒng),由多個伺服油缸來完成各種駕駛汽車的動作斟漏,它模仿人類駕駛汽車的動作民逾,推拉各操縱桿,完成汽車換檔存研、加速垫凝、減速、轉(zhuǎn)向苦厅、停車仔戈、熄火等一系列工作∨±龋控制電液壓伺服系統(tǒng)的核心部件是離合器ECU(electronic control unit)监徘,檔位ECU,轉(zhuǎn)向ECU吧碾,油門ECU凰盔,剎車ECU這五個各司其職的電子控制器(ECU)來接收并執(zhí)行主控制計算機(jī)經(jīng)過決策調(diào)度計算后發(fā)出的控制命令,命令的執(zhí)行主要是靠ECU把命令信號放大然后送達(dá)電液壓伺服系統(tǒng)進(jìn)行機(jī)械執(zhí)行倦春。 4户敬、結(jié)語 智能駕駛中的機(jī)器視覺技術(shù)是一項很復(fù)雜的技術(shù),它需要進(jìn)行更多更細(xì)致的研究睁本。目前的難點(diǎn)和重點(diǎn)主要集中在快速有效的立體配對山叮、道路環(huán)境的快速三維重建和機(jī)器視覺處理的實時性上,有很多科學(xué)家已經(jīng)在這方面進(jìn)行了深入的研究,新的研究成果無疑講推動機(jī)器視覺技術(shù)在智能駕駛中引用屁倔。 |
聲明:本網(wǎng)站所收集的部分公開資料來源于互聯(lián)網(wǎng),轉(zhuǎn)載的目的在于傳遞更多信息及用于網(wǎng)絡(luò)分享暮胧,并不代表本站贊同其觀點(diǎn)和對其真實性負(fù)責(zé)蛹暗,也不構(gòu)成任何其他建議。本站部分作品是由網(wǎng)友自主投稿和發(fā)布磕泡、編輯整理上傳坑哥,對此類作品本站僅提供交流平臺,不為其版權(quán)負(fù)責(zé)萎括。如果您發(fā)現(xiàn)網(wǎng)站上所用視頻弦途、圖片、文字如涉及作品版權(quán)問題巡蛋,請第一時間告知抡广,我們將根據(jù)您提供的證明材料確認(rèn)版權(quán)并按國家標(biāo)準(zhǔn)支付稿酬或立即刪除內(nèi)容,以保證您的權(quán)益嚣赤!聯(lián)系電話:010-58612588 或 Email:editor@mmsonline.com.cn公掰。
- 暫無反饋
編輯推薦
- 2025新年特刊:打造新質(zhì)生產(chǎn)力哟玷,智啟未來新篇章
- 定義制造業(yè)未來的數(shù)控加工中心技術(shù)專題
- 航空航天及交通領(lǐng)域先進(jìn)制造技術(shù)應(yīng)用專題
- 解碼消費(fèi)電子產(chǎn)品生產(chǎn)的數(shù)字化之路技術(shù)專題
- 精密智能機(jī)床,助力制造升級技術(shù)專題
- 汽車輕量化驅(qū)動下的零部件加工應(yīng)用專題
- 高性能銑刀實現(xiàn)高精加工生產(chǎn)技術(shù)專題
- 航空航天發(fā)動機(jī)解決方案專題
- 高效齒輪加工生產(chǎn)技術(shù)方案專題
- 金屬加工液的性能不止?jié)櫥夹g(shù)應(yīng)用專題