基于時空關(guān)聯(lián)的停止線實時識別與測距方法
【專利摘要】基于時空關(guān)聯(lián)的停止線實時識別與測距方法屬于無人駕駛領(lǐng)域。首先通過智能車上的GPS裝置獲取路口路口類型、距離,當(dāng)距離小于100米時將會及時啟動停止線識別程序。通過攝像機(jī)獲取車輛前方的路面圖像,對原始圖像進(jìn)行灰度化、逆透視變換、自適應(yīng)二值化處理,然后對二值化圖像進(jìn)行水平邊沿信息提取,再對圖像進(jìn)行霍夫直線變換檢測直線,計算直線的長度以及直線和直線間的寬度來確定是否為停止線。停止線測距是利用圖像逆透視變換后呈線性關(guān)系,建立模型,進(jìn)行停止線與車輛的距離測算。當(dāng)連續(xù)5幀圖像都識別到停止線并所測距離是一個由大到小的變化過程時則認(rèn)為穩(wěn)定識別到了停止線并將其結(jié)果進(jìn)行返回。本發(fā)明減少運算開銷還極大地提高停止線識別的準(zhǔn)確性、實時性以及停止線測距的精度。
【專利說明】基于時空關(guān)聯(lián)的停止線實時識別與測距方法
【技術(shù)領(lǐng)域】:
[0001] 本發(fā)明是基于時空關(guān)聯(lián)的停止線實時識別與測距方法,屬于智能車無人駕駛技術(shù) 領(lǐng)域。
【背景技術(shù)】:
[0002] 安全駕駛、智能交通越來越受人們關(guān)注和重視,無人駕駛智能車的研究也已成為 熱點。停止線是重要的交通標(biāo)識,因此停止線識別技術(shù)是智能車無人駕駛技術(shù)的重要組成, 正確的停止線識別可W保證智能車輛能夠在城市路口中避免闖紅燈、避免碰撞到人行道上 的行人,從而提高無人駕駛的安全性,同時智能車輛可W將停止線作為起點線按照固有的 行駛軌跡安全渡過路口區(qū)。因此,停止線的正確、實時識別對智能車無人駕駛有著很重要的 作用。在無人駕駛技術(shù)中,除了需要準(zhǔn)確地識別出停止線,還需要精確計算出停止線離智能 車輛的距離。
【發(fā)明內(nèi)容】
:
[0003] 本發(fā)明的目的在于正確、實時地識別出城市道路中的停止線并且精確計算出停止 線離智能車輛的距離的同時也要求運算開銷最小,提出了基于時空關(guān)聯(lián)的停止線實時識別 與測距方法。
[0004] 為了實現(xiàn)上述目的,本發(fā)明采取了如下的技術(shù)方案:
[0005] 步驟1 ;傳感器安裝;
[0006] 步驟1-1;將單目攝像機(jī)安裝在智能車輛內(nèi)后視鏡的正下方并與車體的縱向坐標(biāo) 軸平行,相對車體橫坐標(biāo)的位移為零,安裝單目攝像時,應(yīng)保證攝像機(jī)能夠采集到車輛前方 清晰的道路圖像;
[0007] 步驟1-2 ;將GI^S裝置安裝在智能車頂平面處并使其位于智能車輛中屯、線上;GPS 裝置精度要求不高,誤差控制在10米W內(nèi);
[0008] 步驟2 ;實時接收GI^S的路口觸發(fā)點信息,所述的路口是指智能車輛所在的路段中 離智能車輛最近的路口;所述的觸發(fā)點信息結(jié)構(gòu)為(類型,距離),其中類型有十字路口、了 字路口兩種類型,距離是指智能車輛里路口中屯、的距離,單位為米(m);
[0009] 步驟3 ;當(dāng)接收的距離小于100米時,立即啟動停止線識別程序;當(dāng)接收的距離大 于100米時,關(guān)閉停止線識別程序,從而加大地減少了運算開銷和減少錯誤識別;
[0010] 步驟4;停止線識別;
[OCm] 步驟4-1 ;從攝像機(jī)中獲取原始路面圖像Img,先對圖像Img進(jìn)行灰度化處理得到 灰度圖像graylmg,再對圖像graylmg進(jìn)行逆透視變換得到鳥廠圖像birdeyelmg,然后對 圖像birdeyelmg進(jìn)行自適應(yīng)二值化處理得到二值圖像binarylmg ;
[001引步驟4-2 ;對步驟4-1中的圖像bina巧Img進(jìn)行水平邊沿提取得到圖像Hedgelmg, 所述的水平邊沿提取是指將圖像中黑白交界處水平方向提取來,具體做法是對圖像由上往 下進(jìn)行像素遍歷,當(dāng)遍歷的像素值與其下一個像素值不相等時,將該兩個像素值都賦值為 255,否則都賦值為0 ;其計算公式表達(dá)如下:
[001 引
【權(quán)利要求】
1.基于時空關(guān)聯(lián)的停止線實時識別與測距方法,其特征在于,包括以下步驟: 步驟1 :傳感器安裝; 步驟1-1:將單目攝像機(jī)安裝在智能車輛內(nèi)后視鏡的正下方并與車體的縱向坐標(biāo)軸平 行,相對車體橫坐標(biāo)的位移為零; 步驟1-2 :將GPS裝置安裝在智能車頂平面處并使其位于智能車輛中心線上; 步驟2 :實時接收GPS的路口觸發(fā)點信息,所述的路口是指智能車輛所在的路段中離智 能車輛最近的路口;所述的觸發(fā)點信息結(jié)構(gòu)為類型,距離,其中類型有十字路口、丁字路口 兩種類型,距離是指智能車輛里路口中心的距離,單位為米; 步驟3 :當(dāng)接收的距離小于100米時,立即啟動停止線識別程序;當(dāng)接收的距離大于 100米時,關(guān)閉停止線識別程序,從而加大地減少了運算開銷和減少錯誤識別; 步驟4 :停止線識別; 步驟4-1 :從攝像機(jī)中獲取原始路面圖像Img,先對圖像Img進(jìn)行灰度化處理得到灰度 圖像graylmg,再對圖像graylmg進(jìn)行逆透視變換得到鳥瞰圖像birdeyelmg,然后對圖像 birdeyelmg進(jìn)行自適應(yīng)二值化處理得到二值圖像binarylmg; 步驟4-2 :對步驟4-1中的圖像binarylmg進(jìn)行水平邊沿提取得到圖像Hedgelmg,所述 的水平邊沿提取是指將圖像中黑白交界處水平方向提取來,具體做法是對圖像由上往下進(jìn) 行像素遍歷,當(dāng)遍歷的像素值與其下一個像素值不相等時,將這兩個像素值都賦值為255, 否則都賦值為〇 ;其計算公式表達(dá)如下:
其中wG(0,width),hG(0,height-1),width,height分別是圖像binarylmg的寬和 高,P(w,h)表示圖像binarylmg中橫坐標(biāo)、縱坐標(biāo)分別為w,h的像素值; 步驟4-3 :對步驟4-2中的圖像HedgeImg進(jìn)行膨脹處理得到圖像dilatelmg,然后對 圖像dilatelmg進(jìn)行霍夫直線變換,檢測圖像中的所有直線并計算每條直線與水平的夾角 rho和長度length,單位分別是度和像素;由霍夫直線變換可知直線的兩個端點Pl(xl,yl) 和P2 (x2,y2),則水平的夾角rho和長度length的計算公式如下:
從滿足0彡rho彡20或160彡rho彡180, 50彡length彡100的直線中找兩條平行 線并且計算平行線間的距離s,當(dāng)s滿足5 <s< 15則認(rèn)為檢測到停止線,其中這兩條平行 線分別是停止線的上下邊沿;將這兩條直線畫在圖像IinesImg中; 步驟5 :停止線測距;所述距離是指智能車輛正投影中軸線最前處與停止線下邊沿的 距離; 步驟5-1 :將智能車輛停在路面上,從攝像機(jī)中獲取一張原始圖像,找出圖像的下邊界 所在路面上的位置,然后再測量該位置與車輛最前方處的地面距離K,K也稱作攝像機(jī)的盲 區(qū)距離,單位為厘米; 步驟5-2 :利用鳥瞰圖像中像素距離與實際距離的線性關(guān)系可以計算出實際距離與像 素距離的比值k,單位是cm/pixel;
(width/2,height-1)的像素距離d,單位pixel; 步驟5-4 :根據(jù)步驟5-2和步驟5-3計算停止線下邊沿與圖像最底端的實際距離D=dXk;則停止線下邊沿離智能車輛最前處的距離為S=K+D=K+dXk; 步驟6 :判斷停止線識別結(jié)果的穩(wěn)定性;所述的穩(wěn)定性是指正確連續(xù)地識別到停止線; 利用幀間關(guān)聯(lián)的連續(xù)性,來判斷停止結(jié)果識別結(jié)果正確性和連續(xù)性,即當(dāng)連續(xù)5幀圖像以 上都識別到停止線并且停止線與智能車輛的距離呈現(xiàn)由大到小的變化過程時則認(rèn)為穩(wěn)定 地識別到了停止線。
【文檔編號】G06K9/00GK104504364SQ201410677821
【公開日】2015年4月8日 申請日期:2014年11月23日 優(yōu)先權(quán)日:2014年11月23日
【發(fā)明者】袁家政, 劉宏哲, 鄭永榮 申請人:北京聯(lián)合大學(xué)