本發(fā)明涉及圖像處理領(lǐng)域,特別涉及一種針對車輛的顏色識別方法及裝置。
背景技術(shù):
在現(xiàn)有技術(shù)中,目前對于車輛的顏色識別主要通過統(tǒng)計(jì)學(xué)方法統(tǒng)計(jì)的顏色分量分布進(jìn)行對比識別,這種方法的優(yōu)點(diǎn)是識別速度快,缺點(diǎn)是識別率不高,易受環(huán)境影響,其一般用于預(yù)識別或粗分類。還有一種方法是采用傳統(tǒng)的模式學(xué)習(xí)的方式,通過訓(xùn)練樣本的顏色特征模型對車顏色進(jìn)行分類,這種方法的訓(xùn)練效率不高。
技術(shù)實(shí)現(xiàn)要素:
本申請實(shí)施例提供了一種針對車輛的顏色識別方法及裝置,提供一種基于深度學(xué)習(xí)的車輛顏色識別方法。
有鑒于此,本發(fā)明的第一方面提供一種針對車輛的顏色識別方法,包括:
獲取車輛的車輛圖像;
識別車輛圖像中的車牌信息,車牌信息包括車牌的長度、寬度以及位置;
根據(jù)車牌信息確定車頭區(qū)域以及車頭區(qū)域的車頭圖像;
將車頭圖像轉(zhuǎn)換成YUV格式的圖像,得到車頭YUV圖像;
從車頭YUV圖像中抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù)并重新組合得到預(yù)設(shè)大小的車頭YUYV圖像;
將車頭YUYV圖像輸入至基于YUYV圖像訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型;
根據(jù)卷積神經(jīng)網(wǎng)絡(luò)模型的輸出結(jié)果確定車輛的車頭的顏色。
結(jié)合本發(fā)明實(shí)施例的第一方面,在本發(fā)明實(shí)施例的第一方面的第一種實(shí)施方式中,根據(jù)車牌信息確定車頭區(qū)域以及車頭區(qū)域的車頭圖像包括:
根據(jù)車牌信息得到車牌的長度以及寬度;
將車牌的長度值按照第一預(yù)設(shè)比值增大并作為車頭區(qū)域的長度值;
將車牌的寬度值按照第二預(yù)設(shè)比值增大并作為車頭區(qū)域的寬度值;
確定車頭區(qū)域并得到車頭區(qū)域的車頭圖像。
結(jié)合本發(fā)明實(shí)施例的第一方面,第一方面的第一種實(shí)施方式中任一種,在本發(fā)明實(shí)施例的第一方面的第二種實(shí)施方式中,從車頭YUV圖像中抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù)并重新組合得到預(yù)設(shè)大小的車頭YUYV圖像包括:
從車頭YUV圖像中按照預(yù)設(shè)條件抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù);
按照Y分量數(shù)據(jù)、U分量數(shù)據(jù)、Y分量數(shù)據(jù)、V分量數(shù)據(jù)的順序組合得到車頭YUYV圖像。
結(jié)合本發(fā)明實(shí)施例的第一方面,第一方面的第一種實(shí)施方式至第二種實(shí)施方式中任一種,在本發(fā)明實(shí)施例的第一方面的第三種實(shí)施方式中,將車頭YUYV圖像輸入至基于YUYV圖像訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型之前還包括:
訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)模型,包括:
獲取一種顏色以上的單一顏色圖像轉(zhuǎn)換成的顏色YUYV圖像,顏色YUYV圖像的大小與車頭YUYV圖像的大小相等;
利用顏色YUYV圖像訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)模型。
結(jié)合本發(fā)明實(shí)施例的第一方面,第一方面的第一種實(shí)施方式至第三種實(shí)施方式中任一種,在本發(fā)明實(shí)施例的第一方面的第四種實(shí)施方式中,根據(jù)卷積神經(jīng)網(wǎng)絡(luò)模型的輸出結(jié)果確定車輛的車頭的顏色之后,還包括:
根據(jù)車輛的車頭的顏色確定車輛的顏色。
本發(fā)明的第二方面提供一種裝置,包括:
獲取模塊,用于獲取車輛的車輛圖像;
識別模塊,用于識別車輛圖像中的車牌信息,車牌信息包括車牌的長度、寬度以及位置;
第一確定模塊,用于根據(jù)車牌信息確定車頭區(qū)域以及車頭區(qū)域的車頭圖像;
轉(zhuǎn)換模塊,用于將車頭圖像轉(zhuǎn)換成YUV格式的圖像,得到車頭YUV圖像;
抽取模塊,用于從車頭YUV圖像中抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù)并重新組合得到預(yù)設(shè)大小的車頭YUYV圖像;
輸入模塊,用于將車頭YUYV圖像輸入至基于YUYV圖像訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型;
第二確定模塊,用于根據(jù)卷積神經(jīng)網(wǎng)絡(luò)模型的輸出結(jié)果確定車輛的車頭的顏色。
結(jié)合本發(fā)明實(shí)施例的第二方面,在本發(fā)明實(shí)施例的第二方面的第一種實(shí)施方式中,第一確定模塊包括:
第一獲取單元,用于根據(jù)車牌信息得到車牌的長度以及寬度;
第一增大單元,用于將車牌的長度值按照第一預(yù)設(shè)比值增大并作為車頭區(qū)域的長度值;
第二增大單元,用于將車牌的寬度值按照第二預(yù)設(shè)比值增大并作為車頭區(qū)域的寬度值;
確定單元,用于確定車頭區(qū)域并得到車頭區(qū)域的車頭圖像。
結(jié)合本發(fā)明實(shí)施例的第二方面,第二方面的第一種實(shí)施方式中任一種,在本發(fā)明實(shí)施例的第二方面的第二種實(shí)施方式中,抽取模塊包括:
抽取單元,用于從車頭YUV圖像中按照預(yù)設(shè)條件抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù);
組合單元,用于按照Y分量數(shù)據(jù)、U分量數(shù)據(jù)、Y分量數(shù)據(jù)、V分量數(shù)據(jù)的順序組合得到車頭YUYV圖像。
結(jié)合本發(fā)明實(shí)施例的第二方面,第二方面的第一種實(shí)施方式至第二種實(shí)施方式中任一種,在本發(fā)明實(shí)施例的第二方面的第三種實(shí)施方式中,還包括:
訓(xùn)練模塊,用于訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)模型,包括:
第二獲取單元,用于獲取一種顏色以上的單一顏色圖像轉(zhuǎn)換成的顏色YUYV圖像,顏色YUYV圖像的大小與車頭YUYV圖像的大小相等;
訓(xùn)練單元,用于利用顏色YUYV圖像訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)模型。
結(jié)合本發(fā)明實(shí)施例的第二方面,第二方面的第一種實(shí)施方式至第三種實(shí)施方式中任一種,在本發(fā)明實(shí)施例的第二方面的第四種實(shí)施方式中,還包括:
第三確定模塊,用于根據(jù)車輛的車頭的顏色確定車輛的顏色。
從以上技術(shù)方案可以看出,本發(fā)明實(shí)施例具有以下優(yōu)點(diǎn):
本發(fā)明實(shí)施例提供一種針對車輛的顏色識別方法及裝置,提供一種基于深度學(xué)習(xí)的車輛顏色識別方法,采用車頭顏色信息代替車身局部顏色信息,減少了對車身局部顏色信息待識別區(qū)域定位的要求,增強(qiáng)了車頭顏色識別對局部光照的魯棒性。同時(shí),針對對整個(gè)車頭進(jìn)行顏色識別耗時(shí)的問題,采用彩色圖像轉(zhuǎn)YUV灰度圖像的方法,構(gòu)建出YUYV的顏色梯度特征降低數(shù)據(jù)維數(shù)用于樣本訓(xùn)練及識別。
附圖說明
為了更清楚地說明本發(fā)明實(shí)施例中的技術(shù)方案,下面將對實(shí)施例中所需要使用的附圖作簡單地介紹,顯而易見地,下面描述中的附圖僅僅是本發(fā)明的實(shí)施例,對于本領(lǐng)域普通技術(shù)人員來講,在不付出創(chuàng)造性勞動(dòng)的前提下,還可以根據(jù)提供的附圖獲得其他的附圖。
圖1是本發(fā)明實(shí)施例中一種針對車輛的顏色識別方法的一個(gè)實(shí)施例示意圖;
圖2是本發(fā)明實(shí)施例中一種針對車輛的顏色識別方法的車頭區(qū)域示意圖;
圖3是本發(fā)明實(shí)施例中一種針對車輛的顏色識別方法的圖像數(shù)據(jù)示意圖;
圖4是本發(fā)明實(shí)施例中一種裝置的一個(gè)實(shí)施例示意圖。
具體實(shí)施方式
為了使本技術(shù)領(lǐng)域的人員更好地理解本發(fā)明方案,下面將結(jié)合本發(fā)明實(shí)施例中的附圖,對本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述,顯然,所描述的實(shí)施例僅僅是本發(fā)明一部分的實(shí)施例,而不是全部的實(shí)施例?;诒景l(fā)明中的實(shí)施例,本領(lǐng)域普通技術(shù)人員在沒有做出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例,都應(yīng)當(dāng)屬于本發(fā)明保護(hù)的范圍。
本發(fā)明的說明書和權(quán)利要求書及上述附圖中的術(shù)語“第一”、“第二”等(如果存在)是用于區(qū)別類似的對象,而不必用于描述特定的順序或先后次序。應(yīng)該理解這樣使用的數(shù)據(jù)在適當(dāng)情況下可以互換,以便這里描述的實(shí)施例能夠以除了在這里圖示或描述的內(nèi)容以外的順序?qū)嵤?。此外,術(shù)語“包括”和“具有”以及他們的任何變形,意圖在于覆蓋不排他的包含,例如,包含了一系列步驟或單元的過程、方法、系統(tǒng)、產(chǎn)品或設(shè)備不必限于清楚地列出的那些步驟或單元,而是可包括沒有清楚地列出的或?qū)τ谶@些過程、方法、產(chǎn)品或設(shè)備固有的其它步驟或單元。
本發(fā)明實(shí)施例一種針對車輛的顏色識別方法,提供一種基于深度學(xué)習(xí)的車輛顏色的識別方法。請參閱圖1,圖1是本發(fā)明實(shí)施例的一個(gè)實(shí)施例示意圖。
步驟101、獲取車輛的車輛圖像;
獲取車輛的圖像,主要是獲取車輛正面含有車牌的圖像。
步驟102、識別車輛圖像中的車牌信息;
當(dāng)獲取到車輛的車輛圖像后,會對車輛圖像中的車牌進(jìn)行定位,根據(jù)車牌定位的結(jié)果獲取車牌的大小、長寬值和位置,得到車牌信息。
步驟103、根據(jù)車牌信息確定車頭區(qū)域以及車頭區(qū)域的車頭圖像;
當(dāng)?shù)玫杰嚺菩畔⒑?,會根?jù)預(yù)定的方法確定出車輛的車頭區(qū)域。在實(shí)際應(yīng)用中,可以按照車牌的長寬值進(jìn)行擴(kuò)大得到基于車牌長寬值的車頭區(qū)域。此處請參閱圖2,例如,從上下左右四個(gè)方向以不同比例根據(jù)車牌的長寬信息外擴(kuò)獲得車頭區(qū)域??梢允菍④嚺谱筮吔缦蜃笸鈹U(kuò)1個(gè)車牌寬度得到車頭區(qū)域的左邊界;以車牌右邊界向右外擴(kuò)1.5個(gè)車牌寬度得到車頭區(qū)域的右邊界;以車牌上邊界向上外擴(kuò)4個(gè)車牌寬度得到車頭區(qū)域的上邊界;以車牌下邊界向下外擴(kuò)2個(gè)車牌寬度得到車頭區(qū)域的下邊界。這樣從四個(gè)方向分別外擴(kuò)得到車頭區(qū)域,然后根據(jù)車頭區(qū)域得到相關(guān)的車頭區(qū)域的車頭圖像。
步驟104、將車頭圖像轉(zhuǎn)換成YUV格式的圖像,得到車頭YUV圖像;
將獲取到的彩色的車頭圖像裝換成YUV格式的圖像,YUV圖像中前一半數(shù)據(jù)為Y分量數(shù)據(jù),即灰度圖像數(shù)據(jù),后一半數(shù)據(jù)存儲為UV數(shù)據(jù),即色差信息圖像。
步驟105、從車頭YUV圖像中抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù)并重新組合得到預(yù)設(shè)大小的車頭YUYV圖像;
將得到的車頭YUV圖像中按照既定的規(guī)則抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù),然后對數(shù)據(jù)重新組合得到車頭YUYV圖像。此處請參閱圖3,具體的實(shí)現(xiàn)方式可以如下:將車頭YUV圖像的數(shù)據(jù)按照數(shù)據(jù)位置順序標(biāo)記,Y分量數(shù)據(jù)的第一行第一列標(biāo)記為Y11,第一行第二列記為Y12,第二行第一列記為Y21。以此類推將Y、U、V分量數(shù)據(jù)都標(biāo)記。其中Y分量數(shù)據(jù)每一個(gè)數(shù)據(jù)都有相應(yīng)的標(biāo)記,U、V分量數(shù)據(jù)對應(yīng)Y數(shù)據(jù)進(jìn)行標(biāo)記,U分量數(shù)據(jù)只有奇數(shù)的列中存在,例如U11、U13、U15等;V分量數(shù)據(jù)只有偶數(shù)的列中存在,例如V12、V14、V16等。從車頭YUV圖像中的第一行第一列數(shù)據(jù)位Y11開始抽取,然后抽取與Y11坐標(biāo)相同的U分量數(shù)據(jù)U11,再抽取與Y11相鄰的Y12以及對應(yīng)的V分量數(shù)據(jù)V12,這四個(gè)組成一個(gè)新的數(shù)據(jù)組合Y11U11Y12V12。Y11U11Y12V12為車頭YUYV圖像的第一行的開始的數(shù)據(jù),之后再在車頭YUV圖像的Y分量數(shù)據(jù)中開始抽取,抽取與Y12相隔兩列的Y15以及相鄰的Y16,再對應(yīng)抽取U15和V16。所以抽取規(guī)則是抽取相鄰兩列的Y分量數(shù)據(jù)以及對應(yīng)的U、V分量數(shù)據(jù)后組合成一組數(shù)據(jù),之后相隔兩列再次抽取相鄰的兩組Y分量數(shù)據(jù)以及對應(yīng)的U、V分量數(shù)據(jù),這樣組成第一行車頭YUYV圖像。對于第二行的車頭YUYV圖像的數(shù)據(jù),從與第一行Y分量數(shù)據(jù)相隔一行的Y分量數(shù)據(jù)開始抽取,即第一行車頭YUYV圖像從Y11開始抽取,第二行車頭YUYV圖像從Y31開始抽取,其他抽取規(guī)則與前述相同。最后得到全部的車頭YUYV圖像的數(shù)據(jù),如圖3所示。抽取數(shù)據(jù)直到得到預(yù)設(shè)大小的車頭YUYV圖像后停止,例如可以是128像素乘以32像素的車頭YUYV圖像。
步驟106、將車頭YUYV圖像輸入至基于YUYV圖像訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型;
得到車頭YUYV圖像后,將車頭YUYV圖像輸入到經(jīng)過訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型。對于卷積神經(jīng)網(wǎng)絡(luò)模型的訓(xùn)練,具體方法如下:獲取多種顏色的多張圖片,例如可以獲取黑、白、銀、灰、紅、黃、藍(lán)、綠、紫、棕、橙、粉等顏色,每種收集2000張不同角度及尺寸的128像素乘以32像素的YUYV圖像。YUYV圖像的獲取方式與步驟105中獲取車頭YUYV圖像的方式相似。獲取到顏色的YUYV圖像后,進(jìn)行數(shù)據(jù)處理,將其并歸一化到-1到1。然后使用caffe框架,設(shè)計(jì)5層網(wǎng)絡(luò)模型。第一層為17乘以5的卷積層,生成6個(gè)maps;第二層為4乘以4的pooling層,對應(yīng)6個(gè)maps;第三層為9乘以2的卷積層,生成16個(gè)maps;第四層為2乘以2的pooling層,對應(yīng)16個(gè)maps;第五層為10乘以3的卷積層,生成500個(gè)maps;第六層為全連接層,對應(yīng)12乘以1的輸出結(jié)果,其中12是12種顏色類別。
步驟107、根據(jù)卷積神經(jīng)網(wǎng)絡(luò)模型的輸出結(jié)果確定車輛的車頭的顏色;
將車頭YUYV圖像輸入至基于YUYV圖像訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型后,得到輸出的顏色后確定車頭的顏色即為卷積神經(jīng)網(wǎng)絡(luò)模型輸出的顏色結(jié)果。
步驟108、根據(jù)車頭的顏色確定車輛的顏色;
得到車頭的顏色后,從車頭的顏色確定整體車輛的顏色。這種采用車頭區(qū)域整體顏色信息代替車身局部顏色信息,減少了對車身局部顏色待識別區(qū)域定位的要求,增強(qiáng)了車頭區(qū)域整體顏色識別對局部光照的魯棒性。
上面從本發(fā)明實(shí)施例的一種車位檢測方法進(jìn)行描述,下面對本發(fā)明實(shí)施例的一種裝置進(jìn)行描述。
請參閱圖4,本發(fā)明實(shí)施例的一種裝置包括:
裝置包括獲取模塊401、識別模塊402、第一確定模塊403、轉(zhuǎn)換模塊404、抽取模塊405、輸入模塊406、第二確定模塊407、訓(xùn)練模塊408、第三確定模塊409。
獲取模塊401,用于獲取車輛的車輛圖像。
識別模塊402,用于識別車輛圖像中的車牌信息,車牌信息包括車牌的長度、寬度以及位置。
第一確定模塊403,用于根據(jù)車牌信息確定車頭區(qū)域以及車頭區(qū)域的車頭圖像。
進(jìn)一步的,第一確定模塊403包括第一獲取單元4031、第一增大單元4032、第二增大單元4033、確定單元4034。
第一獲取單元4031,用于根據(jù)車牌信息得到車牌的長度以及寬度。
第一增大單元4032,用于將車牌的長度值按照第一預(yù)設(shè)比值增大并作為車頭區(qū)域的長度值。
第二增大單元4033,用于將車牌的寬度值按照第二預(yù)設(shè)比值增大并作為車頭區(qū)域的寬度值。
確定單元4034,用于確定車頭區(qū)域并得到車頭區(qū)域的車頭圖像。
轉(zhuǎn)換模塊404,用于將車頭圖像轉(zhuǎn)換成YUV格式的圖像,得到車頭YUV圖像。
抽取模塊405,用于從車頭YUV圖像中抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù)并重新組合得到預(yù)設(shè)大小的車頭YUYV圖像。
進(jìn)一步的,抽取模塊405包括抽取單元4051、組合單元4052。
抽取單元4051,用于從車頭YUV圖像中按照預(yù)設(shè)條件抽取出Y分量數(shù)據(jù)、U分量數(shù)據(jù)、V分量數(shù)據(jù)。
組合單元4052,用于按照Y分量數(shù)據(jù)、U分量數(shù)據(jù)、Y分量數(shù)據(jù)、V分量數(shù)據(jù)的順序組合得到車頭YUYV圖像。
輸入模塊406,用于將車頭YUYV圖像輸入至基于YUYV圖像訓(xùn)練的卷積神經(jīng)網(wǎng)絡(luò)模型。
第二確定模塊407,用于根據(jù)卷積神經(jīng)網(wǎng)絡(luò)模型的輸出結(jié)果確定車輛的車頭的顏色。
訓(xùn)練模塊408,用于訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)模型。
進(jìn)一步的,訓(xùn)練模塊408包括第二獲取單元4081、訓(xùn)練單元4082。
第二獲取單元4081,用于獲取一種顏色以上的單一顏色圖像轉(zhuǎn)換成的顏色YUYV圖像,顏色YUYV圖像的大小與車頭YUYV圖像的大小相等。
訓(xùn)練單元4082,用于利用顏色YUYV圖像訓(xùn)練卷積神經(jīng)網(wǎng)絡(luò)模型。
第三確定模塊409,用于根據(jù)車輛的車頭的顏色確定車輛的顏色。
所屬領(lǐng)域的技術(shù)人員可以清楚地了解到,為描述的方便和簡潔,上述描述的系統(tǒng),裝置和單元的具體工作過程,可以參考前述方法實(shí)施例中的對應(yīng)過程,在此不再贅述。
在本申請所提供的幾個(gè)實(shí)施例中,應(yīng)該理解到,所揭露的系統(tǒng),裝置和方法,可以通過其它的方式實(shí)現(xiàn)。例如,以上所描述的裝置實(shí)施例僅僅是示意性的,例如,所述單元的劃分,僅僅為一種邏輯功能劃分,實(shí)際實(shí)現(xiàn)時(shí)可以有另外的劃分方式,例如多個(gè)單元或組件可以結(jié)合或者可以集成到另一個(gè)系統(tǒng),或一些特征可以忽略,或不執(zhí)行。另一點(diǎn),所顯示或討論的相互之間的耦合或直接耦合或通信連接可以是通過一些接口,裝置或單元的間接耦合或通信連接,可以是電性,機(jī)械或其它的形式。
所述作為分離部件說明的單元可以是或者也可以不是物理上分開的,作為單元顯示的部件可以是或者也可以不是物理單元,即可以位于一個(gè)地方,或者也可以分布到多個(gè)網(wǎng)絡(luò)單元上。可以根據(jù)實(shí)際的需要選擇其中的部分或者全部單元來實(shí)現(xiàn)本實(shí)施例方案的目的。
以上所述,以上實(shí)施例僅用以說明本發(fā)明的技術(shù)方案,而非對其限制;盡管參照前述實(shí)施例對本發(fā)明進(jìn)行了詳細(xì)的說明,本領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)理解:其依然可以對前述各實(shí)施例所記載的技術(shù)方案進(jìn)行修改,或者對其中部分技術(shù)特征進(jìn)行等同替換;而這些修改或者替換,并不使相應(yīng)技術(shù)方案的本質(zhì)脫離本發(fā)明各實(shí)施例技術(shù)方案的精神和范圍。