本發(fā)明涉及智能座艙,特別涉及一種駕駛員的缺水狀態(tài)檢測方法及裝置。
背景技術:
1、在現(xiàn)代駕駛環(huán)境中,確保駕駛員的健康和警覺狀態(tài)對于提高道路安全至關重要。駕駛員的缺水狀態(tài)可以顯著影響其反應時間和判斷能力,因此需要一個系統(tǒng)來實時監(jiān)測和提醒駕駛員關于其水分狀態(tài),以減少由缺水引起的駕駛風險。
2、當前的駕駛員監(jiān)測系統(tǒng)主要關注于行為和車輛運行狀態(tài),很少有系統(tǒng)能夠綜合駕駛員的生理信號進行實時分析和反饋?,F(xiàn)有一般監(jiān)測駕駛員的缺水狀態(tài)主要通過人臉識別或者借助單獨設備,但這些方式存在無法有效地監(jiān)測駕駛員的缺水狀態(tài)、缺乏將車輛行駛狀態(tài)與駕駛員行為有效結合的機制、侵犯隱私等缺點,例如:
3、(1)一種基于視覺的艙內喝水狀態(tài)檢測算法,基于人體上肢關鍵點檢測器檢測判斷駕駛員的狀態(tài),若檢測到駕駛員單手離開方向盤則基于喝水檢測器判斷駕駛員是否在喝水,如果駕駛員在喝水則判斷圖像中是否存在喝水容器;基于精細分類器對喝水容器進行分類,判斷為敞口容器或吸管杯;若喝水容器為敞口容器,則基于人臉關鍵點檢測來判斷司機頭部俯仰角度判斷是否影響視線,基于人臉關鍵點檢測來判斷司機頭部俯仰角度判斷是否影響視線。該方法依賴對駕駛員特征的感知,容易受到外部環(huán)境的影響,且面部感知會造成隱私侵犯的問題;
4、(2)基于深度學習的喝水等異常行為檢測方法,該方法需要借助dlib等基于transformer模型,無法在車載芯片上部署;
5、(3)一種駕駛狀態(tài)監(jiān)測方法和裝置,對駕駛員圖像進行駕駛員狀態(tài)檢測,根據(jù)駕駛員狀態(tài)檢測的結果,輸出駕駛員的駕駛狀態(tài)監(jiān)測結果,進行智能駕駛控制,同樣存在對駕駛員隱私侵犯的問題。
技術實現(xiàn)思路
1、本發(fā)明提供一種駕駛員的缺水狀態(tài)檢測方法及裝置,以解決現(xiàn)有通過人臉識別或者借助單獨設備的方式無法有效地監(jiān)測駕駛員的缺水狀態(tài),且缺乏將車輛行駛狀態(tài)與駕駛員行為有效結合的機制,容易侵犯隱私等問題。
2、本發(fā)明第一方面實施例提供一種駕駛員的缺水狀態(tài)檢測方法,包括以下步驟:采集駕駛員的多個駕駛行為圖像幀;從每個駕駛行為圖像幀中,提取所述駕駛員的至少一個關鍵特征;獲取對應于所述每個駕駛行為圖像幀的車輛的行駛狀態(tài),并根據(jù)所述行駛狀態(tài)和所述至少一個關鍵特征識別所述駕駛員的實際缺水狀態(tài)。
3、可選地,所述提取所述駕駛員的至少一個關鍵特征,包括:
4、識別每個駕駛行為圖像幀中的嘴唇區(qū)域;將所述嘴唇區(qū)域中存在的舌頭進行分割,以獲得真實嘴唇區(qū)域;確定所述真實嘴唇區(qū)域中駕駛員的人物嘴唇的至少一個關鍵點,作為所述至少一個關鍵特征。
5、可選地,所述根據(jù)所述行駛狀態(tài)和所述至少一個關鍵特征識別所述駕駛員的實際缺水狀態(tài),包括:
6、根據(jù)所述行駛狀態(tài)計算所述真實嘴唇區(qū)域的第一膨脹系數(shù);獲取所述駕駛員的喝水動作,并根據(jù)所述喝水動作計算所述真實嘴唇區(qū)域的第二膨脹系數(shù);
7、根據(jù)膨脹系數(shù)基數(shù)、所述第一膨脹系數(shù)、所述第二膨脹系數(shù)計算最終膨脹系數(shù);根據(jù)所述至少一個關鍵特征和所述最終膨脹系數(shù)獲取所述駕駛員的舔舐動作,以根據(jù)所述舔舐動作確定所述實際缺水狀態(tài)。。
8、可選地,還包括:根據(jù)所述實際缺水狀態(tài)匹配所述駕駛員的缺水提醒動作;
9、基于所述缺水提醒動作控制所述車輛進行缺水提醒。
10、可選地,所述根據(jù)所述實際缺水狀態(tài)匹配所述駕駛員的缺水提醒動作,包括:
11、獲取所述駕駛員的提醒偏好和/或駕駛習慣;基于所述提醒偏好和/或所述駕駛習慣,根據(jù)所述實際缺水狀態(tài)匹配所述駕駛員的缺水提醒動作,其中,所述缺水提醒動作包括提醒頻率、提醒方式、提醒強度中的至少之一。
12、可選地,還包括:
13、判斷所述實際缺水狀態(tài)是否滿足預設休息條件;如果滿足所述預設休息條件,則對所述駕駛員進行休息提醒,且在提醒持續(xù)時長大于預設時長時,規(guī)劃所述車輛的休息路徑,并控制所述車輛沿著所述休息路徑停車。
14、本發(fā)明第二方面實施例提供一種駕駛員的缺水狀態(tài)檢測裝置,包括:采集模塊,用于采集駕駛員的多個駕駛行為圖像幀;提取模塊,用于從每個駕駛行為圖像幀中,提取所述駕駛員的至少一個關鍵特征;識別模塊,用于獲取對應于所述每個駕駛行為圖像幀的車輛的行駛狀態(tài),并根據(jù)所述行駛狀態(tài)和所述至少一個關鍵特征識別所述駕駛員的實際缺水狀態(tài)。
15、本發(fā)明第三方面實施例提供一種電子設備,包括:存儲器、處理器及存儲在所述存儲器上并可在所述處理器上運行的計算機程序,所述處理器執(zhí)行所述程序,以實現(xiàn)如上述實施例所述的駕駛員的缺水狀態(tài)檢測方法。
16、本發(fā)明第四方面實施例提供一種計算機程序產(chǎn)品,該計算機程序/指令被處理器執(zhí)行時實現(xiàn)如上的駕駛員的缺水狀態(tài)檢測方法。
17、本發(fā)明第五方面實施例提供一種計算機可讀存儲介質,所述計算機可讀存儲介質存儲計算機程序,該程序被處理器執(zhí)行時實現(xiàn)如上的駕駛員的缺水狀態(tài)檢測方法。
18、本發(fā)明實施例提出的駕駛員的缺水狀態(tài)檢測方法及裝置,通過綜合考慮駕駛員的舔嘴唇行為,車輛行駛狀態(tài)和駕駛員的喝水行為,實時評估駕駛員的缺水狀態(tài),解決了現(xiàn)有通過人臉識別或者借助單獨設備的方式無法有效地監(jiān)測駕駛員的缺水狀態(tài),且缺乏將車輛行駛狀態(tài)與駕駛員行為有效結合的機制,容易侵犯隱私等問題,不僅減少由缺水引起的精神不集中或疲勞駕駛,提高了駕駛安全,還提供個性化反饋,例如對駕駛員提供及時的水分補充提醒,可適應不同駕駛員的行為和需要。
19、本發(fā)明附加的方面和優(yōu)點將在下面的描述中部分給出,部分將從下面的描述中變得明顯,或通過本發(fā)明的實踐了解到。
1.一種駕駛員的缺水狀態(tài)檢測方法,其特征在于,包括以下步驟:
2.根據(jù)權利要求1所述的駕駛員的缺水狀態(tài)檢測方法,其特征在于,所述提取所述駕駛員的至少一個關鍵特征,包括:
3.根據(jù)權利要求2所述的駕駛員的缺水狀態(tài)檢測方法,其特征在于,所述根據(jù)所述行駛狀態(tài)和所述至少一個關鍵特征識別所述駕駛員的實際缺水狀態(tài),包括:
4.根據(jù)權利要求1所述的駕駛員的缺水狀態(tài)檢測方法,其特征在于,還包括:
5.根據(jù)權利要求4所述的駕駛員的缺水狀態(tài)檢測方法,其特征在于,所述根據(jù)所述實際缺水狀態(tài)匹配所述駕駛員的缺水提醒動作,包括:
6.根據(jù)權利要求1所述的駕駛員的缺水狀態(tài)檢測方法,其特征在于,還包括:
7.一種駕駛員的缺水狀態(tài)檢測裝置,其特征在于,包括:
8.一種車輛,其特征在于,包括:存儲器、處理器及存儲在所述存儲器上并可在所述處理器上運行的計算機程序,所述處理器執(zhí)行所述程序,以實現(xiàn)如權利要求1-6任一項所述的駕駛員的缺水狀態(tài)檢測方法。
9.一種計算機程序產(chǎn)品,其特征在于,該計算機程序/指令被處理器執(zhí)行時實現(xiàn)權利要求1-6任一項所述的駕駛員的缺水狀態(tài)檢測方法。
10.一種計算機可讀存儲介質,其上存儲有計算機程序,其特征在于,該程序被處理器執(zhí)行,以用于實現(xiàn)如權利要求1-6任一項所述的駕駛員的缺水狀態(tài)檢測方法。