一種基于智能冰箱的食品識(shí)別方法
【專利摘要】本發(fā)明涉及智能冰箱、食品管理、圖像識(shí)別等領(lǐng)域，尤其是涉及一種基于智能冰箱的食品識(shí)別方法。本發(fā)明所要解決的技術(shù)問題是：針對(duì)現(xiàn)有技術(shù)中存在的技術(shù)問題，提供一種基于智能冰箱的食品識(shí)別方法，使得人們?cè)谑褂弥悄鼙涞臅r(shí)候，減少或免去對(duì)新添加食品進(jìn)行頻繁的信息手動(dòng)輸入操作，節(jié)約時(shí)間，提高使用效率。本發(fā)明通過智能冰箱采集食品信息，并通過云服務(wù)器進(jìn)行食品圖像信息的匹配處理，完成本發(fā)明。
【專利說明】—種基于智能冰箱的食品識(shí)別方法
[0001]
【技術(shù)領(lǐng)域】
[0002]本發(fā)明涉及智能冰箱、食品管理、圖像識(shí)別等領(lǐng)域，尤其是涉及一種基于智能冰箱的食品識(shí)別方法。
【背景技術(shù)】
[0003]隨著移動(dòng)互聯(lián)網(wǎng)、云計(jì)算技術(shù)的快速發(fā)展，智能家居也越來越得到人們的關(guān)注，越來越多的人開始注意到智能家居所能給人們帶來的便利。智能冰箱作為智能家居的重要組成部分，但在食品管理方面，對(duì)新添加的食品進(jìn)行手動(dòng)的文字輸入非常不方便，不但浪費(fèi)時(shí)間，對(duì)老人或者不熟悉文字輸入的人群來說也是一個(gè)比較困難的事情。

【發(fā)明內(nèi)容】

[0004]本發(fā)明所要解決的技術(shù)問題是:針對(duì)現(xiàn)有技術(shù)中存在的技術(shù)問題，提供一種基于智能冰箱的食品識(shí)別方法，使得人們?cè)谑褂弥悄鼙涞臅r(shí)候，減少或免去對(duì)新添加食品進(jìn)行頻繁的信息手動(dòng)輸入操作，節(jié)約時(shí)間，提高使用效率。
[0005]本發(fā)明采用的技術(shù)方案如下:
一種基于智能冰箱的食品識(shí)別方法包括:
步驟1:通過智能冰箱內(nèi)置攝像頭對(duì)將要放入冰箱的食品進(jìn)行拍照，然后智能冰箱對(duì)所拍食品圖片進(jìn)行圖像處理，提取所拍食品的顏色特征值、形狀特征值后，與本地用戶食品信息庫進(jìn)行匹配，若沒有匹配項(xiàng)，則將提取到的食品特征值發(fā)送至云端服務(wù)器；否則，記錄此次食品添加操作到用戶食品信息庫中對(duì)應(yīng)添加記錄項(xiàng)；
步驟2:云端服務(wù)器接收到信號(hào)采集模塊發(fā)送的食品特征值，將食品信息特征值與公共食品信息庫中進(jìn)行食品信息匹配，若在公共食品信息庫中匹配到對(duì)應(yīng)食品圖像信息，則將該食品在公共食品信息庫中的相關(guān)食品信息添加到用戶食品信息庫；否則，在用戶食品信息庫中新添加一條該食品的相關(guān)信息，將所采集到的食品圖像作為該食品的食品圖片，自定義食品相關(guān)彳目息，并進(jìn)行添加及存儲(chǔ)。
[0006]所述步驟I之前還包括:智能冰箱從云端服務(wù)器中拷貝一份用戶食品信息庫到智能冰箱存儲(chǔ)器中本地用戶食品信息庫，拷貝到智能冰箱存儲(chǔ)器中的本地用戶食品信息庫將定時(shí)依據(jù)云端服務(wù)器中的用戶食品信息庫進(jìn)行更新操作，與云端服務(wù)器中的用戶食品信息庫數(shù)據(jù)保持一致。
[0007]所述圖像信息特征值包括食品顏色、形狀和最大輪廓線，根據(jù)食品圖像信息特征值進(jìn)行用戶食品信息庫的制作。
[0008]所述步驟3中將該食品在公共數(shù)據(jù)庫中的相關(guān)食品信息添加到用戶食品信息庫之前還包括按添加記錄次數(shù)降序展示匹配到的食品信息。
[0009]所述步驟2中，當(dāng)食品圖像信息匹配處理的結(jié)果為多個(gè)食品類型時(shí)，云端服務(wù)器默認(rèn)是用戶食品信息庫中多個(gè)匹配項(xiàng)供用戶選擇。
[0010]所述進(jìn)行食品圖像信息識(shí)別采用模糊識(shí)別算法。
[0011]一種基于智能冰箱的食品模糊識(shí)別方法還包括步驟4:云端服務(wù)器定時(shí)清理用戶食品信息庫始終沒有添加過的食品信息
綜上所述，由于采用了上述技術(shù)方案，本發(fā)明的有益效果是:
能夠方便快捷地通過食品智能識(shí)別模塊快速地添加食品、注冊(cè)食品信息，增加了操作的靈活性，提升了用戶使用的交互性、體驗(yàn)感和實(shí)用性。
【專利附圖】

【附圖說明】
[0012]本發(fā)明將通過例子并參照附圖的方式說明，其中:
圖1智能冰箱食品智能識(shí)別流程圖。
[0013]圖2智能冰箱食品模糊識(shí)別示意圖。
【具體實(shí)施方式】
[0014]本說明書中公開的所有特征，或公開的所有方法或過程中的步驟，除了互相排斥的特征和/或步驟以外，均可以以任何方式組合。
[0015]本說明書(包括任何附加權(quán)利要求、摘要和附圖)中公開的任一特征，除非特別敘述，均可被其他等效或具有類似目的的替代特征加以替換。即，除非特別敘述，每個(gè)特征只是一系列等效或類似特征中的一個(gè)例子而已。
[0016]一、本發(fā)明相關(guān)說明:
1、用戶食品信息庫針對(duì)每個(gè)用戶是不同的食品信息庫。
[0017]2、食品相關(guān)信息可以是食品名稱,保質(zhì)期等等。
[0018]2、本發(fā)明中采用兩個(gè)模塊:
I)智能冰箱:通過對(duì)新添加的食品進(jìn)行圖像采集，并將食品圖像信息上傳至云服務(wù)器。
[0019]2)云服務(wù)器:接收智能冰箱發(fā)送的食品圖像信息，根據(jù)此圖像特征值(如顏色特征值、形狀特征值等)進(jìn)行相關(guān)數(shù)據(jù)匹配。
[0020]3、由于食品種類繁多，雖然通過圖像處理獲取了具體的圖像特征值，但是符合該圖像特征值的食品仍然有很多。所以本發(fā)明采用模糊識(shí)別的方式進(jìn)行食品識(shí)別。
[0021]二、工作原理是:
I)如果用戶在使用智能冰箱的食品管理功能時(shí)，是第一次使用智能冰箱的食品智能識(shí)別功能添加新食品，那么在云服務(wù)器進(jìn)行數(shù)據(jù)匹配時(shí)，首先選擇最原始的食品信息庫，最原始的食品信息庫是系統(tǒng)為用戶第一次使用食品智能識(shí)別功能時(shí)提供的數(shù)據(jù)匹配庫，主要特點(diǎn)是本食品信息庫主要包含最熟悉最常用的食品信息，一般都是每家每戶都經(jīng)常食用的，例如蘋果，香蕉，青椒，黃瓜，大蒜等等。使用本信息庫能夠快速準(zhǔn)確的識(shí)別出食品。
[0022]2)在用戶使用食品智能識(shí)別的過程當(dāng)中，云服務(wù)器將會(huì)記錄用戶每一次添加的食品信息，并把數(shù)據(jù)記錄在用戶食品信息庫中，當(dāng)用戶在添加新食品時(shí)，系統(tǒng)將根據(jù)用戶以往的添加記錄優(yōu)先匹配之前添加次數(shù)最多的食品。隨著時(shí)間的推移，最原始的食品信息庫將慢慢變成用戶的個(gè)性化食品信息庫。這樣在食品信息匹配的時(shí)候，匹配過程將越來越快、越來越精準(zhǔn)。[0023]3)當(dāng)用戶在添加食品時(shí)，如果沒有匹配到準(zhǔn)確的食品信息，那么用戶可以有兩個(gè)選項(xiàng)。第一個(gè)是通過將原本匹配使用的個(gè)人食品信息庫切換成公共食品信息庫后再次進(jìn)行匹配操作。公共食品信息庫中包含所有用戶自定義的食品信息。如果還是沒有匹配到準(zhǔn)確的食品信息，那么就選擇第二個(gè)選項(xiàng)。第二個(gè)選項(xiàng)是將攝像頭所拍到的圖片作為該食品的食品圖片存儲(chǔ)于用戶食品信息庫中。
[0024]4)由于食品種類繁多，每次匹配可能會(huì)有多個(gè)選項(xiàng)，所以匹配的多個(gè)結(jié)果將根據(jù)用戶之前相應(yīng)食品的添加記錄次數(shù)的降序展示出來，供用戶選擇。
[0025]三:具體實(shí)施例。
[0026]如圖1所示，當(dāng)用戶需要往冰箱里添加新購入食品時(shí)，首先啟動(dòng)智能冰箱食品管理功能，通過賬號(hào)、密碼進(jìn)行登錄。然后點(diǎn)擊食品管理模塊中的食品智能識(shí)別按鈕，進(jìn)入食品智能識(shí)別界面，此時(shí)智能冰箱的攝像頭將自動(dòng)開啟，用戶通過屏幕指示，將要添加的食品對(duì)準(zhǔn)攝像頭。
[0027]當(dāng)攝像頭拍照完成后，屏幕會(huì)出現(xiàn)一個(gè)讓用戶稍等片刻的指示性提示。系統(tǒng)將會(huì)對(duì)采集到的照片進(jìn)行一系列的圖像處理，通過圖像處理分析過后提取所拍食品的顏色特征值、形狀特征值。
[0028]下面將結(jié)合圖2所示食品模糊識(shí)別示意圖進(jìn)行詳細(xì)闡述:
當(dāng)智能冰箱處理得到所拍食品的顏色、形狀、大小特征值后，智能冰箱將這些食品相關(guān)特征值傳遞到云服務(wù)器。云服務(wù)器在接收到這些食品相關(guān)特征值后，首先在用戶食品信息庫中去匹配這些食品相關(guān)特征值。
[0029]比如此時(shí)所要加入的食品是橙子，那么橙子在云服務(wù)器中的食品相關(guān)特征值表示的是顏色為黃色、形狀為圓形。如果用戶此前往冰箱里加入的顏色為黃色、形狀為圓形的食品是橙子、芒果、水晶梨，并且用戶在之前往冰箱里加入橙子的次數(shù)是最多的，那么此時(shí)的食品特征值經(jīng)過與用戶個(gè)人食品信息庫匹配過后，將優(yōu)先判斷用戶此時(shí)需要加入的食品為橙子。如果用戶在之前只是有時(shí)往冰箱里加入橙子，也就是說用戶之前添加橙子的次數(shù)不是很多，不及添加芒果的次數(shù)，那么此時(shí)的食品特征值經(jīng)過與用戶個(gè)人食品信息庫匹配過后可能出現(xiàn)的匹配結(jié)果為芒果、橙子、水晶梨。用戶此時(shí)只需要在這三個(gè)匹配結(jié)果中手動(dòng)選擇橙子，這樣就完成了 一次模糊識(shí)別。
[0030]如果用戶此前往冰箱里加入的顏色為黃色、形狀為圓形的食品是橘子、芒果、水晶梨，并沒有橙子的添加記錄，那么此時(shí)食品特征值經(jīng)過與用戶食品信息庫匹配過后將提示用戶沒有匹配到相關(guān)食品信息。此時(shí)用戶將此時(shí)食品特征值將與公共食品信息庫進(jìn)行匹配，匹配結(jié)果將是其他所有用戶之前往冰箱里添加過的顏色為黃色、形狀為圓形的食品，結(jié)果將按照添加次數(shù)的降序排列，用戶此時(shí)會(huì)在結(jié)果列表中找到橙子的選項(xiàng)。
[0031]如果其他所有的用戶之前都沒有往冰箱里添加過橙子，那么用戶此時(shí)可以選擇自定義食品信息，將所拍圖片作為該食品的食品圖片記錄在用戶食品信息庫中。這樣，用戶在以后添加橙子的時(shí)候?qū)⒅苯油ㄟ^用戶食品信息庫就能匹配到橙子選項(xiàng)。
[0032]采用本發(fā)明，實(shí)現(xiàn)了智能冰箱食品模糊識(shí)別的功能，不僅能將用戶平時(shí)經(jīng)常食用的食品記錄在用戶食品信息庫中，也能幫助用戶快速地識(shí)別出所要添加的食品。具有簡(jiǎn)單實(shí)用、方便快捷的優(yōu)點(diǎn)。避免了用戶頻繁的手動(dòng)輸入，節(jié)約了時(shí)間，提升了用戶的體驗(yàn)。
[0033]本發(fā)明并不局限于前述的【具體實(shí)施方式】。本發(fā)明擴(kuò)展到任何在本說明書中披露的 新特征或任何新的組合，以及披露的任一新的方法或過程的步驟或任何新的組合。
【權(quán)利要求】
1.一種基于智能冰箱的食品識(shí)別方法，其特征在于包括: 步驟1:通過智能冰箱內(nèi)置攝像頭對(duì)將要放入冰箱的食品進(jìn)行拍照，然后智能冰箱對(duì)所拍食品圖片進(jìn)行圖像處理，提取所拍食品的顏色特征值、形狀特征值后，與本地用戶食品信息庫進(jìn)行匹配，若沒有匹配項(xiàng)，則將提取到的食品特征值發(fā)送至云端服務(wù)器；否則，記錄此次食品添加操作到用戶食品信息庫中對(duì)應(yīng)添加記錄項(xiàng)； 步驟2:云端服務(wù)器接收到信號(hào)采集模塊發(fā)送的食品特征值，將食品信息特征值與公共食品信息庫中進(jìn)行食品信息匹配，若在公共食品信息庫中匹配到對(duì)應(yīng)食品圖像信息，則將該食品在公共食品信息庫中的相關(guān)食品信息添加到用戶食品信息庫；否則，在用戶食品信息庫中新添加一條該食品的相關(guān)信息，將所采集到的食品圖像作為該食品的食品圖片，自定義食品相關(guān)彳目息，并進(jìn)行添加及存儲(chǔ)。
2.根據(jù)權(quán)利要求1所述的一種基于智能冰箱的食品模糊識(shí)別方法，其特征在于步驟I之前:智能冰箱從云端服務(wù)器中拷貝一份用戶食品信息庫到智能冰箱存儲(chǔ)器中本地用戶食品信息庫，拷貝到智能冰箱存儲(chǔ)器中的本地用戶食品信息庫將定時(shí)依據(jù)云端服務(wù)器中的用戶食品信息庫進(jìn)行更新操作，與云端服務(wù)器中的用戶食品信息庫數(shù)據(jù)保持一致。
3.根據(jù)權(quán)利要求2所述的一種基于智能冰箱的食品模糊識(shí)別方法，其特征在于所述圖像信息特征值包括食品顏色、形狀和最大輪廓線，根據(jù)食品圖像信息特征值進(jìn)行用戶食品信息庫的制作。
4.根據(jù)權(quán)利要求3所述的一種基于智能冰箱的食品模糊識(shí)別方法，其特征在于所述步驟3中將該食品在公共數(shù)據(jù)庫中的相關(guān)食品信息添加到用戶食品信息庫之前還包括按添加記錄次數(shù)降序展示匹配到的食品信息。
5.根據(jù)權(quán)利要求4所述的一種基于智能冰箱的食品模糊識(shí)別方法，其特征在于所述步驟2中，當(dāng)食品圖像信息匹配處理的結(jié)果為多個(gè)食品類型時(shí)，云端服務(wù)器默認(rèn)是用戶食品信息庫中多個(gè)匹配項(xiàng)供用戶選擇。
6.根據(jù)權(quán)利要求5所述的一種基于智能冰箱的食品模糊識(shí)別方法，其特征在于所述進(jìn)行食品圖像信息識(shí)別采用模糊識(shí)別算法。
7.根據(jù)權(quán)利要求1至6之一所述的一種基于智能冰箱的食品模糊識(shí)別方法，其特征在于還包括步驟4:云端服務(wù)器定時(shí)清理用戶食品信息庫始終沒有添加過的食品信息。
【文檔編號(hào)】F25D29/00GK103604271SQ201310545110
【公開日】2014年2月26日 申請(qǐng)日期:2013年11月7日 優(yōu)先權(quán)日:2013年11月7日
【發(fā)明者】呂釗, 劉柏良, 劉橋, 鄭偉, 文茂陽 申請(qǐng)人:四川長(zhǎng)虹電器股份有限公司