本發(fā)明涉及智能控制領(lǐng)域，尤其涉及一種用于商品選購的方法和系統(tǒng)。

背景技術(shù)：

目前大型綜合購物中心建筑面積大，品牌多，顧客的選購范圍大、可選商品的種類繁多。顧客在選購商品時(shí)，往往要貨比三家，逐一瀏覽各個(gè)店鋪后進(jìn)行再?zèng)Q定選購目標(biāo)。這時(shí)常常出現(xiàn)以下幾種情況：第一，顧客瀏覽完一層或幾層店鋪后，覺得對之前某個(gè)店鋪的商品較為滿意，這時(shí)又想不起來該店鋪的具體方位；第二，相同類型的商品，雖然款式類似，但是記不清在之前店鋪挑選時(shí)該商品的價(jià)格是多少；第三，覺得某兩個(gè)店鋪的衣服大致相似，但是由于記不清之前店鋪的衣服細(xì)節(jié)，無法做出決定。

對于第一種情況，顧客只能進(jìn)行逐一查找店鋪，憑運(yùn)氣找到中意的店鋪。對于第二和第三種情況，在顧客記住店鋪位置的情況下需要返回之前店鋪查找商品再進(jìn)行比較，而如果客戶記不清店鋪位置，就只能逐一查找。上述三種情況，顧客為了比較商品均要走很多重復(fù)路線，影響了購物效率，降低了購物體驗(yàn)。

技術(shù)實(shí)現(xiàn)要素：

本發(fā)明的發(fā)明人發(fā)現(xiàn)了上述現(xiàn)有技術(shù)中存在問題，并因此針對上述問題中的至少一個(gè)問題提出了一種新的技術(shù)方案。

根據(jù)本發(fā)明的一個(gè)方面，提供了一種用于商品選購的方法，包括：

接收視頻信息；

根據(jù)視頻信息得到用戶的表情識別結(jié)果和興趣度；

根據(jù)所述表情識別結(jié)果和所述興趣度，向用戶下發(fā)商品信息。

在一個(gè)實(shí)施例中，根據(jù)所述視頻信息得到用戶的表情識別結(jié)果的步驟包括：

采用幀間差分法，根據(jù)所述視頻信息中的相鄰兩幀獲得用戶表情特征的暫態(tài)特征信息，所述用戶表情特征包括眉毛到眼睛的距離、眉毛到嘴的距離以及嘴到眼睛的距離；

將暫態(tài)特征信息與所述用戶表情的基準(zhǔn)特征信息進(jìn)行比較，獲得用戶的表情識別結(jié)果，所述表情識別結(jié)果包括滿意和不滿意。

在一個(gè)實(shí)施例中，將暫態(tài)特征信息與所述用戶表情的基準(zhǔn)特征信息進(jìn)行比較，獲得用戶的表情識別結(jié)果的步驟包括：

根據(jù)暫態(tài)特征信息得到暫態(tài)特征值；

根據(jù)基準(zhǔn)特征信息得到基準(zhǔn)特征值；

統(tǒng)計(jì)所述視頻各幀中暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量；

當(dāng)所述數(shù)量超過預(yù)定數(shù)值時(shí)，判斷用戶滿意，否則為不滿意。

在一個(gè)實(shí)施例中，根據(jù)所述視頻信息得到用戶的興趣度的步驟包括：

根據(jù)所述視頻信息統(tǒng)計(jì)用戶的停留時(shí)間；

當(dāng)所述停留時(shí)間超過預(yù)定時(shí)間時(shí)，判斷用戶感興趣，所述興趣度包括感興趣和不感興趣。

在一個(gè)實(shí)施例中，根據(jù)所述表情識別結(jié)果和所述興趣度，向用戶下發(fā)商品信息的步驟包括：

根據(jù)所述表情識別結(jié)果和所述興趣度，向用戶下發(fā)滿意的和/或感興趣的商品信息。

在一個(gè)實(shí)施例中，上述任一實(shí)施例涉及的商品信息包括商品圖像、位置和價(jià)格。

根據(jù)本發(fā)明的另一方面，提供了一種用于商品選購的系統(tǒng)，包括：

視頻單元，用于接收視頻信息；

表情分析單元，用于根據(jù)所述視頻信息得到用戶的表情識別結(jié)果；

興趣度分析單元，用于根據(jù)所述視頻信息得到用戶的興趣度；

發(fā)送單元，用于根據(jù)所述表情識別結(jié)果和所述興趣度，向用戶下發(fā)商品信息。

在一個(gè)實(shí)施例中，所述表情分析單元，具體用于采用幀間差分法，根據(jù)所述視頻信息中的相鄰兩幀獲得用戶表情特征的暫態(tài)特征信息，所述用戶表情特征包括眉毛到眼睛的距離、眉毛到嘴的距離以及嘴到眼睛的距離；將暫態(tài)特征信息與所述用戶表情的基準(zhǔn)特征信息進(jìn)行比較，獲得用戶的表情識別結(jié)果，所述表情識別結(jié)果包括滿意和不滿意。

在一個(gè)實(shí)施例中，所述表情分析單元，還用于根據(jù)暫態(tài)特征信息得到暫態(tài)特征值；根據(jù)基準(zhǔn)特征信息得到基準(zhǔn)特征值；統(tǒng)計(jì)所述視頻各幀中暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量；當(dāng)所述數(shù)量超過預(yù)定數(shù)值時(shí)，判斷用戶滿意，否則為不滿意。

在一個(gè)實(shí)施例中，所述興趣度分析單元具體用于根據(jù)所述視頻信息統(tǒng)計(jì)用戶的停留時(shí)間；當(dāng)所述停留時(shí)間超過預(yù)定時(shí)間時(shí)，判斷用戶感興趣，所述興趣度包括感興趣和不感興趣。

在一個(gè)實(shí)施例中，所述發(fā)送單元，具體用于根據(jù)所述表情識別結(jié)果和所述興趣度，向用戶下發(fā)滿意的和/或感興趣的商品信息。

在一個(gè)實(shí)施例中，上述任一實(shí)施例涉及的商品信息包括商品圖像、位置和價(jià)格。

本發(fā)明的用于商品選購的方法和系統(tǒng)，通過對用戶表情識別和興趣度進(jìn)行分析，根據(jù)表情識別結(jié)果和興趣度向用戶下發(fā)商品信息，幫助用戶快速定位滿意商品，節(jié)省了購物時(shí)間，提升了購物體驗(yàn)。

附圖說明

為了更清楚地說明本發(fā)明實(shí)施例中的技術(shù)方案，下面將對實(shí)施例或描述中所需要使用的附圖作簡單地介紹，顯而易見地，下面描述中的附圖僅僅是本發(fā)明的一些實(shí)施例，對于本領(lǐng)域普通技術(shù)人員來講，在不付出創(chuàng)造性勞動(dòng)性的前提下，還可以根據(jù)這些附圖獲得其他的附圖。

圖1為本發(fā)明的用于商品選購的方法的一個(gè)實(shí)施例的示意圖。

圖2為本發(fā)明的用于商品選購的方法中獲得表情識別結(jié)果的方法的一個(gè)實(shí)施例的示意圖。

圖3為本發(fā)明的用于商品選購的方法的另一個(gè)實(shí)施例的示意圖。

圖4為本發(fā)明的用于商品選購的系統(tǒng)的一個(gè)實(shí)施例的示意圖。

具體實(shí)施方式

下面將結(jié)合本發(fā)明實(shí)施例中的附圖，對本發(fā)明實(shí)施例中的技術(shù)方案進(jìn)行清楚、完整地描述，顯然，所描述的實(shí)施例僅僅是本發(fā)明一部分實(shí)施例，而不是全部的實(shí)施例?；诒景l(fā)明中的實(shí)施例，本領(lǐng)域普通技術(shù)人員在沒有作出創(chuàng)造性勞動(dòng)前提下所獲得的所有其他實(shí)施例，都屬于本發(fā)明保護(hù)的范圍。

圖1為本發(fā)明的用于商品選購的方法一個(gè)實(shí)施例的示意圖。優(yōu)選的，本實(shí)施例的方法步驟由本發(fā)明的用于商品選購的系統(tǒng)執(zhí)行。如圖1所示，本實(shí)施例的方法包括：

步驟101，接收視頻信息。

在一個(gè)實(shí)施例中，視頻信息可以從設(shè)置在各店鋪的多個(gè)攝像頭獲取。

步驟102，根據(jù)視頻信息得到用戶的表情識別結(jié)果和興趣度。例如，采用表情識別技術(shù)，對視頻信息中用戶的表情進(jìn)行識別，獲得用戶的表情識別結(jié)果，表情識別結(jié)果包括用戶對商品是否滿意。還可以從視頻信息中獲得用戶對商品的興趣度。

在一個(gè)實(shí)施例中，通過對視頻信息中用戶在某個(gè)柜臺或商品的停留時(shí)間進(jìn)行統(tǒng)計(jì)，當(dāng)停留時(shí)間超過了預(yù)定時(shí)間時(shí)(例如5分鐘)，則判斷用戶對此商品感興趣。

步驟103，根據(jù)表情識別結(jié)果和興趣度，向用戶下發(fā)商品信息。其中，商品信息可以包括但不限于商品圖像、位置和價(jià)格。商品信息可以柜臺、店鋪的位置保存在數(shù)據(jù)庫中，也可以基于視頻信息得到用戶所在的店鋪或柜臺的位置，然后進(jìn)行商品識別，或者通過在視頻信息中獲取的商品二維碼、條形碼編號等代碼進(jìn)行查找。可以僅下發(fā)用 戶滿意的商品信息，僅下發(fā)用戶感興趣的商品信息，或者用戶既感興趣又滿意的商品信息。本領(lǐng)域技術(shù)人員可以根據(jù)具體的應(yīng)用場景靈活配置相應(yīng)的下發(fā)策略。

圖1所示的實(shí)施例中，用戶能夠獲得下發(fā)的商品信息，從而獲得心儀商品的商品圖像、位置和價(jià)格等信息，避免了在購物中心往復(fù)查找商品的不便，從而提高了顧客的購物體驗(yàn)。

圖2為本發(fā)明的用于商品選購的方法中獲得用戶表情識別結(jié)果的方法的一個(gè)實(shí)施例的示意圖。如圖2所示，包括：

步驟201，采用幀間差分法，根據(jù)視頻信息中的相鄰兩幀獲得用戶表情特征的暫態(tài)特征信息，用戶表情特征包括眉毛到眼睛的距離、眉毛到嘴的距離以及嘴到眼睛的距離。

人臉面部表情是由面部肌肉的收縮運(yùn)動(dòng)引起的，基于面部的眉毛、眼睛、嘴等面部特征發(fā)生基于彼此之間距離長度的形變，這種引起人臉暫時(shí)形變的特征叫做暫態(tài)特征，而處于中性表情狀態(tài)下的眉毛、眼睛、嘴相互之間幾何距離長度結(jié)構(gòu)成為永久特征，即基準(zhǔn)特征。采用幀間差分法，可以根據(jù)視頻信息中相鄰兩幀獲得用戶表情特征的暫態(tài)特征信息，包括但不限于用戶眉毛到眼睛的距離、眉毛到嘴的距離以及嘴到眼睛的距離。

步驟202，將暫態(tài)特征信息與用戶表情的基準(zhǔn)特征信息進(jìn)行比較，獲得用戶的表情識別結(jié)果，表情識別結(jié)果包括滿意和不滿意。

可以采用多種方式獲取用戶表情的基準(zhǔn)特征信息。例如，可以在購物中心設(shè)置注冊查詢終端，該終端設(shè)置有攝像頭。用戶通過手機(jī)應(yīng)用掃描二維碼或者輸入用戶名和密碼的方式登入本發(fā)明的系統(tǒng)。攝像頭采集用戶的面部特征信息，從而獲得基準(zhǔn)特征信息。在另一種實(shí)現(xiàn)方式中，可以從遍布在購物中心柜臺的攝像頭獲取用戶的實(shí)時(shí)表情信息，通過計(jì)算平均值來獲取用戶表情的基準(zhǔn)特征信息。

在一個(gè)實(shí)施例中，根據(jù)獲得的暫態(tài)特征信息，可以得到用戶的暫態(tài)特征值，例如眉毛到眼睛的距離。根據(jù)基準(zhǔn)特征信息得到基準(zhǔn)特征值。然后，統(tǒng)計(jì)在視頻各幀中暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量。經(jīng) 過大量統(tǒng)計(jì)和實(shí)驗(yàn)發(fā)現(xiàn)，當(dāng)人滿意或愉悅時(shí)，眉毛、眼睛和嘴之間的相對距離會(huì)增加，反之則會(huì)減小或不變。這里可以通過設(shè)置于柜臺的攝像頭獲取視頻信息，統(tǒng)計(jì)用戶在該柜臺的停留時(shí)間段內(nèi)的暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量；也可以是固定時(shí)間段(例如2分鐘)內(nèi)的暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量，此時(shí)當(dāng)用戶停留時(shí)間小于固定時(shí)間時(shí)，則不進(jìn)行統(tǒng)計(jì)，減小了運(yùn)算量。在一個(gè)具體實(shí)施例中，例如在接收的100幀視頻信息中，用戶暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量超過了70幀，則認(rèn)為用戶滿意，否則為不滿意。

在圖2所示的獲取表情識別的方法中，基于視頻信息中的暫態(tài)特征值，與用戶的基準(zhǔn)特征值進(jìn)行比較并統(tǒng)計(jì)，更為精準(zhǔn)的判斷用戶的滿意度。

圖3為本發(fā)明的用于商品選購的另一個(gè)實(shí)施例的示意圖。如圖3所示，包括：

步驟301，接收視頻信息。其中視頻信息可以從設(shè)置于各個(gè)店鋪或柜臺的攝像頭中獲取。對于用戶表情的識別進(jìn)入步驟302，對于用戶興趣度的判斷進(jìn)入步驟307。

步驟302，根據(jù)視頻中的相鄰兩幀獲得用戶表情特征的暫態(tài)特征信息。例如，可以采用幀間差分法獲取用戶的暫態(tài)特征信息。

步驟303，根據(jù)暫態(tài)特征信息得到暫態(tài)特征值。

步驟304，根據(jù)基準(zhǔn)特征信息得到基準(zhǔn)特征值。這里，基準(zhǔn)特征信息可以通過用戶在注冊查詢終端中注冊時(shí)，視頻采集，可以是統(tǒng)計(jì)暫態(tài)特征信息，得到統(tǒng)計(jì)平均值獲得。

步驟305，統(tǒng)計(jì)視頻各幀中暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量。

步驟306，當(dāng)暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量超過預(yù)定數(shù)值時(shí)，則判斷用戶滿意，否則判斷用戶不滿意，然后進(jìn)入步驟309。

步驟307，根據(jù)視頻信息統(tǒng)計(jì)用戶的停留時(shí)間。例如，可以統(tǒng)計(jì)用戶在某個(gè)店面或某個(gè)柜臺的停留時(shí)間。

步驟308，當(dāng)停留時(shí)間超過預(yù)定時(shí)間時(shí)，判斷用戶感興趣。其中用戶的興趣度包括感興趣和不感興趣。預(yù)定時(shí)間可以根據(jù)實(shí)際情況進(jìn) 行設(shè)定，例如5分鐘。

步驟309，根據(jù)表情識別結(jié)果和興趣度，向用戶下發(fā)商品信息。例如，可以僅下發(fā)用戶滿意的商品信息，僅下發(fā)用戶感興趣的商品信息，或者用戶既感興趣又滿意的商品信息。本領(lǐng)域技術(shù)人員可以根據(jù)具體的應(yīng)用場景靈活配置相應(yīng)的下發(fā)策略?？梢栽谫徫镏行脑O(shè)置本發(fā)明系統(tǒng)中的下發(fā)單元，例如注冊查詢終端，用戶在購物時(shí)，可以登錄注冊查詢終端進(jìn)行查詢。

圖3所示的實(shí)施例中，通過對用戶表情識別和興趣度進(jìn)行分析，根據(jù)表情識別結(jié)果和興趣度向用戶下發(fā)商品信息，顧客在需要查找自己心儀商品時(shí)，僅需在注冊查詢終端等下發(fā)單元處登錄系統(tǒng)，就可以幫助用戶快速定位滿意商品，節(jié)省了購物時(shí)間，提升了購物體驗(yàn)。

圖4為本發(fā)明的用于商品選購的系統(tǒng)的一個(gè)實(shí)施例的示意圖。如圖4所示，包括：視頻單元401、表情分析單元402、興趣度分析單元403和發(fā)送單元404，其中：

視頻單元401用于接收視頻信息。

表情分析單元402用于根據(jù)視頻信息得到用戶的表情識別結(jié)果。

在一個(gè)實(shí)施例中，表情分析單元402具體用于采用幀間差分法，根據(jù)視頻信息中的相鄰兩幀獲得用戶表情特征的暫態(tài)特征信息，用戶表情特征包括眉毛到眼睛的距離、眉毛到嘴的距離以及嘴到眼睛的距離；將暫態(tài)特征信息與用戶表情的基準(zhǔn)特征信息進(jìn)行比較，獲得用戶的表情識別結(jié)果，表情識別結(jié)果包括滿意和不滿意。還用于根據(jù)暫態(tài)特征信息得到暫態(tài)特征值；根據(jù)基準(zhǔn)特征信息得到基準(zhǔn)特征值；統(tǒng)計(jì)視頻各幀中暫態(tài)特征值大于基準(zhǔn)特征值的數(shù)量；當(dāng)數(shù)量超過預(yù)定數(shù)值時(shí)，判斷用戶滿意，否則為不滿意。

興趣度分析單元403用于根據(jù)視頻信息得到用戶的興趣度。

在一個(gè)實(shí)施例中，興趣度分析單元403具體用于根據(jù)視頻信息統(tǒng)計(jì)用戶的停留時(shí)間；當(dāng)停留時(shí)間超過預(yù)定時(shí)間時(shí)，判斷用戶感興趣，興趣度包括感興趣和不感興趣。

發(fā)送單元404用于根據(jù)表情識別結(jié)果和興趣度，向用戶下發(fā)商品 信息。

在一個(gè)實(shí)施例中，發(fā)送單元404可以是設(shè)置在購物中心的注冊查詢終端，可以僅下發(fā)用戶滿意的商品圖像、位置和價(jià)格等商品信息，也可以僅下發(fā)用戶感興趣的商品信息，或者用戶既感興趣又滿意的商品信息。本領(lǐng)域技術(shù)人員可以根據(jù)具體的應(yīng)用場景靈活配置相應(yīng)的下發(fā)策略。

下面對本發(fā)明用于商品選購的系統(tǒng)的一個(gè)具體實(shí)施例進(jìn)行說明。購物中心在各層設(shè)置有多個(gè)注冊查詢終端，該終端可作為下發(fā)單元。顧客A在進(jìn)入購物中心后，通過手機(jī)應(yīng)用掃描二維碼或者輸入用戶名密碼登陸系統(tǒng)，攝像頭將顧客A的視頻信息發(fā)送給視頻單元。表情分析單元根據(jù)視頻信息獲得顧客A的基準(zhǔn)特征信息，從而得到基準(zhǔn)特征值。顧客A在登陸系統(tǒng)注冊后，開始購物。與此同時(shí)，各柜臺、店鋪設(shè)置的攝像頭將顧客A的視頻信息發(fā)送給視頻單元。表情分析單元采用表情識別技術(shù)，對視頻信息中用戶的表情進(jìn)行識別，獲得顧客A的暫態(tài)特征信息，進(jìn)而得到暫態(tài)特征信息值，通過與基準(zhǔn)特征信息值對比，得到顧客A的滿意度分析結(jié)果。興趣度分析單元根據(jù)視頻信息統(tǒng)計(jì)顧客A在某柜臺或店鋪的停留時(shí)間，當(dāng)停留時(shí)間超過預(yù)定時(shí)間時(shí)，則判斷顧客A對該柜臺的商品感興趣。可以針對實(shí)際應(yīng)用場景指定下發(fā)策略，顧客A在購物中心的注冊查詢終端再次登錄即可查詢其感興趣的商品信息。進(jìn)一步的，顧客A還可以采用手機(jī)應(yīng)用的形式登錄系統(tǒng)查看自己感興趣或滿意的商品信息。從而避免了提高了購物體驗(yàn)，減少由于查找商品帶來的疲勞。

本領(lǐng)域普通技術(shù)人員可以理解實(shí)現(xiàn)上述實(shí)施例的全部或部分步驟可以通過硬件來完成，也可以通過程序來指令相關(guān)的硬件完成，所述的程序可以存儲于一種計(jì)算機(jī)可讀存儲介質(zhì)中，上述提到的存儲介質(zhì)可以是只讀存儲器，磁盤或光盤等。

本發(fā)明的描述是為了示例和描述起見而給出的，而并不是無遺漏的或者將本發(fā)明限于所公開的形式。很多修改和變化對于本領(lǐng)域的普通技術(shù)人員而言是顯然的。選擇和描述實(shí)施例是為了更好說明本發(fā)明的原理 和實(shí)際應(yīng)用，并且使本領(lǐng)域的普通技術(shù)人員能夠理解本發(fā)明從而設(shè)計(jì)適于特定用途的帶有各種修改的各種實(shí)施例。