用于站點(diǎn)異常記錄和通知的系統(tǒng)和方法
【專利摘要】經(jīng)由應(yīng)用向用戶通知站點(diǎn)異常的方法，所述應(yīng)用被配置為訪問事件服務(wù)器，所述事件服務(wù)器具有：第一傳感器異常檢測(cè)器，被連接到第一傳感器，用于檢測(cè)由所述第一傳感器感測(cè)到的第一子事件的第一異常行為，所述第一異常行為對(duì)應(yīng)于第一異常行為值；第二傳感器異常檢測(cè)器，被連接到第二傳感器，用于檢測(cè)由與所述第一傳感器的類型不同的所述第二傳感器感測(cè)到的第二子事件的第二異常行為，所述第二異常行為對(duì)應(yīng)于第二異常行為值；相關(guān)器，用于將所述第一和第二異常行為值進(jìn)行相關(guān)并且將相關(guān)的值記錄作為復(fù)合事件；數(shù)據(jù)存儲(chǔ)；所述應(yīng)用具有觀看器，所述觀看器被配置為在所述設(shè)備上示出與多個(gè)復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)，所述觀看器進(jìn)一步被配置為以時(shí)間順序顯示所述多個(gè)復(fù)合事件。
【專利說明】用于站點(diǎn)異常記錄和通知的系統(tǒng)和方法
【技術(shù)領(lǐng)域】
[0001]本公開涉及數(shù)據(jù)挖掘領(lǐng)域。更具體地說，本公開涉及用于通過記錄和通知異常來改善站點(diǎn)運(yùn)營的數(shù)據(jù)挖掘。
【背景技術(shù)】 [0002]在零售店或其他站點(diǎn)，工人和經(jīng)理基于設(shè)計(jì)的工作流模式來實(shí)施多項(xiàng)任務(wù)并且與顧客進(jìn)行交互以實(shí)現(xiàn)有效率的運(yùn)營。盡管工作流流程覆蓋頻繁出現(xiàn)的模式，但異常情形會(huì)周期性出現(xiàn)且造成服務(wù)中斷或顧客抱怨，導(dǎo)致銷售機(jī)會(huì)的喪失。
[0003]在商店環(huán)境中，一些設(shè)施具有生成事件日志的各種不同的系統(tǒng)，包括銷售點(diǎn)(P0S)、監(jiān)視、訪問控制等。現(xiàn)有的監(jiān)視記錄器可以以與監(jiān)視設(shè)備有關(guān)的有限的事件類型，諸如運(yùn)動(dòng)檢測(cè)、視頻丟失等等，來記錄相機(jī)視頻；但是，沒有能夠接受各種不同類型的事件源、記錄、管理、索引并且檢索這些事件的監(jiān)視記錄器。店經(jīng)理不僅需要從這些系統(tǒng)監(jiān)視事件和事故，而且需要管理雇員的日常運(yùn)營。零售店必須依賴于店經(jīng)理，借由人工合并POS日志、訪問控制日志、視頻監(jiān)視警報(bào)日志并且搜索和找出哪里有錯(cuò)誤，來處理所有的事故。盡管可能有部分集成的系統(tǒng)可用，諸如通過視頻監(jiān)視的氣候控制，但沒有簡單的方法來快速搜索和顯示所有相關(guān)事件和來自所有事件的序列。例如，單獨(dú)就監(jiān)視記錄器而言，用戶界面的設(shè)計(jì)基于如下假設(shè):商店將具有資源來對(duì)監(jiān)視記錄器進(jìn)行監(jiān)視；但是，許多小到中型商戶(SMB)根本不具有這樣的資源和時(shí)間來監(jiān)視用戶界面，盡管他們需要監(jiān)視技術(shù)。
[0004]當(dāng)今可用的監(jiān)視記錄器能夠基于特定事件類型，諸如運(yùn)動(dòng)檢測(cè)等，的發(fā)生而記錄視頻。盡管用戶能夠以用于訪問和檢索視頻的搜索標(biāo)準(zhǔn)來合并若干事件類型，但沒有可用的系統(tǒng)來自動(dòng)執(zhí)行挖掘并將所有子事件與特定高度異常事件(警報(bào))相關(guān)到一起，并且管理這些相關(guān)事件作為復(fù)合事件日志。在例如美國專利第7，667，596號(hào)和美國專利公開第2010/0208064號(hào)中描述了這樣的傳統(tǒng)系統(tǒng)，明確地通過引用將其公開內(nèi)容完整地結(jié)合進(jìn)來。
[0005]當(dāng)前的視頻監(jiān)視系統(tǒng)能夠提供顧客位置和到達(dá)信息(基于例如內(nèi)部通道交通或者是在相機(jī)視野中)。從多個(gè)相機(jī)收集到的信息被關(guān)連；但是系統(tǒng)通常不能夠區(qū)分從一個(gè)相機(jī)轉(zhuǎn)移到另一個(gè)的單個(gè)人物和兩個(gè)不同的人物，從而導(dǎo)致準(zhǔn)確度問題。類似地，對(duì)于對(duì)象的追蹤可能由于以下而丟失:追蹤誤差或者移動(dòng)對(duì)象融入到背景中，或者相同對(duì)象以不同標(biāo)識(shí)符出現(xiàn)以及系統(tǒng)認(rèn)為其是不同對(duì)象/人物而不是對(duì)相同人物的追蹤。
[0006]當(dāng)前，還沒有可用的系統(tǒng)以實(shí)際、系統(tǒng)的方式來系統(tǒng)地實(shí)施異常事件分析。因此，這樣的分析不能夠由從事在正常工作流中所定義的任務(wù)的工人系統(tǒng)地做出。
[0007]而且，不存在可用系統(tǒng)能夠?qū)⒏鱾€(gè)系統(tǒng)相關(guān)起來，諸如安全系統(tǒng)、統(tǒng)一通彳目(UC)系統(tǒng)、在線訂購系統(tǒng)、便利管理系統(tǒng)、訪問控制系統(tǒng)、面部識(shí)別系統(tǒng)、射頻識(shí)別(RFID)系統(tǒng)、顧客關(guān)系管理(CRM)系統(tǒng)。也沒有任何可用系統(tǒng)可以將集成的應(yīng)用相關(guān)起來，諸如視頻分析+安全、視頻分析+市場(chǎng)、POS+視頻分析(例如虛假退貨)、無線訂購系統(tǒng)+P0S、面部識(shí)別(年齡、性別)+P0S+CRM、以及UC+訪問控制+安全。如這里使用的“UC”被定義為實(shí)時(shí)通信服務(wù)與非實(shí)時(shí)通信服務(wù)的集成，實(shí)時(shí)通信服務(wù)諸如即時(shí)消息傳遞(聊天)、在場(chǎng)信息、電話(包括IP電話)、視頻會(huì)議、數(shù)據(jù)共享(包括網(wǎng)絡(luò)連接的電子白板又稱作IWB或交互白板)、呼叫控制和語音識(shí)別，非實(shí)時(shí)通信服務(wù)諸如統(tǒng)一消息傳遞(集成語音郵件、電子郵件、SMS和傳真)。
[0008]由于缺乏集成系統(tǒng)來監(jiān)視站點(diǎn)運(yùn)營，有組織的零售犯罪團(tuán)伙利用了零售設(shè)施(諸如連鎖店)的安全弱點(diǎn)并且針對(duì)相同設(shè)施的不同分支重復(fù)其行為。當(dāng)使用閉路電視(CCTV)時(shí)，每個(gè)分支都記錄了視頻。但是LP (損失預(yù)防)人員必須單獨(dú)地回顧這些冗長的視頻并確定諸如不同視頻/設(shè)施中的人是否相同等模式。一些解決方案將事故視頻數(shù)據(jù)上傳到中心服務(wù)器以使LP調(diào)查更容易，諸如VSaaS (視頻監(jiān)視作為服務(wù)解決方案)，但是這樣的解決方案仍然需要由個(gè)人來完成人工調(diào)查，該個(gè)人可能不能夠準(zhǔn)確地記起所有看過視頻的內(nèi)容。
[0009]當(dāng)前的集成解決方案是垂直集成的，并且不開放(諸如:P0S和記錄器的集成，語音檢測(cè)和記錄的集成，門接觸與相機(jī)記錄的集成等等)。不幸的是，所有這些集成一般都是通過有線連接，而且不能縮放且不夠靈活。
[0010]在已知的“汽車穿梭站”(drive-thru)運(yùn)營站點(diǎn)(例如快餐店)，訂單處理通常以下面的順序發(fā)生:取得訂單、食品準(zhǔn)備、接受支付、向顧客交付訂單。不同站點(diǎn)以不同方式設(shè)計(jì)并合并這些步驟，使得服務(wù)窗口匹配任務(wù)序列。訂單取得一般是通過對(duì)場(chǎng)地上帶有耳麥的雇員的音頻呼叫來處理的。雇員接受訂單并且將其輸入到訂單處理系統(tǒng)。(一個(gè)或多個(gè))顧客提貨窗口處理支付和訂單服務(wù)。不幸的是，商店提貨窗口對(duì)于雇員行竊也是弱點(diǎn)?？紤]到在“汽車穿梭站”運(yùn)營中超過50%的運(yùn)營成本通常源于的勞動(dòng)力成本，訂單處理工作流中的任何自動(dòng)化都將改善財(cái)務(wù)底線。
[0011]考慮到上面所述，因此為了情況知曉和事故管理，需要有結(jié)合力地組織接收到的用于站點(diǎn)應(yīng)用的多媒體信息(例如POS終端、統(tǒng)一通信設(shè)備、顧客關(guān)系管理器、聲音記錄器、訪問控制點(diǎn)、運(yùn)動(dòng)檢測(cè)器、 生物計(jì)量傳感器、速度檢測(cè)器、溫度傳感器、氣體傳感器和位置傳感器)，以及相關(guān)事件信息。還需要能夠搜索由從外部設(shè)備獲得的各種不同數(shù)據(jù)所注解的捕獲的內(nèi)容(例如來自相機(jī))。不幸的是，考慮到在零售站點(diǎn)的許多應(yīng)用(例如門、P0S、C0傳感器等等)，迄今為止，通過連接其他設(shè)備與多媒體記錄器的集成不切實(shí)可行。

【發(fā)明內(nèi)容】

[0012]通過關(guān)注于異常管理效率，本公開的非限制特征改善了總體系統(tǒng)效率，因?yàn)檫\(yùn)營中的異常的發(fā)生是優(yōu)化例如管理的連鎖店中的運(yùn)營流的無效率的強(qiáng)指示。
[0013]根據(jù)本公開的非限制特征，提供一種用于通過自動(dòng)學(xué)習(xí)正常行為并從多個(gè)系統(tǒng)中檢測(cè)異常事件來監(jiān)視和控制零售商店中的工作流過程的方法。
[0014]本公開的非限制特征自動(dòng)化了相關(guān)事件和異常事件的分析和記錄以向移動(dòng)工人和/或經(jīng)理實(shí)時(shí)地提供實(shí)時(shí)通知和事故管理報(bào)告。
[0015]本公開的非限制特征提供了一種系統(tǒng)，其能夠有效地記錄和管理多個(gè)事件并且還從多媒體事件日志提供商務(wù)智能總結(jié)報(bào)告。
[0016]本公開的非限制特征組織和存儲(chǔ)相關(guān)的事件作為易于訪問的事件日志。本公開的非限制特征提供:監(jiān)視記錄器要與用于實(shí)時(shí)通知遞送以及呼入功能的統(tǒng)一通信系統(tǒng)相集成，以在需要時(shí)遠(yuǎn)程檢查站點(diǎn)。
[0017]在本公開的非限制特征中，具有安全遠(yuǎn)程訪問的聯(lián)網(wǎng)服務(wù)允許例如店經(jīng)理監(jiān)視許多商店(由此增加連鎖店的效率，因?yàn)橐粋€(gè)經(jīng)理能夠監(jiān)視多個(gè)商店)并且省得經(jīng)理每天去每個(gè)商店。而是，經(jīng)理能夠花費(fèi)大部分他/她的時(shí)間來監(jiān)視多個(gè)站點(diǎn)運(yùn)營來改善顧客服務(wù)和商店收入，而不是駕車去每個(gè)商店位置，這將浪費(fèi)能量和時(shí)間。
[0018]因此，根據(jù)本公開的非限制特征的監(jiān)視和通知界面提供了與應(yīng)用的目的有關(guān)的易于理解、過濾的和聚集的多媒體視圖和事件數(shù)據(jù)。
[0019]本公開的非限制特征提供了易于創(chuàng)建特定應(yīng)用的記錄的多媒體注解(通過事件源，諸如P0S、運(yùn)動(dòng)傳感器、光傳感器、溫度傳感器、門接觸、音頻識(shí)別等等)允許用戶定義特定應(yīng)用事件(定制、靈活性)，定義怎樣從事件收集注解數(shù)據(jù)；以及有效地以統(tǒng)一視圖檢索所有事故相關(guān)的多媒體數(shù)據(jù)(導(dǎo)致自動(dòng)效率)。
[0020]本公開的非限制特征集成了不同類型的事件以創(chuàng)建統(tǒng)一數(shù)據(jù)模型從而允許服務(wù)過程優(yōu)化并且降低了對(duì)顧客的服務(wù)和等候時(shí)間。本公開的非限制特征關(guān)注于異常檢測(cè)管理以基于正常顧客要求而改善商店運(yùn)營從而檢測(cè)異常事件序列和事件序列之間的互關(guān)系。
[0021]本公開的非限制特征提供了數(shù)據(jù)挖掘過程，其支持基于從現(xiàn)有數(shù)據(jù)提取的期望顧客要求的員工決策，其中現(xiàn)有數(shù)據(jù)是從基于視頻的檢測(cè)(計(jì)數(shù)、檢測(cè)猶豫顧客)、POSdPSI表現(xiàn)數(shù)據(jù)(表明特定準(zhǔn)備任務(wù)的服務(wù)水平)收集的。
[0022]根據(jù)本公開的非限制特征的系統(tǒng)自動(dòng)地創(chuàng)建基于事件相關(guān)度的記錄，并且生成視頻日志，使得工人和經(jīng)理易于觀看而不用大量的人工操作。本公開的非限制特征中的記錄的多媒體日志包括多種類型的事件和被分級(jí)的事件相關(guān)度，以幫助快速瀏覽。
[0023]本發(fā)明的非限制特征通過僅僅將異常事件集成而降低了集成成本，從而節(jié)約了時(shí)間。而且，通過從具有不 同意義和單位的不同系統(tǒng)變量中提取歸一化的異常分?jǐn)?shù)，可以降低定制成本。
[0024]根據(jù)本公開的非限制特征的異常商務(wù)智能報(bào)告降低了對(duì)人工觀察每個(gè)系統(tǒng)的優(yōu)化過程的適當(dāng)性的長持續(xù)時(shí)間進(jìn)步改變的需要。而且，同步訂單流水線上站點(diǎn)工人的加速步伐或當(dāng)需要時(shí)實(shí)時(shí)地增加工人，能夠降低服務(wù)等候時(shí)間和總體系統(tǒng)成本。
[0025]除了來自各種不同事件信息源的視頻以外，根據(jù)本公開的非限制特征的系統(tǒng)還可以記錄多種類型的事件和多媒體信息。記錄的信息，不僅基于時(shí)間和事件類型，而且還基于諸如相關(guān)事件、時(shí)間、事件序列、空間(位置)等的多種因素，被組織和索引。
[0026]根據(jù)本公開的非限制特征的系統(tǒng)允許用戶定義商務(wù)智能應(yīng)用環(huán)境以為自動(dòng)化事件日志組織表達(dá)應(yīng)用目的。
[0027]根據(jù)本公開的非限制特征的系統(tǒng)從多種事件源捕捉具有多媒體記錄的事件輸入，過濾并且聚集這些事件。事件序列挖掘引擎執(zhí)行事件序列挖掘，通過前向和后向追蹤事件序列鏈接、概率和事件預(yù)測(cè)來將事件相關(guān)。
[0028]根據(jù)本公開的非限制特征的系統(tǒng)提供了自動(dòng)化在線統(tǒng)一視圖，其具有用于快速連鎖店商務(wù)智能監(jiān)視的總結(jié)表盤，并且檢索到的多媒體記錄基于關(guān)鍵事件且能夠通過沿著時(shí)間、空間和連鎖店位置(單獨(dú)/城市/區(qū)域/州/世界范圍)范圍的所有鏈接的子事件易于瀏覽。根據(jù)本公開的非限制特征的系統(tǒng)還經(jīng)由統(tǒng)一通信而無縫地集成了自動(dòng)化通知。
[0029]根據(jù)本公開的非限制特征的系統(tǒng)提供了多媒體事件日志服務(wù)器，其支持多模型時(shí)空事件相關(guān)、序列挖掘、和序列向回追蹤，以用于零售店雇員管理、銷售管理和異常事故管理的日常商務(wù)管理事件日志和商務(wù)智能。[0030]根據(jù)本公開的非限制特征的多媒體事件日志服務(wù)器能夠從零售商店商務(wù)操作中的多種類型的事件輸入源收集和記錄事件、聚集事件、過濾事件、挖掘事件序列、以及將事件相關(guān)。其經(jīng)由計(jì)算機(jī)或移動(dòng)設(shè)備對(duì)店經(jīng)理提供了具有商務(wù)智能總結(jié)統(tǒng)一報(bào)告視圖或者表盤以及統(tǒng)一通信通知的自動(dòng)化在線實(shí)時(shí)異常相關(guān)事件日志。
[0031]事件日志服務(wù)器系統(tǒng)提供了經(jīng)由API (應(yīng)用編程接口)的事件收集、事件序列挖掘和相關(guān)引擎、對(duì)于事件和交易日志的多媒體存儲(chǔ)、事件日志管理、商務(wù)智能總結(jié)報(bào)告、以及提不UC通知。
[0032]根據(jù)本公開的非限制方面的集成異常檢測(cè)系統(tǒng)的特征是:
[0033]-通過僅僅集成異常事件而降低集成成本；
[0034]-通過從具有不同意義和單位的不同系統(tǒng)變量中提取歸一化的異常分?jǐn)?shù)來降低定制成本；
[0035]-異常商務(wù)智能報(bào)告降低了雇員對(duì)人工觀察長持續(xù)時(shí)間進(jìn)步隨時(shí)間的改變以確定每個(gè)系統(tǒng)的優(yōu)化過程的需要；以及
[0036]-同步在訂單流水線上的工人的工作步伐，或在需要時(shí)實(shí)時(shí)地增加工人，能夠降低顧客服務(wù)等候時(shí)間和總體系統(tǒng)成本。
[0037]系統(tǒng)允許用戶定義商務(wù)智能環(huán)境以表達(dá)應(yīng)用目的，并且捕捉來自設(shè)備具有來自多種類型的設(shè)備或傳感器的多媒體記錄的事件輸入，組合事件和序列，并且經(jīng)由統(tǒng)一通信(UC)提供靈活的通知，并且支持用于快速搜索和監(jiān)視的在線實(shí)時(shí)統(tǒng)一總結(jié)視圖表盤。
[0038]根據(jù)本公開的非限制特征的多媒體事件日志服務(wù)器提供了可擴(kuò)展的系統(tǒng)，其允許對(duì)用于特定應(yīng)用復(fù)合事件定義、檢測(cè)和事故數(shù)據(jù)收集的各種事件的集成。靈活的框架允許用戶在統(tǒng)一視圖中看到所有事件相關(guān)數(shù)據(jù)。呈現(xiàn)層可以為垂直應(yīng)用段而定制。應(yīng)用事件捕捉盒子可以提供寬帶連接到基于云的服務(wù)，其能夠允許維持、配置數(shù)據(jù)備份、用于延長時(shí)間段的事故數(shù)據(jù)存儲(chǔ)(代替現(xiàn)場(chǎng)記錄器)、商務(wù)智能報(bào)告和多站點(diǎn)管理。
[0039]根據(jù)本公開的非限制特征的系統(tǒng)從單獨(dú)一個(gè)設(shè)備或從多個(gè)設(shè)備或傳感器接收原始事件，其然后被累積以檢測(cè)是對(duì)相關(guān)事件的復(fù)合的應(yīng)用復(fù)合事件。而且，系統(tǒng)可以基于多步驟馬爾可夫鏈模型學(xué)習(xí)或貝葉斯信賴(Belief)網(wǎng)絡(luò)學(xué)習(xí)方法來執(zhí)行事件序列“出現(xiàn)間隔”統(tǒng)計(jì)分布。在系統(tǒng)學(xué)習(xí)之后，事件的統(tǒng)計(jì)關(guān)聯(lián)被自動(dòng)構(gòu)建，并且可以向回追蹤基于時(shí)間和空間以及“多個(gè)之前事件”的異常序列。
[0040]系統(tǒng)的另一特征在出現(xiàn)一個(gè)異常事件后向回追蹤所有異常事件。其結(jié)果可以被基于分級(jí)的事件異常分?jǐn)?shù)而排序。而且，管理的事件數(shù)據(jù)和視頻可以被提供給另外的聯(lián)網(wǎng)中心管理站點(diǎn)。記錄的多媒體可以通過收集的復(fù)合事件信息而被注解(諸如，為了調(diào)查，允許用戶跳到已經(jīng)掃描所選雜貨品的片段，而不是觀看整個(gè)記錄)。
[0041]而且，根據(jù)本公開的非限制特征的系統(tǒng)可以進(jìn)一步包括基于原始事件及其潛在排列而表現(xiàn)特定應(yīng)用事件。而且為了效率，可以提供在表現(xiàn)中組合許多事件的檢測(cè)表現(xiàn)。而且，定義的特定應(yīng)用事件可以被動(dòng)態(tài)更新(例如，它們可以增加、刪除或修改)并且存儲(chǔ)在動(dòng)態(tài)或永久存貯器中。
[0042]零售業(yè)的主要成本負(fù)擔(dān)來自失竊、退貨欺詐和虛假受傷/工作人員的補(bǔ)償要求。因此，本公開的非限制方面提供了一種切實(shí)可行和有效率的方式來:
[0043]a.記錄這些事件，[0044]b.基于事件序列對(duì)于出現(xiàn)哪些異常事件進(jìn)行相關(guān)和確定，
[0045]c.遠(yuǎn)程監(jiān)視相關(guān)的事件和媒體內(nèi)容，
[0046]d.組織對(duì)事件信息數(shù)據(jù)的快速搜索，
[0047]e.檢索和顯不具有注解的特定事件的相關(guān)/[目息；和/或
[0048]f.靈活和有效地提供警報(bào)通知事件。
[0049]根據(jù)本公開的非限制特征的系統(tǒng)提供了一種易于使用的定制框架，用于和解決方案提供商集成各種多媒體設(shè)備到統(tǒng)一框架中，該統(tǒng)一框架使得捕捉到的內(nèi)容能夠有效得到相關(guān)捕捉到的元數(shù)據(jù)的注解。
[0050]多種類型的多媒體設(shè)備和傳感器事件捕捉模塊的集成允許事件挖掘模塊學(xué)習(xí)異常運(yùn)營模式和/或事件(諸如POS打開模式、UC呼叫模式等)，并且當(dāng)觀察到異常操作時(shí)，生成警報(bào)。
[0051]根據(jù)本公開的非限制特征的系統(tǒng)能夠?yàn)榈曛魈峁﹩蝹€(gè)商店或者多個(gè)商店范圍內(nèi)的在線實(shí)時(shí)事件序列日志和商務(wù)智能總結(jié)報(bào)告以及表盤，以及為總部進(jìn)行商務(wù)智能和銷售分析的國家范圍內(nèi)或全球總結(jié)視圖。
[0052]根據(jù)本公開的非限制特征的系統(tǒng)執(zhí)行事件序列挖掘和對(duì)所感測(cè)到事件的相關(guān)并且生成對(duì)相關(guān)事件的警報(bào)。根據(jù)本公開的非限制特征的系統(tǒng)使用統(tǒng)一視圖和視頻上的注解來管理事件數(shù)據(jù)并且將相 關(guān)事件鏈接在一起以警報(bào)，以便易于訪問和回放顯示。在監(jiān)視期間，根據(jù)本公開的非限制特征的系統(tǒng)使用所選的環(huán)境來將來自每個(gè)視頻挖掘評(píng)分引擎目標(biāo)(與相機(jī)相關(guān)聯(lián))的選擇的感興趣的區(qū)域(ROI)的視頻和外部數(shù)據(jù)組合到一個(gè)統(tǒng)一視圖中。為了通知，根據(jù)本公開的非限制特征的系統(tǒng)使用所選擇的環(huán)境來在識(shí)別特定應(yīng)用復(fù)雜事件時(shí)以統(tǒng)一通信或統(tǒng)一門戶來遞送通知。
[0053]環(huán)境可以用作定義特定應(yīng)用過濾和將視頻、音頻、P0S、生物計(jì)量數(shù)據(jù)、門警報(bào)等等事件和數(shù)據(jù)聚集到一個(gè)視圖用來呈現(xiàn)的機(jī)制。通過環(huán)境的幫助，用戶只看到應(yīng)用需要什么。環(huán)境定義包括一組具有其ROI的視頻挖掘代理(VMA)評(píng)分引擎、基于原始事件(P0S、門警報(bào)事件、VMA分?jǐn)?shù)、音頻事件等等)的復(fù)雜事件定義。
[0054]統(tǒng)一視圖門戶提供了離散源在聚集視圖中的同步視圖，允許用戶/顧客容易地理解情況。當(dāng)檢測(cè)到警報(bào)時(shí)，經(jīng)由統(tǒng)一通信的自動(dòng)化通知能力發(fā)送外部(站外)通知。
[0055]根據(jù)本公開的非限制特征的與UC兼容的系統(tǒng)允許外部實(shí)體登錄系統(tǒng)并且連接到設(shè)備以便監(jiān)視、維護(hù)、更新等等目的以及通信。
[0056]本公開的一個(gè)方面還提供了一種出于隊(duì)列管理目的通過使用面部檢測(cè)和匹配以改善站點(diǎn)/商店運(yùn)營的商店管理的系統(tǒng)。這樣的系統(tǒng)可包括檢測(cè)面部、提取面部特征向量、發(fā)送面部數(shù)據(jù)到顧客表格模塊和/或隊(duì)列統(tǒng)計(jì)模塊的系統(tǒng)。還可包括收集和發(fā)送POS交互數(shù)據(jù)到隊(duì)列統(tǒng)計(jì)模塊的系統(tǒng)，以及判斷所接收的面部是否已經(jīng)在隊(duì)列的顧客表格中的系統(tǒng)(諸如顧客表格模塊)。還可提供系統(tǒng)(諸如隊(duì)列統(tǒng)計(jì)模塊)以:用POS事件/數(shù)據(jù)和面部數(shù)據(jù)(可能是元數(shù)據(jù)的一部分)對(duì)視頻幀注解，獲得顧客到達(dá)時(shí)間以從顧客表格模塊中排隊(duì)，從知識(shí)庫中獲得收銀員表現(xiàn)數(shù)據(jù)，將對(duì)于每個(gè)完成POS交易的收銀員表現(xiàn)插入到數(shù)據(jù)倉庫中，評(píng)價(jià)每個(gè)隊(duì)列的平均顧客等候時(shí)間，以及發(fā)送實(shí)時(shí)隊(duì)列狀態(tài)信息到顯示器。
[0057]顯示器可以基于實(shí)時(shí)隊(duì)列狀態(tài)和收銀員的期望工作表現(xiàn)來顯示實(shí)時(shí)隊(duì)列表現(xiàn)統(tǒng)計(jì)和虛擬提示以表明隊(duì)列上增加的負(fù)荷。顯示器還可以通過視覺和音頻呈現(xiàn)中的至少一種來將每個(gè)隊(duì)列狀態(tài)傳送給例如經(jīng)理的個(gè)人。
[0058]此外，檢測(cè)面部的系統(tǒng)可以能夠選擇質(zhì)量良好的面部特征來降低要傳輸?shù)臄?shù)據(jù)的數(shù)量，同時(shí)增加匹配準(zhǔn)確度。而且，判斷所接收的面部是否已經(jīng)在隊(duì)列的顧客表格中的系統(tǒng)可以選擇一組良好面部表現(xiàn)以降低所需的存儲(chǔ)且增加匹配準(zhǔn)確度。進(jìn)一步，所注解的視頻幀數(shù)據(jù)可以保存在自動(dòng)化多媒體事件日志服務(wù)器中，通過其內(nèi)容相似性由自動(dòng)化多媒體事件服務(wù)器進(jìn)行鏈接，由顯示器從自動(dòng)化多媒體事件服務(wù)器中進(jìn)行訪問以瀏覽鏈接的視頻鏡頭，從而在顧客進(jìn)入隊(duì)列之前就提取顧客的位置。
[0059]因此，本公開的非限制特征提供了一種經(jīng)由應(yīng)用向用戶通知站點(diǎn)異常的方法，所述應(yīng)用被配置為訪問事件服務(wù)器，所述事件服務(wù)器具有:第一傳感器異常檢測(cè)器，被連接到第一傳感器，用于檢測(cè)由所述第一傳感器感測(cè)到的第一子事件的第一異常行為，所述第一異常行為對(duì)應(yīng)于第一異常行為值；第二傳感器異常檢測(cè)器，被連接到第二傳感器，用于檢測(cè)由與所述第一傳感器的類型不同的所述第二傳感器感測(cè)到的第二子事件的第二異常行為，所述第二異常行為對(duì)應(yīng)于第二異常行為值；相關(guān)器，用于將所述第一和第二異常行為值進(jìn)行相關(guān)并且將相關(guān)的值記錄作為復(fù)合事件，所述復(fù)合事件對(duì)應(yīng)于至少一個(gè)所述第一子事件和至少一個(gè)所述第二子事件；數(shù)據(jù)存儲(chǔ)，被配置為存儲(chǔ)與所述第一傳感器和所述第二傳感器相關(guān)聯(lián)的數(shù)據(jù)以及與 所述復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)；根據(jù)非限制方面的方法包括:從遠(yuǎn)離所述事件服務(wù)器的設(shè)備接收對(duì)所述應(yīng)用的請(qǐng)求；將所述應(yīng)用發(fā)射到所述設(shè)備；以及訪問所述事件服務(wù)器，所述應(yīng)用具有觀看器，所述觀看器被配置為在所述設(shè)備上示出與多個(gè)復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)，所述觀看器進(jìn)一步被配置為以時(shí)間順序顯示所述多個(gè)復(fù)合事件。
[0060]根據(jù)本公開的非限制方面，所述觀看器被進(jìn)一步配置為在每個(gè)復(fù)合事件內(nèi)顯示與所述第二傳感器相關(guān)聯(lián)的第二子事件數(shù)據(jù)和第一子事件數(shù)據(jù)。而且，所述第一子事件數(shù)據(jù)被使用第一圖標(biāo)類型來標(biāo)識(shí)，并且其中，所述第二子事件數(shù)據(jù)被使用與第一圖標(biāo)類型不同的第二圖標(biāo)類型來標(biāo)識(shí)。所述觀看器進(jìn)一步包括列表，所述列表包括第一和第二子事件。此外，每個(gè)復(fù)合事件由所述觀看器以不同顏色編碼。而且，所述觀看器能夠進(jìn)一步包括所述站點(diǎn)的地圖，所述地圖被配置為示出與所述站點(diǎn)相關(guān)的每個(gè)復(fù)合事件的位置。所述應(yīng)用可以被配置為訪問多個(gè)聯(lián)網(wǎng)的事件服務(wù)器。
[0061]而且，根據(jù)本公開的非限制方面，所述方法可以進(jìn)一步包括:選擇顯示的復(fù)合事件；以及顯示與所選擇的顯示的復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)，所述數(shù)據(jù)包括所記錄的由所述第一傳感器感測(cè)到的第一子事件和所記錄的由所述第二傳感器感測(cè)到的第二子事件中的至少一個(gè)。進(jìn)一步，所述數(shù)據(jù)可以進(jìn)一步包括所記錄的由所述第一傳感器感測(cè)到的第一子事件和所記錄的由所述第二傳感器感測(cè)到的第二子事件中的至少一個(gè)的元數(shù)據(jù)。此外，與所述第一傳感器相關(guān)聯(lián)的數(shù)據(jù)和與所述第二傳感器相關(guān)聯(lián)的數(shù)據(jù)可包括元數(shù)據(jù)，所述元數(shù)據(jù)包括日期、時(shí)間、位置、質(zhì)量和關(guān)鍵字中的至少一個(gè)。
[0062]根據(jù)本公開的進(jìn)一步的非限制方面，所述第一傳感器是相機(jī)、銷售點(diǎn)終端、統(tǒng)一通信設(shè)備、顧客關(guān)系管理器、聲音記錄器、訪問控制點(diǎn)、運(yùn)動(dòng)檢測(cè)器、生物計(jì)量傳感器、速度檢測(cè)器、溫度傳感器、氣體傳感器和位置傳感器中的一個(gè)；并且所述第二傳感器是相機(jī)、銷售點(diǎn)終端、統(tǒng)一通信設(shè)備、顧客關(guān)系管理器、聲音記錄器、訪問控制點(diǎn)、運(yùn)動(dòng)檢測(cè)器、生物計(jì)量傳感器、速度檢測(cè)器、溫度傳感器、氣體傳感器和位置傳感器中的另一個(gè)。所述觀看器可被進(jìn)一步配置為向回追蹤并且以時(shí)間順序顯示所述多個(gè)復(fù)合事件。而且，所述第一子事件和所述第二子事件中至少一個(gè)可包括關(guān)鍵和非關(guān)鍵子事件；以及基于關(guān)鍵子事件到非關(guān)鍵子事件的向回追蹤，所述非關(guān)鍵子事件可被相關(guān)作為復(fù)合事件。
[0063]根據(jù)本公開的另一非限制方面，提供了一種用于向用戶通知站點(diǎn)異常的系統(tǒng)，所述系統(tǒng)具有:事件服務(wù)器，具有:第一傳感器異常檢測(cè)器，被連接到第一傳感器，用于檢測(cè)由所述第一傳感器感測(cè)到的第一子事件的第一異常行為，所述第一異常行為對(duì)應(yīng)于第一異常行為值；第二傳感器異常檢測(cè)器，被連接到第二傳感器，用于檢測(cè)由與所述第一傳感器的類型不同的所述第二傳感器感測(cè)到的第二子事件的第二異常行為，所述第二異常行為對(duì)應(yīng)于第二異常行為值；相關(guān)器，用于將所述第一和第二異常行為值進(jìn)行相關(guān)并且將相關(guān)的值記錄作為復(fù)合事件，所述復(fù)合事件對(duì)應(yīng)于至少一個(gè)所述第一子事件和至少一個(gè)所述第二子事件；以及數(shù)據(jù)存儲(chǔ)，被配置為存儲(chǔ)與所述第一傳感器和所述第二傳感器相關(guān)聯(lián)的數(shù)據(jù)以及與所述復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)；以及接口，被配置為示出與多個(gè)所述復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)，所述接口包括觀看器，所述觀看器被配置為以時(shí)間順序顯示所述多個(gè)復(fù)合事件。
[0064]而且，根據(jù)本公開的進(jìn)一步的非限制方面，提供了用于向用戶通知站點(diǎn)異常的可由計(jì)算機(jī)讀取的至少一個(gè)非瞬態(tài)計(jì)算機(jī)可讀介質(zhì)，所述至少一個(gè)非瞬態(tài)計(jì)算機(jī)可讀介質(zhì)包括:第一傳感器異常檢測(cè)代碼段，當(dāng)被執(zhí)行時(shí)，檢測(cè)由第一傳感器感測(cè)到的第一子事件的第一異常行為，所述第一異常行為對(duì)應(yīng)于第一異常行為值；第二傳感器異常檢測(cè)代碼段，當(dāng)被執(zhí)行時(shí)，檢測(cè)由與所述第一傳感器的類型不同的第二傳感器感測(cè)到的第二子事件的第二異常行為，所述第二異常行為對(duì)應(yīng)于第二異常行為值；相關(guān)代碼段，當(dāng)被執(zhí)行時(shí)，將所述第一異常行為值和所述第二異常行為值進(jìn)行相關(guān)并且將相關(guān)的值記錄作為復(fù)合事件，所述復(fù)合事件對(duì)應(yīng)于至少一個(gè)所述第一子事件和至少一個(gè)所述第二子事件；以及數(shù)據(jù)存儲(chǔ)代碼段，當(dāng)被執(zhí)行時(shí)，存儲(chǔ)與所述第一傳感器和所述第二傳感器相關(guān)聯(lián)的數(shù)據(jù)以及與所述復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)；顯示代碼段，當(dāng)被執(zhí)行時(shí)，顯示與多個(gè)復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)；以及觀看代碼段，當(dāng)被執(zhí)行時(shí)，以時(shí)間順序顯示所述多個(gè)復(fù)合事件。 [0065]而且，根據(jù)本公開的另一非限制方面，提供了一種在站點(diǎn)管理多個(gè)隊(duì)列的方法，所述方法包括:使用視頻成像器，基于與獨(dú)特面部的面部值相對(duì)應(yīng)的面部數(shù)據(jù)，檢測(cè)所述多個(gè)隊(duì)列中每個(gè)隊(duì)列中多個(gè)顧客中每個(gè)的面部；將所述面部數(shù)據(jù)發(fā)射到顧客表格處理器和隊(duì)列統(tǒng)計(jì)處理器；使用所述面部值和所述顧客表格處理器，確定每個(gè)顧客已經(jīng)處在所述多個(gè)隊(duì)列中的各個(gè)隊(duì)列中多長時(shí)間；基于每個(gè)顧客已經(jīng)處在各個(gè)隊(duì)列中多長時(shí)間，確定所述多個(gè)隊(duì)列中的每個(gè)隊(duì)列的平均等候時(shí)間。所述的確定每個(gè)隊(duì)列的平均等候時(shí)間包括使用收銀員表現(xiàn)數(shù)據(jù)。
[0066]而且，根據(jù)本公開的又一非限制方面，提供了一種個(gè)性化市場(chǎng)的方法，包括:使用位于整個(gè)站點(diǎn)中的多個(gè)視頻成像器中的至少一個(gè)視頻成像器，基于與獨(dú)特面部的面部值相對(duì)應(yīng)的面部數(shù)據(jù)，在所述站點(diǎn)中基于顧客面部檢測(cè)獨(dú)特顧客；基于所檢測(cè)到的獨(dú)特顧客的特性，創(chuàng)建與要被顯示給所述顧客的廣告貨品有關(guān)的圖像；使用由所述多個(gè)視頻成像器所確定的所述顧客的軌跡，在整個(gè)站點(diǎn)中追蹤所檢測(cè)到的獨(dú)特顧客；使用與所追蹤的所檢測(cè)到的獨(dú)特顧客相對(duì)應(yīng)的數(shù)據(jù)，確定由所述獨(dú)特顧客所訪問的所述站點(diǎn)的區(qū)域；以及將由所述獨(dú)特顧客所訪問的所述站點(diǎn)的區(qū)域與所述廣告貨品進(jìn)行相關(guān)。
[0067]所述方法可進(jìn)一步包括:基于將由所述獨(dú)特顧客所訪問的所述站點(diǎn)的區(qū)域與所述廣告貨品進(jìn)行相關(guān)，更改所創(chuàng)建的圖像，以及可以此外包括:基于將由所述獨(dú)特顧客所訪問的所述站點(diǎn)的區(qū)域與所述廣告貨品進(jìn)行相關(guān)，向所述獨(dú)特顧客提供鼓勵(lì)。
【專利附圖】

【附圖說明】
[0068]圖1是根據(jù)本公開的一方面的通用計(jì)算機(jī)系統(tǒng)的示例實(shí)施例；
[0069]圖2是根據(jù)本公開的一方面的異常檢測(cè)代理和服務(wù)器的示意性視圖；
[0070]圖3是根據(jù)本公開的一方面的異常檢測(cè)代理和服務(wù)器的另一示意性視圖；
[0071]圖4是根據(jù)本公開的一方面的異常相關(guān)服務(wù)器的示意性視圖；
[0072]圖5是示出根據(jù)本公開的一方面的勞動(dòng)力管理的方法的流程圖；
[0073]圖6是根據(jù)本公開的一方面的位置知曉訂單處理的示意性視圖；
[0074]圖7是示出根據(jù)本公開的一方面的用于使用面部追蹤的勞動(dòng)力管理的系統(tǒng)的示意性視圖；
[0075]圖8是根據(jù)本公開的一方面的用于使用多個(gè)相機(jī)的面部檢測(cè)和匹配的系統(tǒng)；
[0076]圖9是根據(jù)本公開的一方面的顧客驗(yàn)證的系統(tǒng)；
[0077]圖10圖示說明根據(jù)本公開的一方面在接收訂單代碼后被識(shí)別的顧客；
[0078]圖11是根據(jù)本公開的一方面的示意性視圖，其中，顧客訂單的順序被基于顧客到達(dá)的順序來安排；
[0079]圖12是根據(jù)本公開的一方面的鏈接的損失預(yù)防系統(tǒng)的示意；
[0080]圖13是根據(jù)本公開的一方面的損失預(yù)防系統(tǒng)的幀的示意；
[0081]圖14是根據(jù)本公開的一方面的損失預(yù)防系統(tǒng)的幀的示意；
[0082]圖15是根據(jù)本公開的一方面的排隊(duì)管理系統(tǒng)的示意性視圖；
[0083]圖16是根據(jù)本公開的一方面的用于通過由面部集合匹配對(duì)象軌跡的個(gè)性化廣告和市場(chǎng)效果的系統(tǒng)；
[0084]圖17是根據(jù)本公開的一方面的示出事件日志服務(wù)器的示意性視圖；
[0085]圖18是根據(jù)本公開的一方面的商務(wù)智能表盤的示例視圖；
[0086]圖19是根據(jù)本公開的一方面的復(fù)合事件的示意性視圖；
[0087]圖20是根據(jù)本公開的一方面的事件日志服務(wù)器數(shù)據(jù)模型；以及
[0088]圖21是根據(jù)本公開的一方面的事件日志接口數(shù)據(jù)圖解。
【具體實(shí)施方式】
[0089]考慮到以上，因此，本公開通過其各種方面、實(shí)施例和/或具體特征或子組件中的一個(gè)或多個(gè)而想要展示如下具體說明的一個(gè)或多個(gè)優(yōu)點(diǎn)。
[0090]參考附圖，其中相似的字符表示相似的元件，圖1是通用計(jì)算機(jī)系統(tǒng)的示例實(shí)施例，在該通用計(jì)算機(jī)系統(tǒng)上能夠?qū)崿F(xiàn)通過檢測(cè)異常而改善站點(diǎn)運(yùn)營的系統(tǒng)和方法，該通用計(jì)算機(jī)系統(tǒng)被顯示和指定為100。計(jì)算機(jī)系統(tǒng)100可以包括一組指令，其能夠被執(zhí)行以使得計(jì)算機(jī)系統(tǒng)100執(zhí)行這里公開的方法或基于計(jì)算機(jī)的功能中的任何一個(gè)或多個(gè)。計(jì)算機(jī)系統(tǒng)100可以操作為獨(dú)立設(shè)備或者可以例如使用網(wǎng)絡(luò)101連接到其他計(jì)算機(jī)系統(tǒng)或外圍設(shè)備。
[0091]在聯(lián)網(wǎng)部署中，計(jì)算機(jī)系統(tǒng)可以在服務(wù)器-客戶端用戶網(wǎng)絡(luò)環(huán)境中以服務(wù)器的地位操作或者操作為客戶端用戶計(jì)算機(jī)，或者在對(duì)等(或者分布式)網(wǎng)絡(luò)環(huán)境中操作為對(duì)等計(jì)算機(jī)系統(tǒng)，包括但不限于毫微微小區(qū)(femtocell)或微小區(qū)(microcell)。計(jì)算機(jī)系統(tǒng)100還可以被實(shí)現(xiàn)為或合并入各種設(shè)備，諸如個(gè)人計(jì)算機(jī)(PC)、平板PC、機(jī)頂盒(STB)、個(gè)人數(shù)字助理(PDA)、移動(dòng)設(shè)備、全球定位衛(wèi)星(GPS)設(shè)備、掌上電腦、筆記本電腦、桌上電腦、通信設(shè)備、無線電話、智能電話76 (參見圖9)、陸線電話、控制系統(tǒng)、相機(jī)、掃描儀、傳真機(jī)、打印機(jī)、尋呼機(jī)、個(gè)人可信設(shè)備、網(wǎng)絡(luò)應(yīng)用設(shè)備、網(wǎng)絡(luò)路由器、交換機(jī)或網(wǎng)橋、或能夠執(zhí)行規(guī)定要由機(jī)器進(jìn)行的動(dòng)作的一組指令(順序或相反)的任何其他機(jī)器。在特定實(shí)施例中，計(jì)算機(jī)系統(tǒng)100能夠使用提供語音、視頻或數(shù)據(jù)通信的電子設(shè)備來實(shí)現(xiàn)。而且，盡管圖示說明的是單個(gè)計(jì)算機(jī)系統(tǒng)100，但術(shù)語“系統(tǒng)”也被用來包括任何單獨(dú)或聯(lián)合執(zhí)行一組或多組指令來執(zhí)行一個(gè)或多個(gè)計(jì)算機(jī)功能的系統(tǒng)或子系統(tǒng)的集合。
[0092]如圖1所示，計(jì)算機(jī)系統(tǒng)100可包括處理器110，例如中央處理單元(CPU)、圖形處理單元(GPU)、或二者。而且，計(jì)算機(jī)系統(tǒng)100能夠包括彼此能夠經(jīng)由總線108通信的主存儲(chǔ)器120和靜態(tài)存儲(chǔ)器130。如所示，計(jì)算機(jī)系統(tǒng)100可進(jìn)一步包括視頻顯示器(視頻顯示單元)150，諸如液晶顯示器(IXD)、有機(jī)發(fā)光二極管(0LED)、平板顯示器、固態(tài)顯示器、或陰極射線管(CRT )。此外，計(jì)算機(jī)系統(tǒng)100可包括輸入(輸入設(shè)備)160，諸如鍵盤或觸摸屏，以及光標(biāo)控制/指針控制器(光標(biāo)控制設(shè)備)170，諸如鼠標(biāo)或軌跡球或軌跡板。計(jì)算機(jī)系統(tǒng)100還能夠包括諸如磁盤驅(qū)動(dòng)單元180的存貯器、諸如揚(yáng)聲器或遙控器的信號(hào)發(fā)生器(信號(hào)發(fā)生設(shè)備)190、以及網(wǎng)絡(luò)接口(例如網(wǎng)絡(luò)接口設(shè)備)140。
[0093]在特定實(shí)施例中，如圖1所描繪，磁盤驅(qū)動(dòng)單元180可包括計(jì)算機(jī)可讀介質(zhì)182，其中能夠嵌入一組或多組指令184，例如軟件。計(jì)算機(jī)可讀介質(zhì)182是有形的制造物品，從中能夠讀取一組或多組指令184。而且，指令184可以體現(xiàn)如這里所述的一種或多種方法或邏輯。在特定實(shí)施例中，指令184可以完全地或至少部分地駐留在主存儲(chǔ)器120、靜態(tài)存儲(chǔ)器130內(nèi)，和/或在由計(jì)算機(jī)系統(tǒng)100執(zhí)行期間駐留在處理器110內(nèi)。主存儲(chǔ)器104和處理器110還可包括計(jì)算機(jī)可讀媒體。 [0094]在替換實(shí)施例中，諸如專用集成電路、可編程邏輯陣列或其他硬件設(shè)備的專用硬件實(shí)施能夠被構(gòu)建以實(shí)現(xiàn)這里所述的一種或多種方法?？砂ǜ鞣N實(shí)施例的裝置和系統(tǒng)的應(yīng)用能夠?qū)拸V地包括各種電子和計(jì)算機(jī)系統(tǒng)。這里所述的一個(gè)或多個(gè)實(shí)施例可使用具有相關(guān)控制和數(shù)據(jù)信號(hào)的兩個(gè)或多個(gè)特定互連硬件模塊或設(shè)備，或者作為專用集成電路的若干部分，來實(shí)現(xiàn)功能，所述相關(guān)控制和數(shù)據(jù)信號(hào)能夠在模塊之間且通過模塊進(jìn)行傳遞。因此，本系統(tǒng)涵蓋軟件、固件、和硬件實(shí)施。
[0095]根據(jù)本公開的各種實(shí)施例，這里所述的方法可以通過可由計(jì)算機(jī)系統(tǒng)執(zhí)行的軟件程序來實(shí)現(xiàn)。而且，在示例的非限制性實(shí)施例中，實(shí)施能夠包括分布式處理、組件/對(duì)象分布式處理、和并行處理?？商鎿Q地，虛擬計(jì)算機(jī)系統(tǒng)處理能夠被構(gòu)建以實(shí)現(xiàn)如這里所述的一個(gè)或多個(gè)方法或功能。
[0096]本公開考慮了計(jì)算可讀介質(zhì)182，其包括指令184或響應(yīng)于傳播的信號(hào)而接收并執(zhí)行指令184，由此，連接到網(wǎng)絡(luò)101的設(shè)備能夠在網(wǎng)絡(luò)101上傳遞語音、視頻和/或數(shù)據(jù)。而且，指令184可以被經(jīng)由網(wǎng)絡(luò)接口設(shè)備140在網(wǎng)絡(luò)101上發(fā)送和/或接收。
[0097]異常檢測(cè)代理和服務(wù)器
[0098]圖2-3示出了根據(jù)本公開的一方面的異常檢測(cè)代理和服務(wù)器(ADS) 30的示意性視圖。ADS包括代理32、34、36、38和40，用于從每個(gè)相隔離的傳感器42、44、46、48、50的一組輸入和輸出提取異常輸入和輸出事件。不例傳感器是銷售點(diǎn)(POS) 44、視頻44、統(tǒng)一通信(UC)46、站點(diǎn)訪問控制48和便捷/經(jīng)濟(jì)(eco)控制50 ;但是,本領(lǐng)域技術(shù)人員應(yīng)該理解，各種其他類型的傳感器也可用于本發(fā)明的其他方面(如所示，例如圖17中)，包括但不限于靜物相機(jī)、顧客關(guān)系管理器(CRM) 210、聲音記錄器212、紅外運(yùn)動(dòng)檢測(cè)器、生物計(jì)量傳感器214、速度檢測(cè)器、溫度傳感器、氣體傳感器、位置傳感器216等。每個(gè)傳感器42、44、46、48、50被連接到各自相應(yīng)的代理，即POS異常檢測(cè)代理(PMA) 32、視頻異常檢測(cè)代理(也稱為視頻挖掘代理或VMA) 34,UC異常檢測(cè)代理(CMA) 36、訪問控制異常檢測(cè)代理(AMA) 38和便捷控制異常檢測(cè)代理(FMA) 40。
[0099]代理32、34、36、38和40每個(gè)都被連接到異常事件序列相關(guān)服務(wù)器(ACS)52，如圖3中示意性所示，該異常事件序列相關(guān)服務(wù)器自動(dòng)地學(xué)習(xí)序列模式并檢測(cè)異常事件序列，這被稱為事件序列挖掘。
[0100]自動(dòng)學(xué)習(xí)步驟包括兩個(gè)步驟處理。首先，每個(gè)代理32、34、36、38和40從在站點(diǎn)使用的其各自傳感器42、44、46、48、50收集事件數(shù)據(jù)，并且從所選傳感器42、44、46、48、50的輸入和輸出的所選子組中學(xué)習(xí)正常模式。每個(gè)事件被給予異常分?jǐn)?shù)。數(shù)據(jù)挖掘自動(dòng)完成而不需要人的干預(yù)。在異常分?jǐn)?shù)生成后，只有中等或高異常分?jǐn)?shù)被發(fā)送到異常事件序列相關(guān)服務(wù)器(ACS) 52，如圖3示意性所示。ACS52使用挖掘代理來翻譯異常行為(例如異常顧客訂單請(qǐng)求)，挖掘代理基于異常性即例如時(shí)空分布形式的顧客、工人或汽車穿梭站車輛的行為來對(duì)異常行為打分。一旦基于分?jǐn)?shù)而對(duì)事件分級(jí)，就在不同類型事件之間建立了異常性的共同參考。
[0101]其次，ACS52檢測(cè)元屬性(例如摘要值元數(shù)據(jù)(AVMD) 54)以使得能夠超越穩(wěn)態(tài)分布而分析動(dòng)態(tài)和突發(fā)分布。分?jǐn)?shù)異常事件的元屬性基于不同類型事件的發(fā)生、到達(dá)間隔速率、相關(guān)性。ACS52還執(zhí)行互到達(dá)分布模式學(xué)習(xí)并且檢測(cè)事件之間的異?；リP(guān)系。而且，系統(tǒng)(在例如前端)能夠使用深度分組檢查來捕捉應(yīng)用級(jí)消息。
[0102]在站點(diǎn)(例如快餐館)處的示例類型的互關(guān)系異常包括例如序列異常，諸如:車進(jìn)入汽車穿梭站區(qū)域但在訂購或提取區(qū)域未停；顧客進(jìn)入商店但沒有去訂購區(qū)域；許多車爆發(fā)性進(jìn)入，數(shù)量遠(yuǎn)高于該日該時(shí)的正常服務(wù)速率；車在汽車穿梭站入口處的停留時(shí)間間隔太長，表明排隊(duì)長或者車輛故障。
[0103]示例類型的互關(guān)系事件序列異常包括這樣的情形:車駛?cè)胍杂嗁徥澄?，而沒有POS交易；顧客離開后發(fā)生POS交易，或早于顧客進(jìn)入POS/現(xiàn)金區(qū)域而發(fā)生POS交易(通知損失預(yù)防事件的可能機(jī)會(huì))；廚房制作比正常營業(yè)時(shí)間所需多得多的食物；銷售人員未接待的顧客數(shù)量高于正常(表明銷售同事可能缺席)；顧客進(jìn)入商店的比率高于正常(由VMA確定)但銷售低于正常(由POS確定);顧客在商店預(yù)定部分的逗留時(shí)間顯著地比顧客在其他區(qū)域的逗留時(shí)間長，但模式改變(表明存在對(duì)特殊促銷的效果或興趣的改變)。
[0104]由此，ACS52從在站點(diǎn)使用的多個(gè)系統(tǒng)收集不同類型的事件并且基于這些事件構(gòu)造/更新多個(gè)數(shù)據(jù)模型/映射56，如圖4所示。例如，從代理32、34、36、38和40以及AVMD54接收的來自事件序 列SEl……SEn的數(shù)據(jù)被相關(guān)以生成運(yùn)動(dòng)映射數(shù)據(jù)立方58，其隨后被用于創(chuàng)建事件序列映射56。事件序列映射56隨后被用于識(shí)別異常事件60，且系統(tǒng)可配置為生成對(duì)這些異常事件的通知62或報(bào)告。當(dāng)異常事件發(fā)生時(shí)，在ACS52對(duì)事件分析和相關(guān)之后生成通知62。通過在多個(gè)系統(tǒng)上識(shí)別異常，可觸發(fā)同步事件，通過動(dòng)作同步尋呼服務(wù)器66通知工人和/或經(jīng)理，從而例如加速顧客服務(wù)速率。
[0105]異常商務(wù)智能報(bào)告系統(tǒng)64 (參見圖3)能夠提供關(guān)于發(fā)生異常事件的時(shí)間和地點(diǎn)的詳細(xì)信息并且在異常頻率增加時(shí)表明需要改變站點(diǎn)處理。
[0106]為了基于例如即插即放設(shè)備來增加附加的異常分?jǐn)?shù)檢測(cè)引擎52，即插即放設(shè)備諸如高級(jí)視頻運(yùn)動(dòng)追蹤設(shè)備(例如追蹤器輸出對(duì)象邊界盒子)，本發(fā)明的另外的特征是可量測(cè)性。因此，系統(tǒng)被按照用 戶需要而定制。
[0107]如圖3所示，ACS52、異常商務(wù)智能報(bào)告系統(tǒng)64和動(dòng)作同步尋呼服務(wù)器66可以在包括毫微微小區(qū)集線器74的網(wǎng)絡(luò)上101連接到移動(dòng)顧客訂單系統(tǒng)68、自動(dòng)監(jiān)視系統(tǒng)70和商店運(yùn)營日志72 (下面將進(jìn)一步描述)。如這里所使用的，毫微微小區(qū)是用于改善小區(qū)域中移動(dòng)網(wǎng)絡(luò)覆蓋的設(shè)備。毫微微小區(qū)通過其正常連接局部地連接到移動(dòng)設(shè)備，然后將該連接在寬帶因特網(wǎng)連接上傳送回承載者，繞過正常的小區(qū)塔。
[0108]勞動(dòng)力管理
[0109]系統(tǒng)的一個(gè)建議用途是用于勞動(dòng)力管理。例如，在零售環(huán)境中，動(dòng)作同步尋呼服務(wù)器66能夠通知零售店經(jīng)理當(dāng)顧客數(shù)量少于銷售人員數(shù)量時(shí)顧客是否得到了銷售人員的幫助。但是，當(dāng)顧客數(shù)量大于銷售人員數(shù)量時(shí)，動(dòng)作同步尋呼服務(wù)器66可能不會(huì)生成警報(bào)或?qū)ず?。?dāng)銷售人員穿著標(biāo)記物、RFID或以其他方式來對(duì)他/她定位和識(shí)別時(shí)，系統(tǒng)能夠追蹤銷售人員怎樣與顧客交互。
[0110]系統(tǒng)還能夠從諸如蜂窩電話或活動(dòng)標(biāo)簽(諸如RFID系統(tǒng))的多個(gè)移動(dòng)設(shè)備收集交易數(shù)據(jù)。這些移動(dòng)設(shè)備使得系統(tǒng)能夠獲得位置信息，其能夠經(jīng)由運(yùn)營日志72與視頻圖像相結(jié)合。運(yùn)營日志72包含累積的商店運(yùn)營事件序列和系統(tǒng)所自動(dòng)檢測(cè)且在日志中記載的異常事件。移動(dòng)設(shè)備還從移動(dòng)設(shè)備和活動(dòng)標(biāo)簽收集交易數(shù)據(jù)。
[0111]收集到的交易數(shù)據(jù)可包括，例如:
[0112]A.與設(shè)備在一位置處何時(shí)開始和結(jié)束運(yùn)營相關(guān)聯(lián)的數(shù)據(jù)。這樣的交易數(shù)據(jù)可包括訂購的或要被處理的貨品或服務(wù)。例如，系統(tǒng)從移動(dòng)設(shè)備收集在線訂單信息并將其轉(zhuǎn)發(fā)給能夠完成訂單的機(jī)器。交易、基于視頻的計(jì)數(shù)、基于視頻的猶豫顧客檢測(cè)、雇員追蹤記錄，可能基于訂單和RFID追蹤。
[0113]B.與每一人員的表現(xiàn)相關(guān)聯(lián)的數(shù)據(jù)可以被生成和/或更新，用于完成每一貨品。這個(gè)持續(xù)更新的模型捕捉特定員工對(duì)每一個(gè)體商品的服務(wù)時(shí)間。
[0114]C.基于例如蜂窩電話交易數(shù)據(jù)和基于視頻的數(shù)據(jù)，對(duì)于每一商品，與基于一天中各時(shí)刻和一周中各天的顧客要求相關(guān)的數(shù)據(jù)可以被生成和/或更新。
[0115]D.通過將與RFID軌跡相關(guān)聯(lián)的數(shù)據(jù)同與訂單信息相關(guān)聯(lián)的數(shù)據(jù)(蜂窩電話交易)相結(jié)合，提議的系統(tǒng)學(xué)習(xí)員工響應(yīng)于在線訂單而執(zhí)行的運(yùn)營的序列。結(jié)合的數(shù)據(jù)通過檢測(cè)事件而與相機(jī)的視野相關(guān)，以在準(zhǔn)備特定訂單時(shí)學(xué)習(xí)快照。這些序列用于構(gòu)建日志72(例如用于損失預(yù)防)和在沒有觀察到期望序列時(shí)檢測(cè)異常(并且可能提供實(shí)時(shí)提示給店經(jīng)理)。
[0116]E.當(dāng)將與員工表現(xiàn)和期望商品要求和排隊(duì)時(shí)間相關(guān)聯(lián)的數(shù)據(jù)相結(jié)合時(shí)，系統(tǒng)能夠做出配置員工的決定，同時(shí)平衡服務(wù)時(shí)間與合適的員工(例如，系統(tǒng)不需要向最快的員工分派“汽車穿梭站”工作，因?yàn)橄到y(tǒng)能夠調(diào)配不太有經(jīng)驗(yàn)但仍滿足服務(wù)等級(jí)的員工，而在相同商店中的其他地方使用更有經(jīng)驗(yàn)的員工)。
[0117]F.期望服務(wù)/等候時(shí)間信息被實(shí)時(shí)地顯示到商店前的顯示器上，并且對(duì)于顧客可在線獲得，以便在“汽車穿梭站”處提供一些關(guān)于等候時(shí)間的信息。
[0118]為了提供更好的顧客服務(wù)，系統(tǒng)能夠指出哪個(gè)顧客首先到達(dá)站點(diǎn)/商店。強(qiáng)調(diào)到達(dá)的優(yōu)先級(jí)減少了 “加塞”和顧客的不滿。這樣的產(chǎn)生關(guān)于顧客在商店花費(fèi)多長時(shí)間的數(shù)據(jù)的系統(tǒng)為商店提供了有關(guān)顧客交通量的有價(jià)值的洞察力。
[0119]系統(tǒng)從位置信息、估計(jì)到達(dá)時(shí)間和訂單處理工作流狀態(tài)收集多種類型的統(tǒng)計(jì)數(shù)據(jù)。使用多個(gè)傳感器的輸入和輸出，系統(tǒng)能執(zhí)行對(duì)于經(jīng)理或工人來說并不容易人工完成的分析，例如:
[0120]A.在汽車穿梭站中，車輛超越常規(guī)服務(wù)速率而異?？焖俚竭_(dá)，能夠通過視頻來在訂單進(jìn)入POS系統(tǒng)之前檢測(cè)出。系統(tǒng)能提示工人(其可能佩戴顯示諸如車數(shù)量或訂單的實(shí)時(shí)商店運(yùn)營數(shù)據(jù)的特殊眼鏡，或者其可能正在觀看實(shí)時(shí)顯示器以加速工人的訂單處理，等等)加速訂單處理速率，或者提示經(jīng)理向汽車穿梭站提供額外資源。
[0121]B.大數(shù)量特定貨品(例如漢堡包)的異常訂單，將需要來自廚房的關(guān)注，以便平衡大訂單與其他較小訂單(shorter order),使得大訂單不會(huì)阻礙其他顧客訂單的訂單處理。
[0122]C.正常到達(dá)條件下的異常高的猶豫率(即，當(dāng)顧客或車輛退出訂單隊(duì)列時(shí))可能表明某些站點(diǎn)運(yùn)營錯(cuò)誤可能需要得到注意。
[0123]D.異常長的到達(dá)間隔可能是由于交通堵塞。
[0124]E.異常高的商品退回率很有可能是虛假退貨(例如，當(dāng)顧客接收退貨但其來自實(shí)際未退回的貨品時(shí))，用于損失預(yù)防。 [0125]F.顧客在站點(diǎn)區(qū)域中的異常低的逗留時(shí)間可能表明貨品放置方面的問題。
[0126]當(dāng)確定異常事件時(shí)，系統(tǒng)能夠自動(dòng)執(zhí)行動(dòng)作，例如:
[0127]A.基于高或低存貨以及顧客訂單模式的異常程度，系統(tǒng)能夠提供實(shí)時(shí)通知以自動(dòng)觸發(fā)促銷行為。紙質(zhì)或虛擬促銷優(yōu)惠券可被遞送給商店附近的決定參加的忠誠顧客(例如登記在賣家的顧客忠誠度計(jì)劃中的購物者，通過例如CRM識(shí)別)。可以使用會(huì)員顧客檔案來查看通過個(gè)性化優(yōu)惠券優(yōu)待的向上出售(up-sell)和互出售(cross-sell)機(jī)會(huì)。個(gè)性化優(yōu)惠券分配系統(tǒng)可檢查當(dāng)前活動(dòng)訂單并且將會(huì)員顧客的偏好與當(dāng)前可用存貨相比較以識(shí)別向上出售機(jī)會(huì)。例如，如果會(huì)員顧客通常在上午訂購咖啡，但這次沒有訂購，而且在站點(diǎn)有大量咖啡供應(yīng)的話，則可以由個(gè)性化優(yōu)惠券分配系統(tǒng)提供對(duì)于會(huì)員顧客的咖啡打折優(yōu)惠券(例如，可以發(fā)送給會(huì)員顧客的移動(dòng)電話應(yīng)用)。
[0128]B.使用顧客的位置信息，有可能基于顧客期望到達(dá)時(shí)間來規(guī)劃及時(shí)的訂單處理。工人可被監(jiān)視，由此他/她能夠及時(shí)準(zhǔn)備訂單以便顧客領(lǐng)取。當(dāng)準(zhǔn)備中的延遲異常時(shí)，可能會(huì)意味著生產(chǎn)率問題或特殊訂單異常。
[0129]C.當(dāng)顧客進(jìn)入商店時(shí)，重要的是監(jiān)視工人向顧客提供的服務(wù)水平。視頻分析子系統(tǒng)可捕捉能與銷售人員的會(huì)面-接待行為或者收銀員怎樣處理退回的貨物相關(guān)的數(shù)據(jù)。異常高或低的相關(guān)性或發(fā)生可能表明銷售或損失預(yù)防機(jī)會(huì)。
[0130]D.面部檢測(cè)和識(shí)別以確定工人的時(shí)間和出席(記錄器具有視頻日志)或者確定顧客自助服務(wù)序列異常，可能自動(dòng)地告知工人按照要求提供顧客支持。工人的移動(dòng)電話可用作具有面部驗(yàn)證的訪問控制卡以增加系統(tǒng)可靠性。
[0131]E.數(shù)字標(biāo)志(響應(yīng)于顧客簡況、年齡、種族等等，作為輸入到廣告管理器以將廣告內(nèi)容與多數(shù)顧客簡況相匹配)。當(dāng)遇到異常簡況時(shí)，系統(tǒng)能夠向工人提升提示級(jí)別。集成POS系統(tǒng)和數(shù)字標(biāo)志提供了解決方案。POS終端上的相機(jī)面對(duì)顧客并且捕捉顧客的面部圖像(選擇面部圖像的最佳集合以用于進(jìn)一步處理和識(shí)別任務(wù))。收集到的面部圖像被提供給年齡、性別等決策模塊以得到顧客簡況信息。該信息由基于簡況的廣告系統(tǒng)使用來控制數(shù)字標(biāo)志上的內(nèi)容。相同識(shí)別系統(tǒng)也用于安全和安全應(yīng)用(搜索感興趣的人)。
[0132]本公開的特征除了追蹤POS數(shù)據(jù)以外或者作為對(duì)其的替換，還追蹤業(yè)務(wù)數(shù)據(jù)。當(dāng)POS數(shù)據(jù)被用于追蹤歷史銷售、交易和存貨移動(dòng)時(shí)，業(yè)務(wù)數(shù)據(jù)是用于理解銷售潛力的理想的度量。由于業(yè)務(wù)數(shù)據(jù)集大于POS數(shù)據(jù)集(因?yàn)椴皇撬羞M(jìn)入商店的人都會(huì)購買)，分析業(yè)務(wù)數(shù)據(jù)向站點(diǎn)提供了基于機(jī)會(huì)的銷售策略。例如，如果商店能夠在正確時(shí)間在正確地點(diǎn)部署正確的人，就會(huì)滿足顧客的要求和期望，而不會(huì)招致額外的人員成本(即，系統(tǒng)允許商店最大化其員工的利用率)。
[0133]本公開的另一特征允許站點(diǎn)檢測(cè)未被幫助的顧客。在這種情形下，希望確保顧客快速得到幫助以避免潛在銷售損失。關(guān)于此，每個(gè)銷售人員持有位置識(shí)別設(shè)備(諸如RFID標(biāo)簽、移動(dòng)PC、尋呼器、智能電話等)，并且識(shí)別正在等候的顧客的身份和位置(使用例如面部識(shí)別、CRM、智能電話)。注意到，實(shí)際身份(姓名等)對(duì)于系統(tǒng)的工作來說不需要，而只識(shí)別獨(dú)特的個(gè)體(例如，亞洲男性，年齡在18-35歲)。
[0134]參看圖5，在步驟S50，監(jiān)視雇員(最好是空閑的雇員)的位置，在步驟S52，監(jiān)視顧客的位置。使用上述的位置識(shí)別，在步驟S53，確定雇員和顧客之間的位置關(guān)系。在步驟S54，如果雇員和顧客之間的距離在預(yù)定值范圍之外，在步驟S56雇員被提示:顧客需要幫助。在步驟S54，如果雇員和顧客之間的距離在預(yù)定值范圍之內(nèi)，則系統(tǒng)確定顧客正被雇員的幫助，且處理返回到步驟S50。系統(tǒng)還具有追蹤和記錄雇員花多長時(shí)間來接待顧客以及確定雇員在派遣時(shí)的源起位置的能力。
[0135]參見圖7-8， 本公開的特征還使用面部檢測(cè)和匹配以獲得顧客信息，諸如顧客到達(dá)信息。為了增加顧客追蹤的準(zhǔn)確度，系統(tǒng)使用與每個(gè)被追蹤對(duì)象軌跡ObjTi，ObjTj相關(guān)聯(lián)的面部數(shù)據(jù)的集合{F}作為附加特征。對(duì)象首先由連接到或具有對(duì)象追蹤器80的傳感器(諸如相機(jī)44)捕捉。被追蹤的對(duì)象通過匹配模塊82被處理，匹配模塊82通過使用對(duì)象軌跡運(yùn)動(dòng)模式和面部特征集合來確定對(duì)象軌跡之間的相似性。匹配模塊82識(shí)別相似的對(duì)象軌跡集合，并且認(rèn)為它們屬于相同的人。
[0136]而且，匹配模塊82處理來自不同相機(jī)的對(duì)象軌跡數(shù)據(jù)ObjTi，ObjTj,以便實(shí)時(shí)相似性搜索，以通過利用與對(duì)象軌跡數(shù)據(jù)相關(guān)聯(lián)的面部數(shù)據(jù)/特征的集合來恢復(fù)屬于相同人的對(duì)象軌跡。而且，對(duì)象軌跡數(shù)據(jù)可以被用于多相機(jī)校準(zhǔn)用途。
[0137]而且，為了加速追蹤處理，匹配模塊82能夠基于學(xué)習(xí)的相機(jī)之間的時(shí)間-空間關(guān)聯(lián)性而去除候選。在上面的軌跡分組完成之后，系統(tǒng)能更新人物的出現(xiàn)和消失時(shí)間戳，以通過使用人物表格84來確定例如哪個(gè)顧客為先、顧客等候了多長時(shí)間、顧客在店里停留了多長時(shí)間(可能顯示在監(jiān)視器上)。這樣的信息可以被用來例如確定哪條隊(duì)伍空負(fù)荷，以確定收銀員表現(xiàn)。
[0138]系統(tǒng)還能夠判斷所獲得的面部圖像是否質(zhì)量良好，能判斷代表面部圖像的集合是否質(zhì)量良好，能計(jì)算一個(gè)面部與代表面部的集合之間的相似度(并且能讓相機(jī)知道)。
[0139]圖7示范了如何通過使用面部數(shù)據(jù)和面部特征的集合關(guān)聯(lián)相同相機(jī)視圖中的對(duì)象軌跡。在圖7中，追蹤器80還可以提取面部檢測(cè)和對(duì)所獲得的面部圖像是否質(zhì)量良好判斷；但是，不是所有對(duì)象軌跡將具有面部數(shù)據(jù)(例如在相機(jī)從后觀察個(gè)體時(shí))。
[0140]當(dāng)軌跡匹配在對(duì)象表格86中完成時(shí)，這些匹配軌跡被映射到人物視圖，其中，系統(tǒng)可以使用人物表格84指派唯一標(biāo)識(shí)符并且提取人物到達(dá)時(shí)間。
[0141]收銀員表現(xiàn)因此可以通過組合排隊(duì)時(shí)間信息、失去多少顧客(不買東西就離開商店)、POS交易的數(shù)、貨品、數(shù)量等而得到評(píng)估。在有多個(gè)收銀員的情況下，則店經(jīng)理能夠立即看出每個(gè)收銀員的平均顧客等候時(shí)間。
[0142]圖8示出了用于使用多個(gè)相機(jī)44來進(jìn)行面部檢測(cè)和匹配的系統(tǒng)。當(dāng)使用多個(gè)相機(jī)44時(shí)，匹配模塊82使用專門相機(jī)軌跡模式與相機(jī)關(guān)聯(lián)模式一起來通過去除不可能的情況而減少匹配執(zhí)行時(shí)間。人物表格84以與上述相同的方式填充。
[0143]等候最長的顧客(對(duì)象)是具有最小時(shí)間戳的一個(gè)。該信息能夠與追蹤器元數(shù)據(jù)“Meta” 一起被插入到相機(jī)視頻流中。當(dāng)顯示對(duì)象的元數(shù)據(jù)時(shí)，顧客等候時(shí)間或顧客在店里停留的時(shí)間量可以被使用例如實(shí)時(shí)傳輸協(xié)議RTP來顯示。這樣，平均購物者平均購物時(shí)間的簡況可以被利用來提供提示給監(jiān)視人員:特定對(duì)象/人物在店鋪中的時(shí)間超過平均，這可以是對(duì)損失預(yù)防的前置篩查。此信息可存儲(chǔ)在網(wǎng)絡(luò)視頻存貯器(NVR)中。
[0144]在不存在空閑雇員來幫助顧客的情形下，系統(tǒng)使用收入期望模型來幫助顧客。例如，如果存在未被幫助的顧客持有高價(jià)值物品，諸如計(jì)算機(jī)(例如由物品上的RFID標(biāo)簽來確定)，或在商店的高價(jià)值位置逗留(例如，計(jì)算機(jī)內(nèi)部通道)，并且存在正被幫助的其他顧客持有低價(jià)值物品 (例如視頻游戲盒)或者在商店的低價(jià)值內(nèi)部通道逗留(例如視頻游戲內(nèi)部通道)，則幫助持有低價(jià)值物品或在商店的低價(jià)值內(nèi)部通道逗留的顧客的雇員被指導(dǎo)離開該顧客而幫助持有高價(jià)值物品或在商店的高價(jià)值位置逗留的顧客。這樣，對(duì)具有更大收入期望的顧客給予優(yōu)先權(quán)。系統(tǒng)還可以存儲(chǔ)每個(gè)銷售同事的銷售和教育技能集合，其隨后可以與商品類型相匹配。系統(tǒng)可以利用技能集合信息來(從多個(gè)空閑銷售人員中，從多個(gè)繁忙銷售人員中)選擇銷售同事以派遣到商店存放合適類型商品的區(qū)域。
[0145]本公開的進(jìn)一步的特征監(jiān)視多個(gè)顧客的位置，并確定未被幫助的每個(gè)顧客未被幫助的時(shí)間段，由此銷售人員可以按照哪個(gè)顧客等候最長時(shí)間的順序而被派遣到顧客。
[0146]本公開的另一特征提供了一種用于根據(jù)商品類型而決定合適顧客等候時(shí)間的系統(tǒng)和方法。在商店中，每個(gè)內(nèi)部通道/部分承載了不同類型的商品，根據(jù)內(nèi)部通道/部分中的商品的類型，顧客花費(fèi)不同時(shí)間量，并且將因此常常來尋求銷售的幫助。
[0147]如上所述，系統(tǒng)能夠使用視頻數(shù)據(jù)挖掘技術(shù)來檢測(cè)和/或預(yù)測(cè)顧客的期望等候時(shí)間。系統(tǒng)利用RFID追S示(員工和商品)和視頻(顧客、員工、商品)來提供功能。當(dāng)系統(tǒng)檢測(cè)到顧客停留的時(shí)間超過期望時(shí)，系統(tǒng)會(huì)派遣銷售同事。收集到的交易數(shù)據(jù)記錄了顧客所等候的內(nèi)部通道、他/她等了多長時(shí)間、銷售同事何時(shí)到達(dá)、銷售同事ID、銷售同事幫助顧客了多長時(shí)間、幫助是否導(dǎo)致了銷售、以及數(shù)量。當(dāng)客戶離開且沒有銷售同事幫助過他/她時(shí)(損失機(jī)會(huì))，系統(tǒng)進(jìn)行記錄。(使用例如RFID標(biāo)簽數(shù)據(jù))計(jì)算關(guān)于是否發(fā)生購買的轉(zhuǎn)換率(基于對(duì)顧客的幫助是否導(dǎo)致銷售的比率)。系統(tǒng)隨后能夠根據(jù)觀察到的轉(zhuǎn)換成功率而調(diào)整顧客停留閾值。
[0148](導(dǎo)致轉(zhuǎn)換的)捕捉到的視頻可被利用來訓(xùn)練其他同事。諸如這樣的資源允許人力資源部門用捕捉到的和錯(cuò)失的機(jī)會(huì)來訓(xùn)練并且重新訓(xùn)練其銷售同事。
[0149]在每個(gè)商店收集了 POS交易數(shù)據(jù)之后，系統(tǒng)能夠?qū)r(shí)間段數(shù)據(jù)與天氣信息和節(jié)假日信息整合起來。這樣的整合產(chǎn)生了用于預(yù)測(cè)銷售、銷售貨品、對(duì)員工的需求的基本模型。在個(gè)體商店數(shù)據(jù)收集到中心化數(shù)據(jù)倉庫中之后，另一算法通過商店的地理位置對(duì)它們進(jìn)行整合，由此提供地理相似性和不相似性模型。此考量可被用于檢測(cè)異常商店表現(xiàn)，其中，表現(xiàn)好的商店幫助總部學(xué)習(xí)更多的有關(guān)哪些銷售和/或市場(chǎng)技術(shù)管用的信息，由此表現(xiàn)差的商店或者將被進(jìn)行計(jì)劃或者將被關(guān)閉。
[0150]期望銷售貨品的判定將允許向各個(gè)商店提供貨物，整合查看可被利用來優(yōu)化將貨物提供給不同站點(diǎn)。供應(yīng)卡車被裝上用于多個(gè)商店位置的貨物，由此改善供應(yīng)遞送以及每個(gè)商店的存貨，其中每個(gè)商店 將具有賣掉最多的貨物直到下一輛供應(yīng)卡車到達(dá)。使用該數(shù)據(jù)，系統(tǒng)能夠比較無存貨的成本和派遣供應(yīng)卡車的成本。這個(gè)持續(xù)的信息收集、整合、預(yù)測(cè)、以及轉(zhuǎn)變?yōu)椴煌虡I(yè)行為，將增加站點(diǎn)運(yùn)營的效率。
[0151]根據(jù)本公開的另一特征，集成汽車(或智能電話)導(dǎo)航系統(tǒng)和顧客訂單系統(tǒng)能夠給出到最近可到達(dá)商店的實(shí)際駕駛距離。而且，集成系統(tǒng)能夠?qū)?shí)時(shí)交通擁堵數(shù)據(jù)與歷史數(shù)據(jù)相組合來得到“最近商店”的新定義，其取決于當(dāng)天時(shí)刻、道路、道路施工、顧客當(dāng)前位置、顧客訂單、商店工作時(shí)間等。例如，顧客當(dāng)前位置可能對(duì)于第一天和第二天是相同的，但返回給用戶的“最近商店”數(shù)據(jù)對(duì)于第一天和第二天卻是不同的，這是由于例如第二天規(guī)劃的道路修補(bǔ)。
[0152]當(dāng)訂單從一站遞送到另一站時(shí)(例如倉庫中的訂單履行處理期間，其具有提貨、裝貨、運(yùn)送的步驟等)，相機(jī)能夠得到在此流水線期間訂單的快照以記錄或記載系統(tǒng)怎樣履行訂單。損失預(yù)防人員能夠通過訪問解釋特定訂單如何被履行的日志來調(diào)查損失或投訴案例。實(shí)踐中，此操作可以通過多種技術(shù)的有效集成來實(shí)現(xiàn)。例如，追蹤、訂單處理、相機(jī)、和知道相機(jī)位置和FOV (視野)以及處理的訂單的控制模塊指示相機(jī)準(zhǔn)備捕捉圖像和將其存儲(chǔ)在多媒體服務(wù)器中?？刂破骺梢杂糜蓸?biāo)簽讀取事件觸發(fā)并且與期望標(biāo)簽號(hào)(與訂單相關(guān)聯(lián))匹配的動(dòng)作預(yù)先配置每個(gè)相機(jī)具有?？刂破骺深A(yù)先配置響應(yīng)標(biāo)簽讀取事件可捕捉訂單圖像的所有相機(jī)。而且，每個(gè)動(dòng)作還包括有關(guān)在哪里存儲(chǔ)捕捉到的多媒體信息的指令。而且，控制器還配置如果在給定時(shí)間窗口內(nèi)未觀察到期望標(biāo)簽讀取事件而觸發(fā)的動(dòng)作以檢測(cè)訂單是否沒有在期望位置出現(xiàn)。而且，基于從相似/相同訂單收集到的在先數(shù)據(jù)來學(xué)習(xí)時(shí)間窗口。
[0153]在零售POS交易的情況下，損失預(yù)防(LP)人員調(diào)查特定操作，諸如現(xiàn)金交易、退換上述特定價(jià)格閾值或特定感興趣貨品(基于例如SKU號(hào))、用折扣券交易或打折交易、分段支付、特定信用卡類型、特定收銀員等等。對(duì)于LP人員有益的是能夠查明包括相干部分的多媒體(視頻、音頻、面部等)記錄的“片斷”。向LP人員給出必要的多媒體片斷使得LP人員能夠更有效地開展他們的工作。
[0154]位置感知訂單處理
[0155]本公開的一個(gè)方面為站點(diǎn)提供位置感知訂單處理，諸如快餐汽車穿梭站操作，或接受預(yù)訂單、后提貨的任何其他站點(diǎn)，如圖6所示。位置感知訂單應(yīng)用可以在例如顧客的無線設(shè)備上運(yùn)行，例如蜂窩電話76或其他移動(dòng)設(shè)備。此該應(yīng)用連接到網(wǎng)絡(luò)101，使用服務(wù)來基于顧客位置來定位附近的汽車穿梭站站點(diǎn)，在步驟S60執(zhí)行。在步驟S61，應(yīng)用通知(通過音頻提示或其他)顧客(當(dāng)他/她正在駕駛或移動(dòng)時(shí))有關(guān)附近商店的信息。在步驟S62，顧客選擇附近商店之一且詢問關(guān)于在該店可用貨品目錄的信息。在步驟S63，應(yīng)用通知顧客可用貨品。如果顧客想訂購，應(yīng)用在步驟S64接訂單(使用例如語音接口從而不會(huì)使正在駕駛的顧客分心)。在應(yīng)用在步驟S65向顧客驗(yàn)證訂單之后，應(yīng)用在步驟S66將該訂單提交給商店并且獲得提貨代碼。應(yīng)用還可提供導(dǎo)航指令給顧客。顧客進(jìn)入站點(diǎn)、通知站點(diǎn)其代碼(通過例如出示蜂窩電話屏幕上的票)、并且提取訂單。此解決方案自動(dòng)化了接訂單以及支付步驟。當(dāng)顧客到達(dá)時(shí)，支付可以由站點(diǎn)收取，或者可以通過蜂窩電話76電子地完成。
[0156]由此，勞動(dòng)力和交易時(shí)間以及開銷可以得到減少，交易時(shí)間可以減少，LP機(jī)會(huì)由于自動(dòng)化支付收集而可以減少，顧客等候時(shí)間可以減少，通過由于減少擁塞而服務(wù)更多顧客使得每個(gè)商店的利潤和收入可以增加。
[0157]為了進(jìn)一步增加商店/站點(diǎn)的效率，可以基于顧客估計(jì)到達(dá)時(shí)間來規(guī)劃和準(zhǔn)備訂單。例如，在系統(tǒng)接受來自顧客的通過蜂窩電話76的訂單之后，系統(tǒng)通過接收來自車內(nèi)或蜂窩電話76導(dǎo)航系統(tǒng)的顧客位置信息而估計(jì)到達(dá)時(shí)間，并且通知訂單處理器系統(tǒng)78(其可能基于云或者在提貨站點(diǎn)位置)，其轉(zhuǎn)而將到達(dá)時(shí)間信息與估計(jì)訂單準(zhǔn)備時(shí)間相結(jié)合來確定何時(shí)規(guī)劃顧客訂單的準(zhǔn)備。通過準(zhǔn)備恰好及時(shí)的訂單，顧客接收新鮮準(zhǔn)備的食物(或者其他貨品)，由此改進(jìn)顧客滿意度。進(jìn)而，使得商店的廚房隨后能夠更有效率地準(zhǔn)備食物。
[0158]在本公開的一個(gè)方面，訂單處理系統(tǒng)78可以還向顧客發(fā)送將準(zhǔn)備和/或?qū)⑾蝾櫩吞峁┯唵蔚墓と说拿娌繄D像。當(dāng)顧客到達(dá)汽車穿梭站時(shí)，顧客向面部識(shí)別系統(tǒng)顯示工人的面部圖像，其通過通知系統(tǒng)(諸如尋呼器、語音通信系統(tǒng)等)通知該工人有關(guān)顧客訂單的提取。訂單處理器系統(tǒng)78發(fā)送與訂單和支付相關(guān)聯(lián)的代碼(諸如快速響應(yīng)“QR”代碼等)。當(dāng)顧客到達(dá)汽車穿梭站 時(shí)，顧客向訂單代碼識(shí)別系統(tǒng)出示代碼(其可能是無線設(shè)備/電話76上的圖像)，其通知工人顧客到達(dá)以便訂單提貨。
[0159]而且，使用基于人口統(tǒng)計(jì)(年齡、性別、種族等)的顧客計(jì)數(shù)，勞動(dòng)力管理系統(tǒng)能夠?qū)趧?dòng)力與期望顧客業(yè)務(wù)的統(tǒng)計(jì)人口相匹配，由此改進(jìn)顧客關(guān)照和體驗(yàn)。
[0160]顧客駘證
[0161]現(xiàn)在參看圖9-10，當(dāng)顧客去從諸如汽車穿梭站設(shè)施的站點(diǎn)提取他/她的訂單時(shí)，系統(tǒng)能夠驗(yàn)證顧客的身份，即訂購的顧客與提取訂單的顧客相同。
[0162]當(dāng)顧客訂購時(shí)，包括顧客面部的圖像的數(shù)據(jù)可以被提供給系統(tǒng)(從顧客的智能電話，通過CRM預(yù)先存儲(chǔ)等)，由此商店雇員能通過看顧客的面部而匹配訂單所附的面部圖像來容易地識(shí)別顧客?？商鎿Q地，不用商店雇員視覺上確認(rèn)顧客面部的匹配，可以利用面部檢測(cè)和識(shí)別系統(tǒng)來比較提取訂單的顧客的面部與訂購的顧客的面部的圖像。為了增加操作效率，在面部識(shí)別系統(tǒng)不能驗(yàn)證提取訂單的顧客身份的情況下，面部識(shí)別系統(tǒng)能夠提示工人:工人需要進(jìn)一步驗(yàn)證顧客的面部。使用圖形用戶界面(GUI)，工人能夠佩戴增強(qiáng)眼鏡，其能夠顯示將提取訂單的期望人物的面部圖像。
[0163]訂單產(chǎn)生過程被修改且訂單處理服務(wù)還返回訂單代碼(包括但不限于QR代碼)，顧客將出示該訂單代碼來提取訂單。發(fā)送給顧客的QR代碼包括從例如顧客姓名、移動(dòng)設(shè)備的唯一設(shè)備標(biāo)識(shí)符(UDID)、移動(dòng)電話號(hào)碼、CRM會(huì)員號(hào)、牌照、訂單號(hào)碼等獲取的編碼信息。此代碼也被提供給站點(diǎn)。
[0164]圖10示意性顯示了在接收訂單代碼后識(shí)別顧客的示例方式。當(dāng)顧客在他/她的車輛中到達(dá)設(shè)施時(shí)，在步驟S101，牌照讀取器88收集顧客的牌照信息。在步驟S102，無線協(xié)議系統(tǒng)，諸如毫微微小區(qū)，從他/她的智能電話76收集顧客的UDID信息(例如毫微微小區(qū)驗(yàn)證訂單處理系統(tǒng)以接受來自設(shè)備或會(huì)員數(shù)據(jù)庫的注冊(cè))，由此使得系統(tǒng)通過使用他/她的牌照和移動(dòng)設(shè)備UDID而累積有關(guān)顧客的數(shù)據(jù)。
[0165]在步驟S103，顧客出示其移動(dòng)電話上的QR代碼，由此QR識(shí)別模塊檢測(cè)代碼、提取并解碼該代碼。QR識(shí)別模塊檢查針對(duì)訂購貨品的信息、訂單處理系統(tǒng)中的無線協(xié)議系統(tǒng)和LPR所收集的信息。由于可接受匹配需要信息的兩個(gè)或更多項(xiàng)目(或全部)，系統(tǒng)能夠驗(yàn)證提取訂單的顧客就是訂購的顧客。
[0166]上述系統(tǒng)能夠根據(jù)如何編碼QR代碼(B卩，其可以通過使用從UDID、面部圖像等導(dǎo)出的密鑰而進(jìn)行加密)而得以增強(qiáng)。在可替換實(shí)施例中，系統(tǒng)能夠檢查電話的位置(通過GPS或其他地理定位)或者社交媒體站點(diǎn)(如果會(huì)員信息已知)。
[0167]上述系統(tǒng)能夠確定顧客的到達(dá)速率。例如，相機(jī)44或其他傳感器觀察汽車穿梭站的入口并且檢測(cè)車是否進(jìn)入汽車穿梭站車道。系統(tǒng)隨后收集這些“進(jìn)入”事件并且產(chǎn)生每小時(shí)到達(dá)計(jì)數(shù)數(shù)據(jù)。通過利用相同時(shí)間間隔的計(jì)數(shù)采樣來計(jì)算任何給定小時(shí)的到達(dá)速率。
[0168]上述系統(tǒng)還能夠通過使用連續(xù)學(xué)習(xí)模型和當(dāng)前觀察來檢測(cè)異常高于期望的顧客到達(dá)率。當(dāng)對(duì)于當(dāng)前時(shí)間間隔和上次警報(bào)時(shí)間戳，上次服務(wù)時(shí)間(移動(dòng)窗口)內(nèi)的到達(dá)的數(shù)目相比于期望/學(xué)習(xí)的到達(dá)率時(shí)，系統(tǒng)能夠生成報(bào)告或警報(bào)。
[0169]通過基于在先學(xué)習(xí)模型和當(dāng)前觀察來生成報(bào)告或警報(bào)，上述系統(tǒng)進(jìn)一步能夠檢測(cè)異常低于期望的顧客到達(dá)率。系統(tǒng)能夠周期性對(duì)于當(dāng)前時(shí)間間隔檢查上次到達(dá)事件與期望到達(dá)之間時(shí)間(inter arrival time)。如果對(duì)于當(dāng)前時(shí)間戳,相對(duì)于學(xué)習(xí)的到達(dá)之間時(shí)間，時(shí)間維度上的距離變得大于期望，且上次警報(bào)時(shí)間戳大于期望到達(dá)之間時(shí)間，則此方法生成警報(bào)或報(bào)告以通知 此情形。
[0170]上述系統(tǒng)此外能夠基于顧客到達(dá)順序而安排顧客訂單的順序，如圖11所示。在車輛到達(dá)站點(diǎn)時(shí)讀取車輛的牌照的牌照讀取器(LPR) 88以車輛到達(dá)的順序生成汽車穿梭站車輛牌照列表(LP)。訂單處理系統(tǒng)參考就緒顧客訂單的訂單就緒列表并且安排這些訂單以對(duì)應(yīng)于汽車穿梭站牌照列表，由此訂單可以更易于以顧客到達(dá)提取窗口的順序而被發(fā)放給顧客。
[0171]損失預(yù)防(LP)
[0172]本公開的一個(gè)方面通過在自動(dòng)化多媒體事件服務(wù)器中鏈接損失預(yù)防/商店安全視頻(可來自于多個(gè)商店)來發(fā)現(xiàn)其類同，從而幫助識(shí)別有組織盜竊集團(tuán)，有助于避免損失預(yù)防?；谄鋬?nèi)容相似性，對(duì)LP案件進(jìn)行分級(jí)。LP人員可以調(diào)查LP視頻并驗(yàn)證其鏈接(其增加用于瀏覽的LP視頻與事件多媒體日志72之間的鏈接)。鏈接的瀏覽通過減少要被調(diào)查的視頻數(shù)量并且使LP人員專注于更少長度、更多相關(guān)性的視頻集合，從而提高了 LP人員的效力。LP人員能夠由此更易于記住視頻內(nèi)容的相似性，由此減少調(diào)查成本，同時(shí)通過分類和鏈接LP多媒體數(shù)據(jù)而改進(jìn)系統(tǒng)效率。圖12示出了根據(jù)本公開的特征使用云服務(wù)的示例的鏈接的損失預(yù)防系統(tǒng)。
[0173]本公開的特征使用面部數(shù)據(jù)集合來在LP案件之間進(jìn)行相關(guān)，如圖13-14所示。面部特征的集合在LP視頻中以元數(shù)據(jù)的形式呈現(xiàn)，并且被用于判斷LP(i)和LP(j)之間的內(nèi)容相似性。LP服務(wù)器90包含[Lpi，F(xiàn)Vi]元組，其中FVi包含LP (i)的元數(shù)據(jù)(FV被定義為面部值)。(由于檢測(cè)到的面部的數(shù)量、POS貨品等等)FV(i)可以具有不同數(shù)量的元數(shù)據(jù)特征。[0174]在圖13 和 14 中，LP1=Hh H, H，...}和 LP2={{}，{}，{}，...}每個(gè)都具有對(duì)于每個(gè)檢測(cè)對(duì)象的面部集合。LP1 n LP2指示兩個(gè)LP案件中的共同的人。(LP1 n LP2)的分?jǐn)?shù)可被用來對(duì)LP案件分級(jí)。更高的相關(guān)性意味著相關(guān)的LP案件是有關(guān)的。D(LPpLP2)表示內(nèi)容相似性。分?jǐn)?shù)函數(shù)可以具有來自挖掘結(jié)果的有關(guān)特定觀察區(qū)域(例如在特定時(shí)間間隔和相機(jī)視野(FOV)中特定區(qū)域/地區(qū)獲得的采樣)準(zhǔn)確度的額外信息，被定義為Accuracy (Timelnterval, AreaOfCamera, CameraId) e [O,…,100]。
[0175]進(jìn)一步，當(dāng)使用搖攝-傾斜-變焦(PTZ)時(shí)，歸屬位置信息變?yōu)闇?zhǔn)確度函數(shù)的一部分(即PTZ坐標(biāo)信息應(yīng)該也要考慮)，被定義為:Accuracy (Timelnterval, AreaOfCamera, Camerald, PTZ) e [0，…，100]。
[0176]還要注意，為了增加準(zhǔn)確度，除了包含面部特征的元數(shù)據(jù)之外，元數(shù)據(jù)可以另外包含例如POS交易數(shù)據(jù)、收銀員信息等，并且也可以與視頻圖像相關(guān)聯(lián)。
[0177]根據(jù)另一個(gè)方面，每個(gè)LPi被建模為曲線圖的節(jié)點(diǎn)且算法可以向連接LP1至LP2的鏈接指派強(qiáng)度值，作為LP1 n LP2的函數(shù)。然后，由于LP視頻的連接性的強(qiáng)度，分級(jí)算法可以選擇具有強(qiáng)連接(曲線圖中的島)的LP案件的組。
[0178]圖8示出了基于LPi H LPj的分?jǐn)?shù)鏈接的LP視頻的分組，由此系統(tǒng)可以提取人物的公共組(其例如對(duì)LP事件負(fù)責(zé))。通過使用運(yùn)行在按需可縮放云平臺(tái)上的系統(tǒng)，鏈接視頻的成本可被縮減。當(dāng)必要時(shí)用戶可以利用這樣的服務(wù)(其可依賴于LP事件的數(shù)目并且當(dāng)超出期望事件級(jí)別時(shí)觸發(fā)該服務(wù))。觸發(fā)服務(wù)通過利用其時(shí)間和位置類似性選擇LP案件，以減小計(jì)算時(shí)間。而且，面部分辨率增強(qiáng)模塊可以利用許多可用面部圖像的部分來獲得更高分辨率面部圖像(例 如通過超級(jí)分辨率技術(shù))或者3D重構(gòu)面部圖像。
[0179]除了用于識(shí)別面部數(shù)據(jù)以防盜之外，或者作為對(duì)其的替換，系統(tǒng)具有這樣的能力:當(dāng)其與零售盜竊有關(guān)，記錄和存儲(chǔ)損失預(yù)防子事件數(shù)據(jù)作為復(fù)合事件，并且當(dāng)零售盜竊實(shí)施中時(shí)創(chuàng)建實(shí)時(shí)提示。例如，如果特定零售盜竊團(tuán)伙對(duì)于每個(gè)零售盜竊事件具有標(biāo)準(zhǔn)的作案手法，諸如以下的序列:1)人物A將店員注意力轉(zhuǎn)移到商店后方；2)人物B通過跌倒到地板而假裝出現(xiàn)醫(yī)療應(yīng)急；和3)人物C搶奪香煙并且跑出商店，與這些子事件相關(guān)的數(shù)據(jù)(包括多媒體和元數(shù)據(jù))被系統(tǒng)存儲(chǔ)并且識(shí)別為與特定零售盜竊團(tuán)伙相對(duì)應(yīng)。隨后，當(dāng)序列I和2開始并且被店內(nèi)傳感器42、44、46、48、50識(shí)別時(shí)，系統(tǒng)警告管理人員可能有零售盜竊在實(shí)施，由此給經(jīng)理時(shí)間去干預(yù)。
[0180]上述的損失預(yù)防系統(tǒng)的一個(gè)方面可以使用面部特征來驗(yàn)證退貨以便最小化退貨欺詐。而且，在CRM系統(tǒng)掌控的忠誠度計(jì)劃的例子中，可以存在許多與顧客賬戶相關(guān)聯(lián)的面部特征。
[0181]一旦顧客進(jìn)行購買，POS附近的相機(jī)就捕捉顧客面部圖像，隨后執(zhí)行面部檢測(cè)和特征提取。此后，交易與提取的面部特征一起存儲(chǔ)。當(dāng)顧客訪問商店來退回貨品時(shí)，POS附近的相機(jī)捕捉退貨的顧客的面部圖像，由此，除了驗(yàn)證POS交易貨品之外，將退貨的顧客的面部特征與存儲(chǔ)的購買貨品的顧客的面部特征進(jìn)行驗(yàn)證。至少部分地基于退貨顧客的面部特征是否與購貨顧客的面部特征相匹配來評(píng)估退貨交易是否為欺詐。
[0182]通過對(duì)于退貨鑒定和許可的使用中心化的或?qū)Φ鹊募軜?gòu)，系統(tǒng)可用于多個(gè)應(yīng)用，諸如貨品從商店A購買但被退回到商店B的情形。
[0183]POS面部檢測(cè)和特征提取的后面可以是針對(duì)從顧客信用卡或其他顧客關(guān)聯(lián)賬戶獲取的信任的驗(yàn)證(其可以包含生物計(jì)量數(shù)據(jù)或用于生物計(jì)量數(shù)據(jù)鑒定的服務(wù)地址)。
[0184]而且，在POS在終端兩側(cè)都具有面部檢測(cè)相機(jī)的情況下，退貨多媒體記錄可以包括顧客和收銀員的面部。
[0185]退貨多媒體記錄可以包括來自其視覺和音頻/語音數(shù)據(jù)的顧客和收銀員的情緒分類，以便提供合適的顧客服務(wù)等級(jí)。
[0186]系統(tǒng)可以檢查退貨顧客在來退貨柜臺(tái)之前是否在商店內(nèi)(通常，退貨或顧客服務(wù)柜臺(tái)在入口處，并且期望行為是退貨顧客直接來到退貨柜臺(tái))。盡管如此，當(dāng)收集并分析數(shù)據(jù)來看該假設(shè)正確與否時(shí)，該假設(shè)可以得到驗(yàn)證。退貨顧客在商店周圍行走可能表明顧客在那時(shí)取走貨品但試圖欺詐退貨。
[0187]可替換地，可 以由顧客來使用POS面部檢測(cè)和特征提取，代替收集，例如在退貨顧客找不到收據(jù)的情況下，系統(tǒng)可以檢索將他/她的面部與在先購貨相關(guān)聯(lián)的顧客信息，由此提高顧客的購物體驗(yàn)。
[0188]棑隊(duì)管理
[0189]參看圖15，本公開的一個(gè)方面還提供了一種商店管理系統(tǒng)，其通過將面部檢測(cè)和匹配用于排隊(duì)管理以改善站點(diǎn)/商店運(yùn)營。圖15示出了該系統(tǒng)、店經(jīng)理顯示器96和隊(duì)列Q1-Q5的示意性視圖，其中顧客被表示為圓圈。系統(tǒng)使用上述的系統(tǒng)來檢測(cè)面部、提取面部特征向量并且將面部數(shù)據(jù)發(fā)送給顧客表格模塊92和隊(duì)列統(tǒng)計(jì)模塊94。系統(tǒng)能夠收集并且發(fā)送POS交互數(shù)據(jù)和面部數(shù)據(jù)到隊(duì)列統(tǒng)計(jì)模塊94。顧客表格模塊92判斷接收到的面部是否已在顧客表格中。隊(duì)列統(tǒng)計(jì)模塊94以POS事件/數(shù)據(jù)和面部數(shù)據(jù)(其可以是元數(shù)據(jù)一部分)來注解視頻幀，從顧客表格模塊中獲得顧客到達(dá)時(shí)間以排隊(duì)，從知識(shí)庫98獲得收銀員表現(xiàn)數(shù)據(jù)(WID、WID_ServiceTime),將對(duì)每一完成POS交易的收銀員表現(xiàn)插入到數(shù)據(jù)倉庫中，評(píng)估每一隊(duì)列的平均顧客等候時(shí)間，并且將實(shí)時(shí)隊(duì)列狀態(tài)信息發(fā)送到店經(jīng)理顯示器96。
[0190]店經(jīng)理顯示器96顯示實(shí)時(shí)隊(duì)列表現(xiàn)統(tǒng)計(jì)并且視覺提示以基于實(shí)時(shí)隊(duì)列狀態(tài)和收銀員期望工作表現(xiàn)數(shù)據(jù)(WID、WID_ServiceTime)來表示隊(duì)列Q1-Q5上增加的負(fù)荷。店經(jīng)理顯示器96還可以將每一隊(duì)列狀態(tài)通過視覺和/或音頻呈現(xiàn)而傳送給經(jīng)理。
[0191]上述的系統(tǒng)能夠選擇質(zhì)量良好的面部特征以減少要傳輸?shù)臄?shù)據(jù)量，同時(shí)增加匹配準(zhǔn)確度。而且，顧客表格模塊92選擇一組良好面部代表以減少所需的存儲(chǔ)并增加匹配準(zhǔn)確度。進(jìn)一步，注解的視頻幀數(shù)據(jù)可以保存在自動(dòng)化多媒體事件服務(wù)器72中，由自動(dòng)化多媒體事件服務(wù)器通過其內(nèi)容相似性而鏈接，由店經(jīng)理顯示器96從自動(dòng)化多媒體事件服務(wù)器中訪問以瀏覽鏈接的視頻鏡頭，從而提取顧客在進(jìn)入隊(duì)列之前的位置。通過此信息，店經(jīng)理可以決定是否將顧客移動(dòng)到另一隊(duì)列、開啟新隊(duì)列、或關(guān)閉隊(duì)列。
[0192]個(gè)件化市場(chǎng)
[0193]圖16示出了一種用于通過由面部集合匹配對(duì)象軌跡的個(gè)性化廣告和市場(chǎng)效果的系統(tǒng)。該系統(tǒng)使用上述的多相機(jī)面部檢測(cè)和匹配系統(tǒng)來個(gè)性化廣告(諸如在店內(nèi)市場(chǎng)視頻中)，以通過追隨活動(dòng)后主體行為而追蹤這樣的個(gè)性化廣告的效果。
[0194]在步驟S161，顧客進(jìn)入站點(diǎn)或商店，由此,在步驟S162，使用上述的多相機(jī)面部檢測(cè)和匹配系統(tǒng)來檢測(cè)她的身份。注意，系統(tǒng)不需要這個(gè)人的實(shí)際身份(姓名等)來工作，只是在整個(gè)商店內(nèi)識(shí)別并追蹤獨(dú)特個(gè)體?？商鎿Q地或者額外地，顧客可以使用諸如智能電話76的無線設(shè)備(經(jīng)由地理地位或者其他無線系統(tǒng))或商店信息站來“簽到”，由此，獲得這個(gè)人的實(shí)際身份。一旦檢測(cè)到顧客的身份(實(shí)際的或者不是)，就提取身份特征，諸如年齡、性另IJ、人口統(tǒng)計(jì)、頭發(fā)顏色、體型等等。在步驟S163，廣告內(nèi)容個(gè)性化代理202使用提取的身份特征來確定定制/個(gè)性化廣告內(nèi)容。一旦廣告內(nèi)容確定，在步驟S164，一個(gè)或多個(gè)廣告Al、A3、A5就經(jīng)由店內(nèi)顯示器204或者顧客的無線設(shè)備被發(fā)送給顧客，以便由顧客觀看。這些顯示的廣告被存儲(chǔ)在數(shù)據(jù)庫中以便之后檢索。優(yōu)選地，步驟S161-S163在步驟S164之前發(fā)生。還注意到，確定的定制廣告可以從一系列預(yù)先制作的廣告206中檢索出來，或者可以恰好及時(shí)地準(zhǔn)備唯一的廣告(還可包括例如用戶的姓名和/或面部)以創(chuàng)建獨(dú)特的購物體驗(yàn)。而且，顯示的(一個(gè)或多個(gè))廣告可以將顧客指引到商店的某一區(qū)域。
[0195]在觀看定制廣告之后，在步驟S165，使用視頻相機(jī)44或其他傳感器(例如用于追蹤用戶無線設(shè)備信號(hào)的傳感器)在整個(gè)商店內(nèi)追蹤顧客，其中顧客所訪問的商店區(qū)域被檢測(cè)并存儲(chǔ)，包括與顧客在每一區(qū)域逗留多長時(shí)間、顧客是否尋求幫助等相關(guān)的數(shù)據(jù)。在顧客離開商店后，在步驟S166，確定顧客是否進(jìn)行了任何購買，如果是的話，購買的這些貨品是否是廣告中傳送給顧客的。此信息隨后存儲(chǔ)用于將來參考和分析。例如，基于顧客所訪問的商店區(qū)域，當(dāng)顧客下次訪問商店時(shí)，不同組的廣告會(huì)被顯示給顧客。
[0196]通過該信息，利用商店顧客業(yè)務(wù)的整合分析來通過考量例如顧客在觀看過廣告后去了哪里、觀看過廣告內(nèi)容的顧客數(shù)量、在觀看廣告后有多少顧客去了廣告中目標(biāo)位置、在觀看廣告后去廣告中的目標(biāo)位置的顧客的人口統(tǒng)計(jì)、顧客在目標(biāo)位置所花費(fèi)的平均時(shí)間、有多少顧客看到給出的廣告而購買了目標(biāo)貨品，而對(duì)廣告內(nèi)容效果分級(jí)。這樣，可以確定呈現(xiàn)給顧客的廣告的效果，包括廣告對(duì)于每個(gè)顧客人口統(tǒng)計(jì)的效果。還要注意，本系統(tǒng)可在多個(gè)商店使用，包括帶有聯(lián)網(wǎng)/云服務(wù)的事件管理。
[0197]作為用于個(gè)性化廣告和市場(chǎng)效果的系統(tǒng)的示例，如果商店中識(shí)別的購物者被顯示了對(duì)于鞋和嬰兒衣服的廣告，但僅訪問并在鞋的部門進(jìn)行購買，則系統(tǒng)可以記錄鞋廣告為成功而嬰兒衣服廣告為失 敗，由此，商店管理人員可以為顧客人口統(tǒng)計(jì)或完全決定不同類型的市場(chǎng)活動(dòng)。如果該顧客訪問嬰兒衣服部門并且在商店花了大量時(shí)間但沒有進(jìn)行購買，則可能商品的類型和/或放置需要由商店管理人員進(jìn)行評(píng)估。而且，在該情形下，在顧客離開商店后，基于顧客訪問過的商店區(qū)域或者其沒有訪問的期望目標(biāo)區(qū)域，可以向顧客呈現(xiàn)額外的廣告，或某些類型的鼓勵(lì)(諸如折扣券、打折代碼等)。
[0198]多媒體事件日志
[0199]參看圖17 (其是圖2-3的變型)，本公開的一個(gè)方面還提供了一種自動(dòng)化多媒體事件日志服務(wù)器(EJS) 230，其可以同任何上述特征一起使用，其自動(dòng)化了經(jīng)由包括但不限于P0S44、視頻44、統(tǒng)一通信(UC) 46、站點(diǎn)訪問控制48和便捷/經(jīng)濟(jì)控制50、CRM210、聲音記錄器212、生物計(jì)量傳感器214、位置傳感器216等的事件傳感器源的特定應(yīng)用記錄的多媒體注解的創(chuàng)建。EJS230提供ADS的相似的功能(例如事件序列挖掘)，但是，EJS還提供多媒體事件日志，可顯示作為商務(wù)智能(BI)表盤232 (圖18中示出)以顯示由子事件構(gòu)成的復(fù)合事件，以允許用戶易于識(shí)別站點(diǎn)異常并且采取合適的行動(dòng)，如下進(jìn)一步所述。EJS230能夠定義特定事件應(yīng)用，并且可以由用戶定制。而且，EJS230能夠定義從事件和子事件收集注解數(shù)據(jù)的方式，并且進(jìn)一步能夠以統(tǒng)一的視圖有效率地檢索相關(guān)的多媒體數(shù)據(jù)的事故。EJS230基于上述事件序列挖掘以從收集到的事件數(shù)據(jù)中確定常見事件并且生成序列模型用于檢測(cè)已知序列和異常。例如，從來自不同多媒體源的子事件匯編而成的復(fù)合事件可以如下產(chǎn)生:
[0200]a.打開的收銀機(jī)/POS終端而無收銀員出現(xiàn)，可能基于長時(shí)間打開的收銀機(jī)/POS終端和沒有收銀員參與收銀機(jī)/POS終端的組合子事件(組合POS時(shí)間、監(jiān)視事件、提取的有關(guān)“多長時(shí)間”的知識(shí)等)
[0201]b.損失預(yù)防/虛假退貨檢測(cè)(上述)，包括當(dāng)損失事件發(fā)生時(shí)安全警衛(wèi)無響應(yīng)等。
[0202]如圖17 所示，在步驟 S170，EJS230 從傳感器 44、42、46、210、212、48、214、216 接收包括元數(shù)據(jù)和捕捉的事件以及媒體數(shù)據(jù)的數(shù)據(jù)。這樣的元數(shù)據(jù)可以包括視頻事件元數(shù)據(jù)、交易事件元數(shù)據(jù)和事件元數(shù)據(jù)。在步驟S172，如上所述地執(zhí)行此元數(shù)據(jù)的事件序列挖掘。此后，在步驟S174，復(fù)合應(yīng)用事件管理系統(tǒng)從識(shí)別的異常子事件中創(chuàng)建復(fù)合事件。在步驟S176，自動(dòng)化統(tǒng)一事件日志報(bào)告管理器創(chuàng)建報(bào)告、提示和/或用于在BI表盤232上觀看的顯示。在步驟S178，包括復(fù)合事件和子事件的統(tǒng)一數(shù)據(jù)視圖被創(chuàng)建用于在計(jì)算機(jī)100上在⑶I的形式顯示(通過觀看器)，并且還可以將統(tǒng)一通信以其他提示的形式轉(zhuǎn)發(fā)給計(jì)算機(jī)100。
[0203]通過聯(lián)網(wǎng)服務(wù)240的集成，系統(tǒng)可以進(jìn)一步支持多個(gè)商店事件管理，包括數(shù)據(jù)挖掘、過濾、用于 智能尋找有關(guān)具有異常分?jǐn)?shù)參考的異常相關(guān)事件的商務(wù)智能(多個(gè)站點(diǎn)中)的集成。用于易于觀看和搜索的復(fù)合事件的有組織視圖，以及通過多媒體記錄器組合統(tǒng)一通信能力的自動(dòng)化UC通知，以及過濾和集成來自多個(gè)站點(diǎn)的系統(tǒng)部件(傳感器44、42、46、210、212、48、214、216)的異常事件檢測(cè)。
[0204]圖18示出了根據(jù)本公開一個(gè)方面的示例事件日志BI表盤232，其可顯示在例如計(jì)算機(jī)顯示器150上。BI表盤232具有六個(gè)區(qū)域，其中顯示與站點(diǎn)和事件有關(guān)的信息，以便于用戶理解(盡管本領(lǐng)域技術(shù)人員應(yīng)該理解，表盤可以顯示比六個(gè)區(qū)域更多或更少的區(qū)域)。區(qū)域Dl示出有關(guān)站點(diǎn)和事件的一般信息，包括日期、顧客計(jì)數(shù)、交易數(shù)、事件數(shù)(按重要性排列)等。區(qū)域D2示出被監(jiān)視的站點(diǎn)的空間或空中視圖。區(qū)域D2可以根據(jù)用戶是否想要同時(shí)觀看兩個(gè)或聯(lián)網(wǎng)的站點(diǎn)而放大或縮小。
[0205]區(qū)域D3示出交互異常強(qiáng)度模式觀看器，其中使用鏈接線L來鏈接子事件，以示出復(fù)合事件E5、E14、E23。D3示出對(duì)于不同傳感器輸入44、42、46、210、48、214、216的子事件。盡管在區(qū)域D3中示出了五個(gè)類型的傳感器輸入(相機(jī)運(yùn)動(dòng)、P0S、AC/RFID、面部檢測(cè)、位置/熱地圖)，本領(lǐng)域技術(shù)人員應(yīng)該裂解，可以顯示比五個(gè)傳感器類型更多或更少的類型。每個(gè)傳感器以時(shí)間順序示出區(qū)域D3上的子事件，在區(qū)域D3的左側(cè)從最早向區(qū)域D3的右側(cè)到最近。這樣，用戶可以回退和快進(jìn)復(fù)合事件和子事件，很像數(shù)字視頻記錄器，例如通過使用定點(diǎn)設(shè)備170來顯示所想要的事件或子事件。還注意到，復(fù)合事件E5、E14、E23可在區(qū)域Dl中顯示,示出關(guān)于站點(diǎn)的(一個(gè)或多個(gè))復(fù)合事件的位置。
[0206]區(qū)域D3示出下面的傳感器事件:相機(jī)事件C1、C2、C3、C4、C5、C6、C7、C8 ;P0S事件PU P2、P3、P4 ；AC/RFID事件Al ;面部識(shí)別事件Fl、F2、F3、F4 ;以及位置/熱地圖L1、L2。每個(gè)傳感器可以由不同圖標(biāo)或顏色來表示以易于使用(這里，相機(jī)事件由橢圓示出，POS事件由矩形示出，AC/RFID事件由加號(hào)示出，面部識(shí)別事件由笑臉示出，位置/熱地圖事件由地球儀示出)。類似地，鏈接子事件的鏈接線L可以是以顏色編碼的，或者可對(duì)于每一復(fù)合事件而唯一識(shí)別。
[0207]區(qū)域D4示出站點(diǎn)的相機(jī)視圖，其可以是視頻或者靜態(tài)圖像。相機(jī)視圖可以是站點(diǎn)的現(xiàn)場(chǎng)饋送或者與復(fù)合事件或子事件相關(guān)聯(lián)的記錄的圖像。而且，相機(jī)視圖可以用與圖像有關(guān)的數(shù)據(jù)進(jìn)行注解，諸如子事件、商品類型、收銀員ID等。區(qū)域D5示出最近的復(fù)合事件E5、E14、E23的列表以便用戶的快速參考。區(qū)域D6示出最近的子事件的列表，包括相關(guān)的子事件。
[0208]還注意到，用戶可以點(diǎn)擊、鼠標(biāo)指向、或激勵(lì)表盤的一個(gè)區(qū)域中所示的子事件或復(fù)合事件，以在表盤的其他區(qū)域中獲得有關(guān)該事件或子事件的進(jìn)一步的信息。例如，通過激勵(lì)復(fù)合事件E14，用戶可以在區(qū)域D4獲得復(fù)合事件的圖像(和其他多媒體信息，包括但不限于聲音、地理位置、POS數(shù)據(jù)、站點(diǎn)訪問數(shù)據(jù)、顧客信息等)和/或在區(qū)域D6獲得相關(guān)的事件細(xì)節(jié)。
[0209]圖19以復(fù)合事件日志或記錄的形式示出了復(fù)合事件E14的示意性視圖，復(fù)合事件日志或記錄存儲(chǔ)在事件和交易多媒體日志服務(wù)器72中。復(fù)合事件E14包括子事件C5、C6、P2、Al和L2，以及關(guān)鍵子事件C7、P3，其通常比“非關(guān)鍵”子事件具有更高的異常分?jǐn)?shù)。作為復(fù)合事件的一部分，基于向回追蹤其與關(guān)鍵子事件的相關(guān)性(即非關(guān)鍵子事件的重要性可能還沒有確定，直到檢測(cè)到后來的關(guān)鍵子事件)，系統(tǒng)可以包括非關(guān)鍵子事件C5、C6、P2、Al 和 L2。
[0210]通過上述的系統(tǒng)，BI表盤232能夠以統(tǒng)一視圖顯示與關(guān)鍵子事件和非關(guān)鍵子事件相關(guān)聯(lián)的視頻和相關(guān)信息，作為表盤或者報(bào)告給計(jì)算機(jī)100和移動(dòng)設(shè)備76。系統(tǒng)能夠自動(dòng)生成日志，以便經(jīng)理基于發(fā)生或在商務(wù)智能環(huán)境中觀看感興趣的活動(dòng)，由此通過不需要他或她觀看過長的記錄而節(jié)省經(jīng)理/用戶的時(shí)間。
[0211]圖20圖示說 明了根據(jù)本公開的一個(gè)方面的事件日志服務(wù)器數(shù)據(jù)模型，圖21圖示說明了根據(jù)本公開的一個(gè)方面的事件日志接口數(shù)據(jù)圖解，其可以通過下面的樣本XML代碼來表示:
[0212]
【權(quán)利要求】
1.一種經(jīng)由應(yīng)用向用戶通知站點(diǎn)異常的方法，所述應(yīng)用被配置為訪問事件服務(wù)器，所述事件服務(wù)器具有: 第一傳感器異常檢測(cè)器，被連接到第一傳感器，用于檢測(cè)由所述第一傳感器感測(cè)到的第一子事件的第一異常行為，所述第一異常行為對(duì)應(yīng)于第一異常行為值； 第二傳感器異常檢測(cè)器，被連接到第二傳感器，用于檢測(cè)由與所述第一傳感器的類型不同的所述第二傳感器感測(cè)到的第二子事件的第二異常行為，所述第二異常行為對(duì)應(yīng)于第二異常行為值； 相關(guān)器，用于將所述第一和第二異常行為值進(jìn)行相關(guān)并且將相關(guān)的值記錄作為復(fù)合事件，所述復(fù)合事件對(duì)應(yīng)于至少一個(gè)所述第一子事件和至少一個(gè)所述第二子事件； 數(shù)據(jù)存儲(chǔ)，被配置為存儲(chǔ)與所述第一傳感器和所述第二傳感器相關(guān)聯(lián)的數(shù)據(jù)以及與所述復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)； 所述方法包括: 從遠(yuǎn)離所述事件服務(wù)器的設(shè)備接收對(duì)所述應(yīng)用的請(qǐng)求； 將所述應(yīng)用發(fā)射到所述設(shè)備；以及 訪問所述事件服務(wù)器，所述應(yīng)用具有觀看器，所述觀看器被配置為在所述設(shè)備上示出與多個(gè)復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)，所述觀看器進(jìn)一步被配置為以時(shí)間順序顯示所述多個(gè)復(fù)合事件。
2.根據(jù)權(quán)利要求1所述的方法，其中，所述觀看器被進(jìn)一步配置為在每個(gè)復(fù)合事件內(nèi)顯示與所述第二傳感器相關(guān)聯(lián)的第二子事件數(shù)據(jù)和第一子事件數(shù)據(jù)。
3.根據(jù)權(quán)利要求2所述的方法，其中，所述第一子事件數(shù)據(jù)被使用第一圖標(biāo)類型來標(biāo)識(shí)，并且其中，所述第二子事件數(shù)據(jù)被使用與第一圖標(biāo)類型不同的第二圖標(biāo)類型來標(biāo)識(shí)。
4.根據(jù)權(quán)利要求1所述的方法，其中，所述觀看器進(jìn)一步包括列表，所述列表包括第一和第二子事件。
5.根據(jù)權(quán)利要求1所述的方法，其中，每個(gè)復(fù)合事件由所述觀看器以不同顏色編碼。
6.根據(jù)權(quán)利要求1所述的方法，其中，所述觀看器進(jìn)一步包括所述站點(diǎn)的地圖，所述地圖被配置為示出與所述站點(diǎn)相關(guān)的每個(gè)復(fù)合事件的位置。
7.根據(jù)權(quán)利要求1所述的方法，其中，所述應(yīng)用被配置為訪問多個(gè)聯(lián)網(wǎng)的事件服務(wù)器。
8.根據(jù)權(quán)利要求1所述的方法，進(jìn)一步包括: 選擇顯示的復(fù)合事件；以及 顯示與所選擇的顯示的復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)，所述數(shù)據(jù)包括所記錄的由所述第一傳感器感測(cè)到的第一子事件和所記錄的由所述第二傳感器感測(cè)到的第二子事件中的至少一個(gè)。
9.根據(jù)權(quán)利要求8所述的方法，其中，所述數(shù)據(jù)進(jìn)一步包括所記錄的由所述第一傳感器感測(cè)到的第一子事件和所記錄的由所述第二傳感器感測(cè)到的第二子事件中的至少一個(gè)的元數(shù)據(jù)。
10.根據(jù)權(quán)利要求1所述的方法，其中，與所述第一傳感器相關(guān)聯(lián)的數(shù)據(jù)和與所述第二傳感器相關(guān)聯(lián)的數(shù)據(jù)包括元數(shù)據(jù)，所述元數(shù)據(jù)包括日期、時(shí)間、位置、質(zhì)量和關(guān)鍵字中的至少一個(gè)。
11.根據(jù)權(quán)利要求1所述的方法，其中:所述第一傳感器是相機(jī)、銷售點(diǎn)終端、統(tǒng)一通信設(shè)備、顧客關(guān)系管理器、聲音記錄器、訪問控制點(diǎn)、運(yùn)動(dòng)檢測(cè)器、生物計(jì)量傳感器、速度檢測(cè)器、溫度傳感器、氣體傳感器和位置傳感器中的一個(gè)；并且 所述第二傳感器是相機(jī)、銷售點(diǎn)終端、統(tǒng)一通信設(shè)備、顧客關(guān)系管理器、聲音記錄器、訪問控制點(diǎn)、運(yùn)動(dòng)檢測(cè)器、生物計(jì)量傳感器、速度檢測(cè)器、溫度傳感器、氣體傳感器和位置傳感器中的另一個(gè)。
12.根據(jù)權(quán)利要求1所述的方法，其中，所述觀看器被進(jìn)一步配置為向回追蹤并且以時(shí)間順序顯示所述多個(gè)復(fù)合事件。
13.根據(jù)權(quán)利要求1所述的方法，其中: 所述第一子事件和所述第二子事件中的至少一個(gè)包括關(guān)鍵和非關(guān)鍵子事件；以及 基于關(guān)鍵子事件到非關(guān)鍵子事件的向回追蹤，所述非關(guān)鍵子事件被相關(guān)作為復(fù)合事件。
14.一種用于向用戶通知站點(diǎn)異常的系統(tǒng)，所述系統(tǒng)包括: 事件服務(wù)器，包括: 第一傳感器異常檢測(cè)器，被連接到第一傳感器，用于檢測(cè)由所述第一傳感器感測(cè)到的第一子事件的第一異常行為，所述第一異常行為對(duì)應(yīng)于第一異常行為值； 第二傳感器異常檢測(cè)器， 被連接到第二傳感器，用于檢測(cè)由與所述第一傳感器的類型不同的所述第二傳感器感測(cè)到的第二子事件的第二異常行為，所述第二異常行為對(duì)應(yīng)于第二異常行為值； 相關(guān)器，用于將所述第一和第二異常行為值進(jìn)行相關(guān)并且將相關(guān)的值記錄作為復(fù)合事件，所述復(fù)合事件對(duì)應(yīng)于至少一個(gè)所述第一子事件和至少一個(gè)所述第二子事件；以及 數(shù)據(jù)存儲(chǔ)，被配置為存儲(chǔ)與所述第一傳感器和所述第二傳感器相關(guān)聯(lián)的數(shù)據(jù)以及與所述復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)；以及 接口，被配置為示出與多個(gè)所述復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)，所述接口包括觀看器，所述觀看器被配置為以時(shí)間順序顯示所述多個(gè)復(fù)合事件。
15.用于向用戶通知站點(diǎn)異常的可由計(jì)算機(jī)讀取的至少一個(gè)非瞬態(tài)計(jì)算機(jī)可讀介質(zhì)，所述至少一個(gè)非瞬態(tài)計(jì)算機(jī)可讀介質(zhì)包括: 第一傳感器異常檢測(cè)代碼段，當(dāng)被執(zhí)行時(shí)，檢測(cè)由第一傳感器感測(cè)到的第一子事件的第一異常行為，所述第一異常行為對(duì)應(yīng)于第一異常行為值； 第二傳感器異常檢測(cè)代碼段，當(dāng)被執(zhí)行時(shí)，檢測(cè)由與所述第一傳感器的類型不同的第二傳感器感測(cè)到的第二子事件的第二異常行為，所述第二異常行為對(duì)應(yīng)于第二異常行為值； 相關(guān)代碼段，當(dāng)被執(zhí)行時(shí)，將所述第一異常行為值和所述第二異常行為值進(jìn)行相關(guān)并且將相關(guān)的值記錄作為復(fù)合事件，所述復(fù)合事件對(duì)應(yīng)于至少一個(gè)所述第一子事件和至少一個(gè)所述第二子事件；以及 數(shù)據(jù)存儲(chǔ)代碼段，當(dāng)被執(zhí)行時(shí)，存儲(chǔ)與所述第一傳感器和所述第二傳感器相關(guān)聯(lián)的數(shù)據(jù)以及與所述復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)； 顯示代碼段，當(dāng)被執(zhí)行時(shí)，顯示與多個(gè)復(fù)合事件相關(guān)聯(lián)的數(shù)據(jù)；以及 觀看代碼段，當(dāng)被執(zhí)行時(shí)，以時(shí)間順序顯示所述多個(gè)復(fù)合事件。
16.—種在站點(diǎn)管理多個(gè)隊(duì)列的方法,所述方法包括: 使用視頻成像器，基于與獨(dú)特面部的面部值相對(duì)應(yīng)的面部數(shù)據(jù)，檢測(cè)所述多個(gè)隊(duì)列中每個(gè)隊(duì)列中多個(gè)顧客中每個(gè)的面部； 將所述面部數(shù)據(jù)發(fā)射到顧客表格處理器和隊(duì)列統(tǒng)計(jì)處理器； 使用所述面部值和所述顧客表格處理器，確定每個(gè)顧客已經(jīng)處在所述多個(gè)隊(duì)列中的各個(gè)隊(duì)列中多長時(shí)間； 基于每個(gè)顧客已經(jīng)處在各個(gè)隊(duì)列中多長時(shí)間，確定所述多個(gè)隊(duì)列中的每個(gè)隊(duì)列的平均等候時(shí)間。
17.根據(jù)權(quán)利要求16所述的在站點(diǎn)管理多個(gè)隊(duì)列的方法，其中，所述的確定每個(gè)隊(duì)列的平均等候時(shí)間包括使用收銀員表現(xiàn)數(shù)據(jù)。
18.—種個(gè)性化市場(chǎng)的方法，包括: 使用位于整個(gè)站點(diǎn)中的多個(gè)視頻成像器中的至少一個(gè)視頻成像器，基于與獨(dú)特面部的面部值相對(duì)應(yīng)的面部數(shù)據(jù)，在所述站點(diǎn)中基于顧客面部檢測(cè)獨(dú)特顧客； 基于所檢測(cè)到的獨(dú)特 顧客的特性，創(chuàng)建與要被顯示給所述顧客的廣告貨品有關(guān)的圖像； 使用由所述多個(gè)視頻成像器所確定的所述顧客的軌跡，在整個(gè)站點(diǎn)中追蹤所檢測(cè)到的獨(dú)特顧客； 使用與所追蹤的所檢測(cè)到的獨(dú)特顧客相對(duì)應(yīng)的數(shù)據(jù)，確定由所述獨(dú)特顧客所訪問的所述站點(diǎn)的區(qū)域；以及 將由所述獨(dú)特顧客所訪問的所述站點(diǎn)的區(qū)域與所述廣告貨品進(jìn)行相關(guān)。
19.根據(jù)權(quán)利要求18所述的個(gè)性化市場(chǎng)的方法，進(jìn)一步包括:基于將由所述獨(dú)特顧客所訪問的所述站點(diǎn)的區(qū)域與所述廣告貨品進(jìn)行相關(guān)，更改所創(chuàng)建的圖像。
20.根據(jù)權(quán)利要求18所述的個(gè)性化市場(chǎng)的方法，進(jìn)一步包括:基于將由所述獨(dú)特顧客所訪問的所述站點(diǎn)的區(qū)域與所述廣告貨品進(jìn)行相關(guān)，向所述獨(dú)特顧客提供鼓勵(lì)。
【文檔編號(hào)】H04N7/18GK104025573SQ201180072689
【公開日】2014年9月3日 申請(qǐng)日期:2011年8月8日 優(yōu)先權(quán)日:2011年7月29日
【發(fā)明者】李國柱, 劉禮斌, 哈?！さ倌職J·厄茲代米爾, 余鵑 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社