專利名稱：用于集成視頻分析和數(shù)據(jù)分析/挖掘的系統(tǒng)和方法
技術(shù)領(lǐng)域：
本發(fā)明主要涉及用于分析視頻的系統(tǒng)和方法，并且更特別地涉及 用于集成視頻分析和數(shù)據(jù)分析/數(shù)據(jù)挖掘來充分利用視頻分析和數(shù)據(jù) 分析兩者的效力的系統(tǒng)和方法。
背景技術(shù)：
在零售商店里阻止入店行竊和盜竊中使用視頻監(jiān)控和分析已變 得平常。然而，在零售和其他環(huán)境中，經(jīng)常存在太多收集自安全和企 業(yè)經(jīng)營的數(shù)據(jù)和視頻，而使人不能有效地且高效地管理。隨著更緊張 的預(yù)算和限制職員總數(shù)的壓力，負(fù)擔(dān)甚至更大了。商店需要過濾和挖 掘數(shù)據(jù)的工具以便他們能夠確定異常、模式和/或反常行為。此外，存 在更復(fù)雜的勾結(jié)威脅，其范圍從店員為了他們自己的或消費(fèi)者的利益 而對(duì)交易"顯示慷慨，，(繞開掃描儀)，到經(jīng)多發(fā)性和多個(gè)地點(diǎn)一起工 作的有組織的犯罪集團(tuán)。
一些人已經(jīng)從企業(yè)經(jīng)營的立場出發(fā)、采用基于分析可來自商店系 統(tǒng)(例如銷售點(diǎn))的數(shù)據(jù)的解決方案來嘗試解決和管理這些問題，以 鑒別顯示所關(guān)注區(qū)域的反常行為的模式。對(duì)這些解決方案的改進(jìn)包括， 使這些模式從視頻監(jiān)控系統(tǒng)觸發(fā)視頻片段，所述視頻片段提供狀況的 視覺驗(yàn)證。其他改進(jìn)已從安全的立場出發(fā)探討了該問題，使用計(jì)算機(jī) 算法以分析來自視頻監(jiān)控系統(tǒng)的視頻，以便某些水平的反常行為能夠 在獨(dú)立于其他觸發(fā)器的情況下被視覺地檢測，到并且用于實(shí)現(xiàn)企業(yè)經(jīng) 營中的策略。
這種單獨(dú)的商業(yè)數(shù)據(jù)的方法由于若干原因失敗了。因?yàn)樯痰晗到y(tǒng) 可能被繞開，因此，描述狀況特征的數(shù)據(jù)可能不可用。此外，數(shù)據(jù)系 統(tǒng)往往是事后挖掘，這限制了它處理實(shí)時(shí)的/時(shí)間敏感的警報(bào)和通知的能力?？紤]到上述數(shù)據(jù)系統(tǒng)的限制和視頻片段重放對(duì)數(shù)據(jù)觸發(fā)器的依 賴，該改進(jìn)也是失敗的。對(duì)視頻孤立的分析是有問題的，因?yàn)樗赡?易于產(chǎn)生假警報(bào)或存在不足以使其可靠的準(zhǔn)確水平。此外，這些安排 往往需要事件配置/規(guī)則定義以檢測反常情況，而這些模式可能不能提 前獲知。
因此，需要用于集成視頻分析和數(shù)據(jù)分析/數(shù)據(jù)挖掘的系統(tǒng)和方 法，所述系統(tǒng)和方法充分利用視頻分析和數(shù)據(jù)分析兩者的效力以彌補(bǔ) 前述解決方案的局限性。還需要的是這樣一種集成軟件，其能夠?yàn)樵O(shè) 施入口點(diǎn)/出口點(diǎn)、銷售點(diǎn)和服務(wù)點(diǎn)、以及整個(gè)內(nèi)部和外部提供商務(wù)智
能和操作智能(operational intelligence )。

發(fā)明內(nèi)容
本發(fā)明有利地提供了集成視頻分析技術(shù)與數(shù)據(jù)分析技術(shù)的方法 和系統(tǒng)，以更準(zhǔn)確地鑒別需要管理人員注意的潛在的可疑行為和事件。 一般而言，本發(fā)明4吏用在銷售點(diǎn)記錄器(point of sale register )收集 的數(shù)據(jù)提供用于監(jiān)測諸如零售商店或倉庫的設(shè)施的方法和系統(tǒng)，以更 準(zhǔn)確地識(shí)別通過視頻監(jiān)測系統(tǒng)同時(shí)檢測到的目標(biāo)和事件。
本發(fā)明的 一個(gè)方面包括用于檢測在被監(jiān)測設(shè)施中的潛在的可疑 行為的方法。收集發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的視頻內(nèi)容和涉及在交 易點(diǎn)終端(point of transaction terminal)處理的交易的交易數(shù)據(jù)。將 視頻內(nèi)容與交易數(shù)據(jù)相關(guān)聯(lián)以產(chǎn)生關(guān)聯(lián)的數(shù)據(jù)。將一套用戶定義的規(guī) 則應(yīng)用于關(guān)聯(lián)的數(shù)據(jù)。響應(yīng)于鑒別到所述關(guān)聯(lián)的數(shù)據(jù)與所述一套用戶 定義的規(guī)則的至少 一個(gè)規(guī)則之間的匹配，所述交易被確定為潛在地可 疑的。
本發(fā)明的另一方面包括自動(dòng)鑒別發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的 方法。收集發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的視頻內(nèi)容。通過將一套碎見頻 分析規(guī)則應(yīng)用于收集的視頻信息、使用目標(biāo)識(shí)別技術(shù)分析視頻內(nèi)容。 還收集了涉及通過在銷售設(shè)施中的至少一個(gè)交易點(diǎn)終端處理的一個(gè)或 多個(gè)交易的交易數(shù)據(jù)。響應(yīng)于確定所述視頻內(nèi)容與所述一套視頻分析
7規(guī)則中的至少一個(gè)視頻分析規(guī)則相一致，所述視頻內(nèi)容與所述交易數(shù) 據(jù)相關(guān)聯(lián)以提供關(guān)聯(lián)的交易數(shù)據(jù)。
依照本發(fā)明的另 一方面，用于分析發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的 系統(tǒng)包括視頻分析系統(tǒng)、數(shù)據(jù)分析系統(tǒng)、和集成服務(wù)器。集成服務(wù)器
與視頻分析系統(tǒng)和數(shù)據(jù)分析系統(tǒng)是通訊連接的。^^皮監(jiān)測^:施包括至少 一個(gè)銷售點(diǎn)記錄器。視頻分析系統(tǒng)收集發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的 視頻內(nèi)容。數(shù)據(jù)分析系統(tǒng)收集涉及由至少一個(gè)交易點(diǎn)終端處理的一個(gè) 或多個(gè)交易的交易數(shù)據(jù)。集成服務(wù)器使視頻內(nèi)容和交易數(shù)據(jù)相關(guān)聯(lián)以 產(chǎn)生關(guān)聯(lián)的數(shù)據(jù)。集成服務(wù)器還將一套用戶定義的規(guī)則應(yīng)用于關(guān)聯(lián)的 數(shù)據(jù)并鑒別在關(guān)聯(lián)的數(shù)據(jù)與所述一套用戶定義的規(guī)則的至少一個(gè)規(guī)則 之間的匹配。


對(duì)本發(fā)明及其伴隨的優(yōu)勢和特性的更全面的認(rèn)識(shí)通過在與附圖 結(jié)合考慮時(shí)參考以下的詳細(xì)描述將更容易理解，其中
圖1是依照本發(fā)明的原理構(gòu)建的示例性的視頻和數(shù)據(jù)分析系統(tǒng)的
框圖2是依照本發(fā)明的原理構(gòu)建的示例性的視頻和數(shù)據(jù)監(jiān)測點(diǎn)的框
圖3是根據(jù)本發(fā)明的原理進(jìn)行的示例性的退貨交易(return transaction )過程的流程圖4是根據(jù)本發(fā)明的原理進(jìn)行的示例性的現(xiàn)金無效交易過程的流
程圖5是根據(jù)本發(fā)明的原理進(jìn)行的示例性的消費(fèi)者計(jì)數(shù)過程的流程
圖6是根據(jù)本發(fā)明的原理進(jìn)行的自動(dòng)將交易異常連接到編索引的 視頻的示例性過程的流程圖7是根據(jù)本發(fā)明的原理進(jìn)行的示例性的隊(duì)列持續(xù)時(shí)間(line duration)測量過程的流程圖；圖8是根據(jù)本發(fā)明的原理進(jìn)行的、示例性的、由視頻分析檢測到 現(xiàn)金抽屜打開(cash drawer opening )而沒有檢測到交易的過程的流 程圖9是根據(jù)本發(fā)明的原理進(jìn)行的、設(shè)立銷售點(diǎn)("POS")規(guī)則并 產(chǎn)生異常的示例性過程的流程圖10是根據(jù)本發(fā)明的原理進(jìn)行的、設(shè)立用戶可定義的視頻規(guī)則 并產(chǎn)生警報(bào)的示例性過程的流程圖11是根據(jù)本發(fā)明的原理進(jìn)行的、設(shè)立用戶可定義的商店數(shù)據(jù) 規(guī)則和視頻規(guī)則的結(jié)合的示例性過程的流程圖；和
圖12是根據(jù)本發(fā)明的原理進(jìn)行的、示例性報(bào)告過程的流程圖。
具體實(shí)施例方式
在詳細(xì)描述依照本發(fā)明的示例性實(shí)施方案之前，應(yīng)當(dāng)注意，實(shí)施 方案主要屬于設(shè)備組件與處理步驟的組合，所述設(shè)備組件和處理步驟 涉及實(shí)施用于分析^見頻的系統(tǒng)和方法，以通過集成視頻分析與數(shù)據(jù)分 析/數(shù)據(jù)挖掘技術(shù)來確定警報(bào)條件的存在。因此，通過在適當(dāng)時(shí)以附圖 中的常規(guī)符號(hào)描述所述的系統(tǒng)和方法組成，僅顯示與理解本發(fā)明的實(shí) 施方案有關(guān)的那些特定的細(xì)節(jié)，以便不以對(duì)于受益于本說明書的本領(lǐng) 域普通技術(shù)人員容易明白的細(xì)節(jié)而使本公開不清楚。
如本文使用的有關(guān)的術(shù)語，例如"第一"和"第二"、"頂部"和"底 部"、及其類似物，可以僅僅用于區(qū)分一個(gè)實(shí)體或元素與另一實(shí)體或元 素，而不必需要或暗示這樣的實(shí)體與元素之間的任何物理關(guān)系或邏輯 關(guān)系或順序。
本發(fā)明的一個(gè)實(shí)施方案使用視頻分析與數(shù)據(jù)分析/數(shù)據(jù)挖掘技術(shù) 有利地提供了用于分析視頻的方法和系統(tǒng)。在一個(gè)實(shí)施方案中，本發(fā) 明可包括由用戶接口 (例如，客戶機(jī)/瀏覽器)、管理和分析組件以及
報(bào)告能力(reporting capability)組成的軟件。還可包括在邊緣的具 有嵌入式分析法的視頻系統(tǒng)、在數(shù)字錄像機(jī)("DVR，，)或其他存儲(chǔ)設(shè) 備上的視頻存儲(chǔ)器、和零售交易數(shù)據(jù)設(shè)備。在另一實(shí)施方案中，用戶接口允許用戶定義配置和規(guī)則、預(yù)定義
的事件(pre-event)，并允許在事后進(jìn)行對(duì)數(shù)據(jù)和視頻的挖掘。#見頻 和數(shù)據(jù)系統(tǒng)可以一起聯(lián)網(wǎng)并經(jīng)過數(shù)據(jù)庫傳輸(database transmission ) 和查詢以及應(yīng)用程序接口來通訊。視頻和數(shù)據(jù)分析節(jié)點(diǎn)可具有這樣的 能力以嵌入式、分布式的方式進(jìn)行它們的分析并將處理的元數(shù)據(jù)傳 送至系統(tǒng)數(shù)據(jù)庫。
本發(fā)明的極其通用的實(shí)施方案能夠?qū)崿F(xiàn)添加新的預(yù)打包的和消 費(fèi)者定義的規(guī)則，并能夠測量被稱為關(guān)鍵性能指標(biāo)("KPI")的運(yùn)算 度量(operational metric )。通過了解消費(fèi)者的問題和機(jī)會(huì)，該系統(tǒng) 可用于定義是用于產(chǎn)生使能規(guī)則(enabling rule)和KPI的基礎(chǔ)的用 例。
本系統(tǒng)可以是可編程的以實(shí)時(shí)觸發(fā)警報(bào)，以及在事后挖掘數(shù)據(jù)和 行為的模式，并結(jié)合兩者的信息源以便增強(qiáng)解決更復(fù)雜和更廣泛的用 例的能力。本系統(tǒng)還可以是可編程的，來以下面廣泛的組合結(jié)合視頻 分析和數(shù)據(jù)分析的觸發(fā)器數(shù)據(jù)分析觸發(fā)器-視頻驗(yàn)證、視頻分析觸發(fā) 器-數(shù)據(jù)驗(yàn)證、數(shù)據(jù)分析觸發(fā)器-視頻分析驗(yàn)證、視頻分析觸發(fā)器-數(shù)據(jù) 分析驗(yàn)證。
現(xiàn)參考附圖，其中同樣的參考編號(hào)是指同樣的元件，在圖1中顯 示用于集成視頻分析和數(shù)據(jù)分析/數(shù)據(jù)挖掘的示例性的商業(yè)智能系統(tǒng) 10，所述商業(yè)智能系統(tǒng)充分利用依照本發(fā)明的原理構(gòu)建的視頻分析和 數(shù)據(jù)分析兩者的效力。可構(gòu)建商業(yè)智能系統(tǒng)10以支持企業(yè)范圍的視頻 解決方案和零售業(yè)務(wù)中的更寬泛的用途。
商業(yè)智能系統(tǒng)10結(jié)合了視頻分析子系統(tǒng)12與數(shù)據(jù)分析子系統(tǒng)14 以分析并檢測可疑活動(dòng)和商店/倉庫管理事件。視頻分析子系統(tǒng)12可 包括一個(gè)或多個(gè)攝像機(jī)16 (顯示了一個(gè))、錄像機(jī)18、視頻引擎20、 視頻控制器22、和視頻系統(tǒng)接口 24。攝像機(jī)16捕捉局部視野中的活 動(dòng)的圖像并將圖像傳送至錄像機(jī)18和/或視頻引擎20。錄像機(jī)18可以 給捕捉到的圖像標(biāo)上時(shí)間戳并將其儲(chǔ)存，用于以后調(diào)出。視頻引擎20 對(duì)捕捉到的圖像進(jìn)行目標(biāo)識(shí)別/檢測功能，以確定由攝像機(jī)16捕捉的
10圖像是否符合根據(jù)預(yù)設(shè)規(guī)則確定的條件。注意，視頻引擎20的功能可 以是嵌入攝像機(jī)16或其他邊緣設(shè)備中的，以在允許將視頻儲(chǔ)存于錄像 機(jī)18中以外，還允許對(duì)現(xiàn)場視頻的處理。此外，標(biāo)時(shí)間戳的操作還^" 以通過攝像機(jī)16或某些其他的中間設(shè)備來進(jìn)行。視頻控制器22控制 視頻系統(tǒng)的基本配置，例如哪個(gè)攝像機(jī)16是活躍的；每個(gè)攝像機(jī)16 的掃視、俯仰、轉(zhuǎn)變角度和聚焦設(shè)置；被請(qǐng)求的視頻片段的回放，等。 視頻系統(tǒng)接口 24允許用戶設(shè)置用于視頻分析服務(wù)器20的規(guī)則和條件， 以及選擇用于回放的特定視頻片段。
視頻分析子系統(tǒng)12的每個(gè)組件可在局部水平(local level)上直 接連接至視頻分析子系統(tǒng)12中的其他組件?？蛇x擇地和/或另外地， 視頻分析子系統(tǒng)12的每個(gè)組件可經(jīng)局域網(wǎng)("LAN")(未顯示)或 廣域網(wǎng)("WAN") 28連接至在視頻分析子系統(tǒng)12、數(shù)據(jù)分析子系統(tǒng) 14、網(wǎng)絡(luò)客戶機(jī)26和/或其他位置中的其他組件。此外，視頻分析子 系統(tǒng)12的組件可以共處一地或嵌入系統(tǒng)10的其他組件中。例如，#見 頻系統(tǒng)接口 24可以作為網(wǎng)絡(luò)瀏覽器或現(xiàn)有數(shù)據(jù)分析和/或視頻軟件應(yīng) 用的插件程序在網(wǎng)絡(luò)客戶機(jī)26上實(shí)現(xiàn)。
數(shù)據(jù)分析子系統(tǒng)14包括交易點(diǎn)終端30，其用于收集涉及在被監(jiān) 測設(shè)施中的交易的信息。交易點(diǎn)終端30可以是銷售點(diǎn)("POS")記錄 器，其用于收集涉及在結(jié)賬時(shí)進(jìn)行的銷售交易的信息。交易點(diǎn)終端30 可包括與數(shù)據(jù)引擎32傳輸數(shù)據(jù)的通訊接口 。數(shù)據(jù)引擎32接收來自一 個(gè)或多個(gè)POS記錄器30的、涉及完成的、開始的或無效的交易的數(shù) 據(jù)。數(shù)據(jù)分析服務(wù)器32分析交易數(shù)據(jù)，以確定任何交易或一組交易是 否符合根據(jù)預(yù)設(shè)的規(guī)則以及事件后挖掘所確定的條件。數(shù)據(jù)分析系統(tǒng) 接口 24允許用戶設(shè)置用于數(shù)據(jù)引擎32的規(guī)則和條件，以及產(chǎn)生和觀 察報(bào)告。
集成服務(wù)器36結(jié)合視頻引擎20與數(shù)據(jù)引擎32的元件，以使發(fā) 生在交易點(diǎn)終端30的交易事件與由視頻引擎20檢測到的目標(biāo)識(shí)別相 關(guān)聯(lián)。集成服務(wù)器36可包括視頻引擎20和/或數(shù)據(jù)引擎32。此外，數(shù) 據(jù)分析系統(tǒng)接口 24和視頻系統(tǒng)接口 24可結(jié)合為位于網(wǎng)絡(luò)客戶機(jī)26的單一用戶接口 (即，操縱盤)。使用該操縱盤，用戶可將來自視頻
分析系統(tǒng)12的一個(gè)或多個(gè)規(guī)則與來自數(shù)據(jù)分析系統(tǒng)14的一個(gè)或多個(gè)規(guī)則結(jié)合，以創(chuàng)建用于集成服務(wù)器36的一套規(guī)則，以便精確確定非常特定的事件何時(shí)發(fā)生。此外，系統(tǒng)10可包括用于每個(gè)用戶類型的操縱盤，以允許僅進(jìn)入對(duì)他們的操作需求重要的視圖和報(bào)告。
集成服務(wù)器36可以是單機(jī)的或能夠位于任何應(yīng)用服務(wù)器上。用于實(shí)時(shí)事件的集成服務(wù)器36還能夠位于公司總部級(jí)別(centralcorporate level)，處在與數(shù)據(jù)引擎32相同的硬件服務(wù)器上或在專用的應(yīng)用服務(wù)器上。商業(yè)智能系統(tǒng)10應(yīng)當(dāng)能夠?qū)λ薪M件間進(jìn)行時(shí)間同步。
商業(yè)智能系統(tǒng)10可在經(jīng)廣域網(wǎng)28連接的本地的商店/區(qū)域、在公司總部辦公室、或其組合而實(shí)現(xiàn)。廣域網(wǎng)16可包括互聯(lián)網(wǎng)、內(nèi)聯(lián)網(wǎng)、或其他通訊網(wǎng)絡(luò)。雖然在圖1中通訊網(wǎng)絡(luò)描繪為WAN,但本發(fā)明的原理還可應(yīng)用于其他形式的通訊網(wǎng)絡(luò)，例如個(gè)人區(qū)域網(wǎng)("PAN")、局域網(wǎng)("LAN")、校園網(wǎng)("CAN")、城域網(wǎng)("MAN")，等。
雖然系統(tǒng)10整體上可能是很復(fù)雜的，但日常使用對(duì)于用戶是相當(dāng)友好和直觀的。系統(tǒng)10有利地提供了易于使用的視頻系統(tǒng)接口 24、數(shù)據(jù)分析系統(tǒng)接口 34、和報(bào)表生成軟件包(importing package)以分析數(shù)據(jù)和查看支持警報(bào)和模式的現(xiàn)場的和存儲(chǔ)的視頻。
現(xiàn)參考圖2，顯示了示例性的局部商業(yè)設(shè)施38的布局，該布局詳細(xì)說明了依照本發(fā)明的原理的可能的視頻監(jiān)測位置和數(shù)據(jù)收集場所。雖然圖2顯示零售設(shè)施，本發(fā)明并不限于此。預(yù)期任何被監(jiān)測的設(shè)施均能夠由本發(fā)明實(shí)現(xiàn)和支持，例如倉庫或商品或財(cái)產(chǎn)進(jìn)入或離開的場所。系統(tǒng)10是可編程的，并且能夠?qū)φ麄€(gè)被監(jiān)測設(shè)施的內(nèi)部和外部的操作設(shè)施入口/出口點(diǎn)40、諸如結(jié)賬隊(duì)列(check-out line) 42或消費(fèi)者服務(wù)口44的銷售(即，交易)點(diǎn)、服務(wù)點(diǎn)46、和挑選點(diǎn)48提供商務(wù)和操作智能。
在圖3中，提供了示例性的操作流程圖，其描述了在確定不存在實(shí)際的消費(fèi)者的情況下發(fā)生了退貨交易中所進(jìn)行的步驟。在一個(gè)實(shí)施方案中，該過程允許店長或防損("LP")專業(yè)人員實(shí)時(shí)監(jiān)控何時(shí)退貨發(fā)生但沒有消費(fèi)者出現(xiàn)在POS根臺(tái)前。至少一個(gè)攝像機(jī)16應(yīng)當(dāng)監(jiān)測給定的POS記錄器30周圍的區(qū)域。當(dāng)退貨交易在POS記錄器30被處理時(shí)(步驟S100)，數(shù)據(jù)引擎32接收關(guān)于退貨交易的POS數(shù)據(jù)(步驟S102)。該數(shù)據(jù)可包括，例如，POS記錄器的標(biāo)識(shí)符、交易類型、交易時(shí)間、進(jìn)行交易的雇員的名字或其他標(biāo)識(shí)符、交易量，等。數(shù)據(jù)引擎32從視頻引擎20請(qǐng)求視覺驗(yàn)證(步驟S104 )。
視頻引擎20嘗試對(duì)出現(xiàn)在POS記錄器前的消費(fèi)者計(jì)數(shù)(步驟S106)。如果視頻引擎20不能對(duì)消費(fèi)者計(jì)數(shù)，則交易被標(biāo)記為"消費(fèi)者數(shù)量未知，，(步驟S108 )。例如某些環(huán)境條件可使視頻引擎20不能夠確定準(zhǔn)確的消費(fèi)者數(shù)量，例如突然的照明變化、非常暗的照明、差的視頻質(zhì)量、圖像中強(qiáng)烈的眩光、攝像機(jī)移動(dòng)。標(biāo)記為"消費(fèi)者數(shù)量未知，，的所有交易可能構(gòu)成可疑活動(dòng)，并且該交易的細(xì)節(jié)可包括在用于稍后進(jìn)一步檢查的報(bào)告中。
如果視頻引擎20返回不等于零的消費(fèi)者數(shù)量(步驟SllO)，表示至少一個(gè)消費(fèi)者出現(xiàn)在結(jié)賬拒臺(tái)，則交易被視為正常的(步驟S112 )并且不釆取進(jìn)一步行動(dòng)。然而，如果視頻引擎20返回等于零的消費(fèi)者數(shù)量(步驟S110)，表示沒有消費(fèi)者出現(xiàn)在結(jié)賬拒臺(tái)，則產(chǎn)生"退貨欺詐，，的警報(bào)(步驟S114)并且該退貨交易被標(biāo)記。警報(bào)可顯示在操縱盤上、保存在數(shù)據(jù)庫中、發(fā)送至錄像機(jī)18、和/或發(fā)送至視頻分析系統(tǒng)12的事件處理器。如果用戶希望重放相應(yīng)的視頻，他/她只從操縱盤選擇警報(bào)指示器則視頻然后回放并標(biāo)記為"已查看"。所有標(biāo)記的交易可用于事件后挖掘。
現(xiàn)參考圖4，提供了示例性的操作流程圖，其描述了在確定不存
在實(shí)際的消費(fèi)者的情況下現(xiàn)金交易被無效中所進(jìn)行的步驟。如以上所述的情況中，至少一個(gè)攝像機(jī)16應(yīng)當(dāng)監(jiān)測給定的POS記錄器30周圍的區(qū)域。當(dāng)在該P(yáng)OS記錄器30處的現(xiàn)金交易被無效時(shí)(步驟S120)，數(shù)據(jù)引擎32接收關(guān)于該現(xiàn)金交易的POS數(shù)據(jù)(步驟S122)。數(shù)據(jù)引擎32從視頻引擎20請(qǐng)求視覺驗(yàn)證(步驟S124)。視頻引擎20嘗試
13對(duì)出現(xiàn)在POS記錄器前的消費(fèi)者計(jì)數(shù)(步驟S126)。如果視頻引擎 20不能對(duì)消費(fèi)者計(jì)數(shù)，則該現(xiàn)金無效交易被標(biāo)記為"消費(fèi)者數(shù)量未知，， (步驟S128)。標(biāo)記為"消費(fèi)者數(shù)量未知，，的所有交易可能構(gòu)成可疑活 動(dòng)并且該交易的細(xì)節(jié)可包括在用于稍后進(jìn)一步檢查的報(bào)告中。
如果視頻引擎20返回不等于零的消費(fèi)者數(shù)量(步驟S130)，表 示至少一個(gè)消費(fèi)者出現(xiàn)在結(jié)賬拒臺(tái)，則交易被視為正常的(步驟S132) 并且不釆取進(jìn)一步行動(dòng)。然而，如果視頻引擎20返回等于零的消費(fèi)者 數(shù)量(步驟S130)，表示沒有消費(fèi)者出現(xiàn)在結(jié)賬柜臺(tái)，則產(chǎn)生"現(xiàn)金 過賬(cash post)無效欺詐"的警報(bào)(步驟S134)并且該現(xiàn)金無效交 易被標(biāo)記。與在退貨欺詐的情況下一樣，警報(bào)可顯示在操縱盤上、保 存在數(shù)據(jù)庫中、發(fā)送至錄像機(jī)18、和/或發(fā)送至視頻分析系統(tǒng)12的事 件處理器。如果用戶希望重放相應(yīng)的視頻，他/她只從操縱盤選擇警報(bào) 指示器則視頻然后回放并標(biāo)記為"已查看"。所有標(biāo)記的交易可用于事 件后挖掘。
現(xiàn)參考圖5，提供了示例性的操作流程圖，其描述了在對(duì)經(jīng)過一 段時(shí)間進(jìn)入和離開商店的人計(jì)數(shù)和檢測大流量進(jìn)入(high traffic in) 時(shí)期或高的凈占有率(high net occupancy )時(shí)期中所進(jìn)行的步驟。在 一個(gè)實(shí)施方案中，該信息與來自銷售和員工管理系統(tǒng)的數(shù)據(jù)結(jié)合，以 確定進(jìn)行商店員工和銷售轉(zhuǎn)化計(jì)算的波峰和波谷。至少一個(gè)攝像機(jī)16 應(yīng)當(dāng)監(jiān)測商店中的每個(gè)入口和/或出口位置。
使用操縱盤，用戶請(qǐng)求開始人員計(jì)數(shù)特性并指定計(jì)數(shù)的時(shí)間段。 集成服務(wù)器36接收人員計(jì)數(shù)的請(qǐng)求(步驟S140 )并通知視頻引擎20 對(duì)在預(yù)定的時(shí)間段期間被拍攝到進(jìn)入和/或離開商店的人員計(jì)數(shù)(步驟 S142 )。數(shù)據(jù)引擎20確定在預(yù)定時(shí)間段期間發(fā)生的交易數(shù)和交易總量 (步驟S144)。產(chǎn)生一份結(jié)果報(bào)告(步驟S146)并且該報(bào)告的直觀 表示顯示在操縱盤中。
現(xiàn)參考圖6，提供了示例性的操作流程圖，其描述了在回放關(guān)于 交易異常(即，已被標(biāo)記為可能包含可疑活動(dòng)的事件)的已錄制的視 頻中所進(jìn)行的步驟。集成服務(wù)器36接收關(guān)于交易異常的視頻的請(qǐng)求(步驟S148)。集成服務(wù)器36從錄像系統(tǒng)18檢索相應(yīng)的視頻(步驟 S150 )并在網(wǎng)絡(luò)客戶機(jī)接口 26使用例如操縱盤播放請(qǐng)求的視頻(步驟 S152)。
圖7提供示例性的操作流程圖，其描述在測定結(jié)賬隊(duì)列持續(xù)時(shí)間 中所進(jìn)行的步驟。在一個(gè)實(shí)施方案中，本發(fā)明允許店長或其他公司管 理人員鑒別這樣的情況，其中結(jié)賬等候隊(duì)列長于預(yù)先確定的界限或等 候時(shí)間長于預(yù)先確定的界限，并且檢索出相應(yīng)的POS數(shù)據(jù)。該特性允 許用戶調(diào)查導(dǎo)致延遲的隱含的因素，例如某人在進(jìn)行大采購、結(jié)賬記 錄器開放量不夠，等。
使用目標(biāo)識(shí)別算法，視頻引擎20確定結(jié)賬隊(duì)列或用在結(jié)賬隊(duì)列 中的持續(xù)時(shí)間長于預(yù)定的界限(步驟S154)。警報(bào)可被發(fā)送至網(wǎng)絡(luò)客 戶機(jī)接口 26和錄像機(jī)18 (步驟S156)。該警報(bào)可顯示于，例如，網(wǎng) 絡(luò)客戶機(jī)接口 26的事件處理器或視頻控制器22中的警報(bào)列表上。集 成服務(wù)器36接收請(qǐng)求發(fā)生在警報(bào)時(shí)的交易數(shù)據(jù)的警報(bào)信息請(qǐng)求(步驟 S158)。警報(bào)信息請(qǐng)求可通過，例如，用戶點(diǎn)擊顯示在網(wǎng)絡(luò)客戶機(jī)接 口 26上的警報(bào)而被發(fā)起。數(shù)據(jù)引擎32輸出在警報(bào)期間發(fā)生的交易的 列表(步驟S160)。該列表可顯示于網(wǎng)絡(luò)客戶機(jī)接口 26或可被打印 為物理拷貝。
現(xiàn)參考圖8，提供了示例性的操作流程圖，其描述了確定現(xiàn)金記 錄器抽屜是否可能已被不適當(dāng)?shù)卮蜷_而進(jìn)行的步驟。視頻引擎20檢測 現(xiàn)金抽屜打開(步驟S162)。集成服務(wù)器36發(fā)送查詢至數(shù)據(jù)引擎32 和/或交易點(diǎn)終端30以驗(yàn)證是否發(fā)生任何交易(步驟S164 )。如果交 易確實(shí)發(fā)生(步驟S166)，無需警報(bào)(步驟S168)并且該過程結(jié)束。 然而，如果沒有交易發(fā)生(步驟S168)，則產(chǎn)生警報(bào)(步驟S170)， 該警報(bào)可能顯示在操縱盤上、保存在數(shù)據(jù)庫中、和/或發(fā)送至錄像機(jī)18 和網(wǎng)絡(luò)客戶機(jī)接口 26。集成服務(wù)器36接收請(qǐng)求在警報(bào)時(shí)錄制的視頻 的警報(bào)信息請(qǐng)求(步驟S172)。警報(bào)信息請(qǐng)求可通過，例如，用戶點(diǎn) 擊顯示在網(wǎng)絡(luò)客戶機(jī)接口 26上的警報(bào)而被發(fā)起。然后相應(yīng)的視頻被重 放(步驟S174)，例如，使用操縱盤，并且相應(yīng)的視頻被標(biāo)記為"已查看"(步驟S176)。
圖9提供示例性的操作流程圖，其描述設(shè)立POS規(guī)則和產(chǎn)生異 常報(bào)告而進(jìn)行的步驟。在一個(gè)實(shí)施方案中，零售店店長或其他公司f 理人員能夠使用操縱盤定義POS數(shù)據(jù)規(guī)則和關(guān)鍵性能指標(biāo)("KPI") (步驟S178)。例如，這些規(guī)則可以是如同編輯在商店或公司中發(fā)生 的全部退貨的列表一樣簡單，或者如同編輯在只是用于特定記錄器和/ 或特定雇員和/或特定產(chǎn)品和/或特定時(shí)間的退貨的列表一樣簡單。這 提供了對(duì)由該系統(tǒng)捕捉到的任何數(shù)據(jù)類型進(jìn)行復(fù)雜的數(shù)據(jù)挖掘的能 力。數(shù)據(jù)引擎32針對(duì)所述規(guī)則/KPI查詢交易點(diǎn)終端30的數(shù)據(jù)庫(步 驟S180)并產(chǎn)生KPI報(bào)告(步驟S182)，所述KPI報(bào)告列出對(duì)于所 述規(guī)則/KPI的任何異常。
圖10提供示例性的操作流程圖，其描述設(shè)立用戶可定義的視頻 規(guī)則并產(chǎn)生標(biāo)識(shí)違反行為的警報(bào)而進(jìn)行的步驟。在與涉及如圖9所詳 述的定義POS數(shù)據(jù)規(guī)則的上述方式類似的方式中，本發(fā)明的實(shí)施方案 還提供了用于設(shè)立視頻分析規(guī)則的手段。零售店店長、防損專業(yè)人員、 或其他公司管理員人能夠使用操縱盤定義視頻分析規(guī)則(步驟S184 )。 視頻分析規(guī)則可包括用于當(dāng)任何特定視覺模式、行為、或內(nèi)容被檢測 到時(shí)告警的規(guī)則。視頻分析規(guī)則被發(fā)送至視頻引擎20和任何嵌入式邊 緣設(shè)備(步驟S186 )。每當(dāng)視頻引擎20確定至少一個(gè)視頻分析規(guī)則 被違反時(shí)就產(chǎn)生視頻分析警報(bào)(步驟S188 )。
圖ll提供示例性的操作流程圖，其描述POS數(shù)據(jù)規(guī)則與視頻; 析規(guī)則相結(jié)合以準(zhǔn)確定義特定警報(bào)事件而進(jìn)行的步驟。以這種方式， 數(shù)據(jù)智能和視頻智能被集成以確定何時(shí)發(fā)生如根據(jù)用戶的需要而定義 的特定事件。使用諸如操縱盤的用戶接口定義POS數(shù)據(jù)規(guī)則(步驟 S190)。視頻分析規(guī)則也可以使用操縱盤來定義(步驟S192)。選擇 可適用的POS規(guī)則和視頻規(guī)則(步驟S194)并使用邏輯運(yùn)算(例如， 與、或、非、如果假、真，等)將其結(jié)合，以產(chǎn)生用戶定義的條件(步 驟S196)。然后運(yùn)行該用戶定義的條件以產(chǎn)生實(shí)時(shí)事件或進(jìn)行事后搜 索(步驟198)?，F(xiàn)參考圖12，提供了示例性的操作流程圖，其描述了產(chǎn)生針對(duì)所 有規(guī)則/KPI、警報(bào)和事件的報(bào)告而進(jìn)行的步驟。選擇期望的規(guī)則、KPI、 事件、和/或條件(步驟S200 )并規(guī)定持續(xù)時(shí)間和報(bào)告格式(步驟202 )。 集成服務(wù)器36選擇與所選的規(guī)則、KPI、事件和或發(fā)生在規(guī)定持續(xù)時(shí) 間內(nèi)的條件對(duì)應(yīng)的POS數(shù)據(jù)和視頻記錄以產(chǎn)生規(guī)定格式的報(bào)告(步驟 S204 )。該報(bào)告可用于進(jìn)一步調(diào)查和鑒別可疑活動(dòng)和/或提高整個(gè)商店 的管理能力。
從安全的立場出發(fā)，軟件解決方案可支持自動(dòng)驗(yàn)證的連接，例如 集成的Windows驗(yàn)證("IWA")，也稱為NT驗(yàn)證。安全特性可限制 局部應(yīng)用特定的用戶ID。應(yīng)當(dāng)使用密碼來訪問系統(tǒng)10。雖然可使用 基于LAN ID的許可，但還可以使用另外的安全特性?？墒褂迷谝粋€(gè) 或多個(gè)活動(dòng)目錄組中的成員。采用活動(dòng)目錄支持，用戶在啟動(dòng)應(yīng)用程 序時(shí)無需提供任何另外的驗(yàn)證。安全應(yīng)當(dāng)基于當(dāng)前登錄的工作站用戶 的身份，同時(shí)在后臺(tái)自動(dòng)進(jìn)行權(quán)限驗(yàn)證。應(yīng)用程序自身可具有強(qiáng)大的 數(shù)據(jù)庫安全標(biāo)準(zhǔn)，其中，多層次安全作為整體應(yīng)用于數(shù)據(jù)庫系統(tǒng)、以 及應(yīng)用于數(shù)據(jù)庫中的單獨(dú)的表格。
軟件將自動(dòng)運(yùn)行日志和遠(yuǎn)程的程序故障(bug) /缺陷/問題報(bào)告提 供給中央服務(wù)器。通過軟件自動(dòng)收集程序故障。終端用戶能夠經(jīng)網(wǎng)站 或通過應(yīng)用程序自身提交他們自己的程序故障。所有的數(shù)據(jù)庫和記錄 均能夠被備份和歸檔。本發(fā)明的系統(tǒng)中的任何應(yīng)用程序的安裝過程可 以是服務(wù)器和工作站上的靜默的、自動(dòng)的安裝。軟件部署可依照標(biāo)準(zhǔn) 的腳本工具(例如SMS )并且無需用戶的交互。還可以使用遠(yuǎn)程配置。 更新也可以遠(yuǎn)程進(jìn)行。配置過程對(duì)用戶是友好的，包括但不限于，自 動(dòng)檢測在LAN中的錄像設(shè)備、和對(duì)所有設(shè)備和組件的任何配置提供 圖形用戶接口。集成服務(wù)器36可與常用的企業(yè)服務(wù)器環(huán)境兼容，包括 但不限于，企業(yè)網(wǎng)絡(luò)服務(wù)器、企業(yè)應(yīng)用服務(wù)器、和企業(yè)數(shù)據(jù)庫服務(wù)器。
可體現(xiàn)在本發(fā)明的系統(tǒng)的其他特性包括用于以下的商店網(wǎng)關(guān) (store gateway ):收集視頻分析警報(bào)和計(jì)數(shù)數(shù)據(jù)、將數(shù)據(jù)傳輸至公 司用于在數(shù)據(jù)庫中傳送至數(shù)據(jù)庫和利用文件傳送協(xié)議("FTP")的服務(wù)器方法、在商店層面上呈現(xiàn)視頻分析警報(bào)和確認(rèn)、經(jīng)規(guī)則管理工具 或集成的接口配置視頻警報(bào)、和呈現(xiàn)帶有視頻分析和視頻驗(yàn)證的異常
報(bào)告/數(shù)據(jù)挖掘/POS數(shù)據(jù)的趨勢分析。
系統(tǒng)10還可包括人工智能，以區(qū)分警報(bào)與異常報(bào)告通道。說明
視頻分析的不同的實(shí)例包括但不限于，移動(dòng)至未授權(quán)的交付區(qū)域、受 限的備貨區(qū)、隱藏商品、停止或徘徊太長時(shí)間表明潛在的可疑活動(dòng)或
需要幫助、和聚集的人群表明潛在的可疑活動(dòng)。說明帶有POS中心的
數(shù)據(jù)和視頻分析的異常報(bào)告/趨勢分析的不同的實(shí)例包括但不限于，由 于不存在消費(fèi)者而無效的交易、由于不存在管理者而無效的交易、排 隊(duì)、和人員計(jì)數(shù)。
系統(tǒng)10可以是可編程的，以允許在商店級(jí)別的最初的安裝期間 對(duì)公司范圍的視頻分析的定義和配置。系統(tǒng)IO還可以包括商店級(jí)別的
解決方案，該解決方案是可編程的以用于管理尋址、數(shù)據(jù)庫修改、傳 輸、和其他商店級(jí)別的視頻管理功能。數(shù)據(jù)輸入可取自視頻監(jiān)控和視 頻分析，并且與映射信息(例如攝像機(jī)與記錄器/過道之間的映射)集
成0
用于所述系統(tǒng)的數(shù)據(jù)庫的方面可包括使用來自視頻監(jiān)控和視頻 分析的數(shù)據(jù)傳送包、和映射數(shù)據(jù)。某些可能的、預(yù)期的數(shù)據(jù)段包括但
不限于，計(jì)數(shù)、日期/時(shí)間、規(guī)則ID、攝像機(jī)ID、和規(guī)則類型(占有 率，等)。數(shù)據(jù)映射可包括商店ID、組織ID、參考#、參考類型(記 錄器、過道，等)、和活動(dòng)類型(消費(fèi)者占有率、物品掃描，等)。
可使用時(shí)間同步機(jī)制以將POS數(shù)據(jù)與視頻信息鏈接，這可類似 于記錄器如何同步POS數(shù)據(jù)的時(shí)間?？蓸?gòu)建系統(tǒng)10以允許視頻分析 規(guī)則在企業(yè)范圍的級(jí)別上被管理(變更控制)，而不僅在商店或特定 區(qū)域的級(jí)別上被管理(變更控制)?？砂ㄒ?guī)則管理方法，這將會(huì)便 于初始配置和將來的更新。 一種方法是在商店級(jí)別上設(shè)立區(qū)域并在公 司/企業(yè)級(jí)別上應(yīng)用規(guī)則。在傳輸領(lǐng)域，數(shù)據(jù)可位于定位在商店級(jí)別的 文件夾中的平面文件或結(jié)構(gòu)化數(shù)據(jù)庫，并且通過網(wǎng)絡(luò)被收集并傳輸至 具有其他數(shù)據(jù)的另一位置(例如POS)。然后能夠使數(shù)據(jù)可用于數(shù)據(jù)庫傳送?？蛇x擇的方法是使用基于FTP的傳送機(jī)制。
本發(fā)明有利地提供了關(guān)于揭示問題區(qū)域的高度敏感性/可檢測 性。用戶能夠通過紀(jì)律處分、消費(fèi)者服務(wù)的改善、或者甚至培訓(xùn)改善 (training improvement)更快地解決與雇員和消費(fèi)者的問題。通過將 數(shù)據(jù)源和分析源結(jié)合到本發(fā)明的可自動(dòng)化的系統(tǒng)中，輸出將更可靠和 準(zhǔn)確，并最小化或消除假警報(bào)。假警報(bào)會(huì)破壞對(duì)該解決方案的信心并 限制它的成功。
本發(fā)明能夠在硬件、軟件、或硬件與軟件的結(jié)合中實(shí)現(xiàn)。任何類 所述的功能。^/ , 、，、'、、 、
典型的硬件與軟件的結(jié)合可以是專用的或通用的計(jì)算機(jī)系統(tǒng)和 存儲(chǔ)在存儲(chǔ)介質(zhì)上的計(jì)算機(jī)程序，所述計(jì)算機(jī)系統(tǒng)具有 一個(gè)或多個(gè)處 理元件，所述計(jì)算機(jī)程序在被載入并執(zhí)行時(shí)控制計(jì)算機(jī)系統(tǒng)以便使其 運(yùn)行本文所述的方法。本發(fā)明還可以嵌入計(jì)算機(jī)程序產(chǎn)品中，該產(chǎn)品 包括是本文所述的方法能夠?qū)崿F(xiàn)的所有特征，并且在被載入計(jì)算系統(tǒng) 時(shí)能夠執(zhí)行這些方法。存儲(chǔ)介質(zhì)是指任何易失性或非易失性存儲(chǔ)設(shè)備。
本文的上下文中的計(jì)算機(jī)程序或應(yīng)用程序是指任何語言、代碼或 表示法的一套指令的任何表達(dá)，所述一套指令旨在使具有信息處理能 力的系統(tǒng)以直接地或在以下的任一個(gè)或兩者之后完成特定功能a)轉(zhuǎn) 化為另一種語言、代碼或表示法；b)以不同物質(zhì)形態(tài)復(fù)制。
此外，除 非以上相反地提及，應(yīng)當(dāng)注意，所有的附圖均不是按比 例繪制的。明顯地，本發(fā)明能夠體現(xiàn)為其他特定形式而不偏離本發(fā)明 的精神或基本屬性，并因此，應(yīng)當(dāng)參考以下的權(quán)利要求而不是前述的 說明書作為本發(fā)明的范圍的說明。
權(quán)利要求
1.一種用于在被監(jiān)測設(shè)施中監(jiān)測潛在的可疑活動(dòng)的方法，所述方法包括收集發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的視頻內(nèi)容；收集涉及在交易點(diǎn)終端處處理的交易的交易數(shù)據(jù)；將所述視頻內(nèi)容與所述交易數(shù)據(jù)相關(guān)聯(lián)以產(chǎn)生關(guān)聯(lián)的數(shù)據(jù)；和將一套用戶定義的規(guī)則應(yīng)用于所述關(guān)聯(lián)的數(shù)據(jù)；以及響應(yīng)于鑒別到所述關(guān)聯(lián)的數(shù)據(jù)與所述一套用戶定義的規(guī)則中的至少一個(gè)規(guī)則之間的匹配，確定所述交易為潛在地可疑的。
2. 根據(jù)權(quán)利要求1所述的方法，其中所述一套用戶定義的規(guī)則 包括一個(gè)或多個(gè)視頻分析規(guī)則和一個(gè)或多個(gè)數(shù)據(jù)分析規(guī)則的結(jié)合。
3. 根據(jù)權(quán)利要求2所述的方法，其進(jìn)一步包括 給所述視頻內(nèi)容標(biāo)上指示所述活動(dòng)發(fā)生的時(shí)間的第 一時(shí)間戳；和 給所述交易數(shù)據(jù)標(biāo)上指示所述交易被處理的時(shí)間的第二時(shí)間戳， 其中，通過匹配所迷第一時(shí)間戳與所述第二時(shí)間戳而將所述視頻內(nèi)容與所述交易數(shù)據(jù)相關(guān)聯(lián)。
4. 根據(jù)權(quán)利要求3所述的方法，其中 所述數(shù)據(jù)分析規(guī)則包括確定退貨交易已發(fā)生的規(guī)則；以及所述視頻分析規(guī)則包括確定在銷售點(diǎn)記錄器處沒有消費(fèi)者的規(guī)則。
5. 根據(jù)權(quán)利要求3所述的方法，其中 所述數(shù)據(jù)分析規(guī)則包括確定現(xiàn)金交易被無效的規(guī)則；以及所述視頻分析規(guī)則包括確定在銷售點(diǎn)記錄器處沒有消費(fèi)者的規(guī)則。
6. 根據(jù)權(quán)利要求3所述的方法，其中 所述數(shù)據(jù)分析規(guī)則包括確定沒有交易發(fā)生的規(guī)則；以及 所述視頻分析規(guī)則包括確定銷售點(diǎn)記錄器的抽屜是打開的規(guī)則。
7. —種自動(dòng)鑒別發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的方法，所述方法包括收集發(fā)生在所述被監(jiān)測設(shè)施中的活動(dòng)的視頻內(nèi)容；通過將一套視頻分析規(guī)則應(yīng)用于所收集的視頻內(nèi)容、使用目標(biāo)識(shí) 別技術(shù)分析所述視頻內(nèi)容；收集涉及由所述銷售設(shè)施中的至少一個(gè)交易點(diǎn)終端處理的一個(gè) 或多個(gè)交易的交易數(shù)據(jù)；和響應(yīng)于確定所述視頻內(nèi)容與所述一套視頻分析規(guī)則中的至少一 個(gè)視頻分析規(guī)則相一致，將所述視頻內(nèi)容與所述交易數(shù)據(jù)相關(guān)聯(lián)，以 提供關(guān)聯(lián)的交易數(shù)據(jù)。
8. 根據(jù)權(quán)利要求7所述的方法，其進(jìn)一步包括 給所述視頻內(nèi)容標(biāo)上指示所述活動(dòng)發(fā)生的時(shí)間的第 一時(shí)間戳；和 給所述交易數(shù)據(jù)標(biāo)上指示所述交易被處理的時(shí)間的第二時(shí)間戳， 其中，通過匹配所述第 一時(shí)間戳與所述第二時(shí)間戳而將所述視頻內(nèi)容與所述交易數(shù)據(jù)相關(guān)聯(lián)。
9. 根據(jù)權(quán)利要求8所述的方法，其進(jìn)一步包括響應(yīng)于確定所 述視頻內(nèi)容與所述一套視頻分析規(guī)則中的至少一個(gè)視頻分析規(guī)則相一 致，產(chǎn)生警報(bào)。
10. 根據(jù)權(quán)利要求9所述的方法，其進(jìn)一步包括使用所述交易 數(shù)據(jù)來確定為什么所述視頻內(nèi)容與所述一套視頻分析規(guī)則中的至少一 個(gè)一見頻分析規(guī)則相一致。
11. 根據(jù)權(quán)利要求9所述的方法，其中所述至少一個(gè)視頻分析規(guī) 則包括確定站在結(jié)賬隊(duì)列中的消費(fèi)者的數(shù)量超過預(yù)定的界限的規(guī)則。
12. 根據(jù)權(quán)利要求9所述的方法，其中所述至少一個(gè)視頻分析規(guī) 則包括確定消費(fèi)者花在站在結(jié)賬隊(duì)列中的持續(xù)時(shí)間超過預(yù)定的界限的 規(guī)則。
13. 根據(jù)權(quán)利要求8所述的方法，其進(jìn)一步包括響應(yīng)于確定所述視頻內(nèi)容與所述一套視頻分析規(guī)則中的至少一 個(gè)視頻分析規(guī)則相 一致，產(chǎn)生詳細(xì)描述在所述4見頻內(nèi)容與至少 一個(gè)視 頻分析規(guī)則相一致時(shí)發(fā)生的交易的報(bào)告。
14. 根據(jù)權(quán)利要求13所述的方法，其中所述至少一個(gè)視頻分析 規(guī)則包括確定進(jìn)入和離開所述銷售設(shè)施的消費(fèi)者的數(shù)量的規(guī)則。
15. —種用于分析發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的系統(tǒng)，所述#皮， 測設(shè)施包括至少一個(gè)交易點(diǎn)終端，所述系統(tǒng)包括視頻分析系統(tǒng)，所述視頻分析系統(tǒng)可操作來收集發(fā)生在所述^L監(jiān) 測i殳施中的活動(dòng)的^L頻內(nèi)容；數(shù)據(jù)分析系統(tǒng)，所述數(shù)據(jù)分析系統(tǒng)可操作來收集涉及由所述至少 一個(gè)交易點(diǎn)終端處理的一個(gè)或多個(gè)交易的交易數(shù)據(jù)；和集成服務(wù)器，其與所述視頻分析系統(tǒng)和所述數(shù)據(jù)分析系統(tǒng)通訊連 接，所述集成服務(wù)器可操作來將所述視頻內(nèi)容與所述交易數(shù)據(jù)相關(guān)聯(lián)以產(chǎn)生關(guān)聯(lián)的數(shù)據(jù)；將一套用戶定義的規(guī)則應(yīng)用于所述關(guān)聯(lián)的數(shù)據(jù)；和 鑒別在所述關(guān)聯(lián)的數(shù)據(jù)與所述一套用戶定義的規(guī)則中的至 少一個(gè)規(guī)則之間的匹配。
16. 根據(jù)權(quán)利要求15所述的系統(tǒng)，其中所述集成服務(wù)器進(jìn)一步 可操作來確定所述一個(gè)或多個(gè)交易是潛在地可疑的并產(chǎn)生警報(bào)，所述 系統(tǒng)進(jìn)一步包括與所述集成服務(wù)器通訊連接的客戶機(jī)接口 ，所述客戶 機(jī)接口可操作來指示所述警報(bào)。
17. 根據(jù)權(quán)利要求16所述的系統(tǒng)，其中所述客戶機(jī)接口進(jìn)一步 可操作來接收所述一套用戶定義的規(guī)則，所述一套用戶定義的規(guī)則包 括一個(gè)或多個(gè)視頻分析規(guī)則與一個(gè)或多個(gè)數(shù)據(jù)分析規(guī)則的結(jié)合。
18. 根據(jù)權(quán)利要求17所述的系統(tǒng)，其中所述視頻內(nèi)容包括指示 所述活動(dòng)發(fā)生的時(shí)間的第 一時(shí)間戳并且所述交易數(shù)據(jù)包括指示所述交 易被處理的時(shí)間的第二時(shí)間戳，所述集成服務(wù)器進(jìn)一步可操作來通過 匹配所述第 一時(shí)間戳與所述第二時(shí)間戳而將所述視頻內(nèi)容與所述交易 數(shù)據(jù)相關(guān)聯(lián)。
19. 根據(jù)權(quán)利要求18所述的系統(tǒng)，其中 所述數(shù)據(jù)分析規(guī)則包括確定退貨交易已發(fā)生的規(guī)則；以及所述視頻分析規(guī)則包括確定在所述交易點(diǎn)終端處沒有消費(fèi)者的規(guī)則。
20.根據(jù)權(quán)利要求18所述的系統(tǒng)，其中 所述數(shù)據(jù)分析規(guī)則包括確定現(xiàn)金交易已被無效的規(guī)則；以及 所述視頻分析規(guī)則包括確定在所述交易點(diǎn)終端處沒有消費(fèi)者的規(guī)則。
全文摘要
一種方法和系統(tǒng)檢測在被監(jiān)測設(shè)施中潛在的可疑活動(dòng)。被監(jiān)測設(shè)施包括至少一個(gè)交易點(diǎn)終端。收集發(fā)生在被監(jiān)測設(shè)施中的活動(dòng)的視頻內(nèi)容和涉及在交易終端處理的交易的交易數(shù)據(jù)。將所述視頻內(nèi)容與所述交易數(shù)據(jù)相關(guān)聯(lián)以產(chǎn)生關(guān)聯(lián)的數(shù)據(jù)。將一套用戶定義的規(guī)則應(yīng)用于所述關(guān)聯(lián)的數(shù)據(jù)。響應(yīng)于鑒別到所述關(guān)聯(lián)的數(shù)據(jù)與所述一套用戶定義的規(guī)則中的至少一個(gè)規(guī)則之間的匹配，所述交易被確定為潛在地可疑的。
文檔編號(hào)H04N7/18GK101682750SQ200880019438
公開日2010年3月24日 申請(qǐng)日期2008年6月9日 優(yōu)先權(quán)日2007年6月9日
發(fā)明者A·M·赫羅爾德, K·D·羅默, 沈樹海 申請(qǐng)人:傳感電子公司