情緒相關(guān)的查詢處理的制作方法
【技術(shù)領(lǐng)域】
[0001]本公開一般涉及信息處理領(lǐng)域，并且更具體地說，涉及情緒相關(guān)查詢處理。
【背景技術(shù)】
[0002]個人將數(shù)百個數(shù)字照片和音頻存儲在一個或多個個人計算裝置(例如，智能電話或數(shù)碼相機)上是很常見的。對這些媒體文件進行組織和歸檔可能是過分單調(diào)而密集的過程，并且因此這些媒體文件中的信息塊可能對個人來說實際上是不可訪問的。允許個人對照片自動編號(例如，用照片中描繪的人的名字)的服務(wù)通常需要廣泛的人工綜合處理，并且甚至在自動編號之后被限制在對個人來說可容易訪問的信息中。
【附圖說明】
[0003]實施例通過結(jié)合附圖的如下詳細描述將容易理解。為了便于此描述，相似的附圖標記標明相似的結(jié)構(gòu)元件。在附圖的各圖中作為示例而非限制圖示了實施例。
[0004]圖1是按照各種實施例配置用于情緒信息處理的說明性計算系統(tǒng)的框圖。
[0005]圖2是按照各種實施例可由圖1的計算系統(tǒng)實現(xiàn)的說明性情緒信息處理的框圖。
[0006]圖3和圖4描繪了按照各種實施例用于存儲情緒狀態(tài)和其它數(shù)據(jù)以使圖2的情緒信息處理系統(tǒng)能夠響應(yīng)于情緒相關(guān)查詢的說明性存儲結(jié)構(gòu)。
[0007]圖5是按照各種實施例可包含在圖2的情緒信息處理系統(tǒng)中的情緒標識邏輯的實施例的框圖。
[0008]圖6是按照各種實施例用于處理情緒信息的說明性過程的流程圖。
[0009]圖7是按照各種實施例用于標識情緒狀態(tài)的說明性過程的流程圖。
【具體實施方式】
[0010]公開了與情緒信息處理關(guān)聯(lián)的技術(shù)、設(shè)備和系統(tǒng)的實施例。一些實施例可與情緒相關(guān)查詢處理關(guān)聯(lián)。例如，在一些實施例中，計算系統(tǒng)可接收人的圖像，并至少部分基于該圖像標識該人的情緒狀態(tài)。計算系統(tǒng)可引起與其它數(shù)據(jù)組合存儲人的情緒狀態(tài)，以實現(xiàn)對于提供給計算系統(tǒng)的情緒相關(guān)查詢的隨后響應(yīng)。情緒相關(guān)查詢可包含情緒相關(guān)準則和非情緒相關(guān)準則，并且該響應(yīng)可至少部分基于情緒狀態(tài)與至少一些其它數(shù)據(jù)的組合。從而，一些實施例可允許面向外的圖像捕捉裝置(如包含在可穿戴計算裝置中的相機)以捕捉穿戴者與其交互的人們的圖像，分析圖像(例如用于情緒相關(guān)信息)，并存儲分析結(jié)果，存儲用于將來參考和搜索。
[0011]在如下詳細描述中，參考形成其一部分的附圖，其中通篇相似的附圖標記標明相似部分，并且其中作為可實施的圖示實施例示出。要理解到，可利用其它實施例，并且可進行結(jié)構(gòu)或邏輯改變，而不脫離本公開的范圍。因此，如下詳細描述并不被視為限制意義，并且實施例的范圍由所附權(quán)利要求書以及它們的等效方案定義。
[0012]各種操作以最有助于理解所要求保護的主題的方式依次描述為多個分立動作或操作。然而，描述的次序不應(yīng)該被視為暗示這些操作一定是次序相關(guān)的。具體地說，這些操作可以不按呈現(xiàn)的次序執(zhí)行。所描述的操作可按與所描述的實施例不同的次序執(zhí)行?？蓤?zhí)行各種附加操作和/或在附加實施例中可省略所描述的操作。
[0013]為了本公開的目的，短語“A和/或B”意思是⑷、⑶或(A和B)。為了本公開的目的，短語“A、B和/或C”意思是(A)、⑶、(C)、(A和B)、(A和C)、(B和C)或(A、B和C) ο
[0014]描述使用“在一個實施例中”或“在實施例中”的短語，它們可各指的是相同或不同實施例中的一個或多個實施例。而且，相對于本公開實施例所使用的術(shù)語“包括”、“包含”、“具有”等是同義詞。本文所使用的術(shù)語“邏輯”可指的是、作為其一部分或者包含專用集成電路(ASIC)、電子電路、處理器(共享、專用或群)和/或執(zhí)行一個或多個軟件或固件程序的存儲器(共享、專用或群)、組合邏輯電路和/或提供所描述功能性的其它適合的組件。
[0015]圖1描繪了按照各種實施例配置用于情緒信息處理的說明性計算系統(tǒng)100。在一些實施例中，計算系統(tǒng)100可配置成接收圖像，確定圖像中的人的情緒狀態(tài)，并引起與其它數(shù)據(jù)組合存儲人的情緒狀態(tài)，以實現(xiàn)對于提供給計算系統(tǒng)100的情緒相關(guān)查詢的隨后響應(yīng)。計算系統(tǒng)100可響應(yīng)于的情緒相關(guān)查詢的示例可包含:“我最后看見約翰生氣是什么時候？ ” “平均起來，曼迪這個月高興看見我嗎？ ”和“當我在早上遇見他時我的老板比較生氣嗎？ ”情緒信息處理操作可如其所應(yīng)分布在計算系統(tǒng)100的各種組件之間。本文論述了計算系統(tǒng)100組件之間的操作分布的幾個示例，但可使用或多或少組件的任何其它組合以及操作分布。在一些實施例中，計算系統(tǒng)100可配置為情緒信息處理系統(tǒng)200，下面參考圖2進行論述。
[0016]計算系統(tǒng)100可包含可穿戴計算裝置102、手持計算裝置104和遠程計算裝置106。通信通路108、110和112可實現(xiàn)計算系統(tǒng)100組件之間的通信。通信通路108、110和112各可包含有線通信通路和/或無線通信通路、通過直接耦合和/或通過個人區(qū)域網(wǎng)、局域網(wǎng)和/或廣域網(wǎng)。可穿戴計算裝置102、手持計算裝置104和遠程計算裝置106中的每個都可包含用于支持通信通路108、110和112的適合硬件，諸如網(wǎng)絡(luò)接口卡、調(diào)制解調(diào)器、WiFi裝置、藍牙裝置等等。在一些實施例中，通信通路108、110和112可以是在圖1中所圖示的組件之間的直接通信通路。如本文所使用的，對圖1的計算系統(tǒng)100(或本文公開的任何系統(tǒng)或裝置)的兩個組件之間的“直接”通信通路的提及可指的是不通過另一圖示的組件路由但可通過其它未圖示的裝置(例如，路由器和/或交換機)路由的通信通路。
[0017]包含在計算系統(tǒng)100中的每一個計算裝置都可包含處理裝置和存儲裝置(未示出)。處理裝置可包含一個或多個處理裝置，諸如一個或多個處理核、ASIC、電子電路、處理器(共享、專用或群組)、組合邏輯電路和/或可配置成處理電子數(shù)據(jù)的其它適合的組件。存儲裝置可包含任何適合的存儲器或大容量存儲裝置(諸如固態(tài)驅(qū)動器、磁盤、硬驅(qū)、光盤只讀存儲器(CD-ROM)等等)。包含在計算系統(tǒng)100中的每一個計算裝置都可包含一個或多個總線(和總線橋，如果適合的話)來以通信方式耦合處理裝置、存儲裝置和包含在相應(yīng)計算裝置中的任何其它裝置。存儲裝置可包含一組計算邏輯，其可包含其上存儲有指令的計算機可讀介質(zhì)的一個或多個拷貝，所述指令當由計算裝置的處理裝置執(zhí)行時可使計算裝置實現(xiàn)本文公開的任何技術(shù)和方法，或它們的一部分。在一些實施例中，計算邏輯可包含下面參考圖2論述的任何邏輯。
[0018]可穿戴計算裝置102可以是集成到衣服、配飾或配置成穿在用戶(或“穿戴者”)身上的其它支撐結(jié)構(gòu)中的計算裝置?？纱┐饔嬎阊b置102的適合的支撐結(jié)構(gòu)的示例可包含眼鏡、手機、頭飾(例如，發(fā)帶或發(fā)夾)、眼鏡架柄、首飾(例如，胸針、耳環(huán)或項鏈)、腕帶(例如，腕表)、頸帶(例如，領(lǐng)帶或圍巾)、衣服(例如，裙子、褲子、禮服裙或夾克)、熱源、鞋子、吊繩或名簽、隱形眼鏡或可植入支撐結(jié)構(gòu)，及其他。在一些實施例中，可穿戴計算裝置102可以是具有相機和麥克風的腕戴式計算裝置。在一些實施例中，可穿戴計算裝置102可以是具有相機和麥克風的裝眼鏡上的計算裝置。在一些實施例中，可穿戴計算裝置102可包含“面向世界的”相機(即，遠離穿戴者指向的相機)和麥克風。
[0019]手持計算裝置104可以是配置用于攜帶在口袋、背包或其它攜帶箱中并用一個或多個用戶的手操作的計算裝置?？沙洚斒殖钟嬎阊b置104的手持計算裝置的示例包含蜂窩電話、智能電話、其它手持移動通信裝置、平板計算機、電子書閱讀器、個人數(shù)字助理、膝上型計算機或其它此類計算裝置。例如，情緒處理和由手持計算裝置104執(zhí)行的其它操作可由手持計算裝置104上的APP或插件控制。在一些實施例中，手持計算裝置104可比可穿戴計算裝置102具有更多的計算資源(例如，處理能力、存儲器和/或通信帶寬)。從而，在一些實施例中，由可穿戴計算裝置102捕捉的和初步處理的數(shù)據(jù)(例如，圖像、音頻或其它傳感器數(shù)據(jù))可通過通信通路108傳送到手持計算裝置104進行進一步處理。
[0020]遠程計算裝置106可包含一個或多個服務(wù)器(例如，布置在“云”計算配置中)或遠離可穿戴計算裝置102和手持計算裝置104的其它計算裝置?？纱┐饔嬎阊b置102與遠程計算裝置106之間的通信通路112以及手持計算裝置104與遠程計算裝置106之間的通信通路110可根據(jù)任何遠程有線或無線通信協(xié)議配置。在一些實施例中，遠程計算裝置106可比可穿戴計算裝置102或手持計算裝置104具有更多的計算資源(例如，處理能力、存儲器和/或通信帶寬)。從而，在一些實施例中，由可穿戴計算裝置102和/或手持計算裝置104捕捉的和初步處理的數(shù)據(jù)(例如，圖像、音頻或其它傳感器數(shù)據(jù))可通過通信通路110和/或112傳送到遠程計算裝置106進行進一步處理。在一些實施例中，遠程計算裝置106可執(zhí)行下面參考圖2論述的大多數(shù)情緒相關(guān)操作，包含由數(shù)據(jù)處理邏輯202和/或情緒標識邏輯218執(zhí)行的操作。在一些實施例中，遠程計算裝置106可包含存儲情緒狀態(tài)信息的存儲器，當計算系統(tǒng)100接收到情緒相關(guān)查詢時，可訪問情緒狀態(tài)信息。
[0021]在一些實施例中，遠程計算裝置106可與多個手持計算裝置(類似于手持計算裝置104配置)和/或多個可穿戴計算裝置(類似于可穿戴計算裝置102配置)通信。遠程計算裝置106可對于每個手持計算裝置或可穿戴計算裝置執(zhí)行類似處理和存儲裝置。例如，遠程計算裝置106可接收由包含在多個可穿戴計算裝置(類似于可穿戴計算裝置102配置)中的圖像捕捉裝置捕捉的圖像，并且可對這些圖像執(zhí)行情緒信息處理(例如，標識圖像中人們的情緒狀態(tài))。遠程計算裝置106可將不同資源專用于與遠程計算裝置通信的多個手持或可穿戴計算裝置中的不同裝置(例如，每個裝置的不同存儲器分區(qū)或數(shù)據(jù)庫)。
[0022]在本文公開的情緒信息處理系統(tǒng)的一些實施例中，可以不包含圖1中示出的計算系統(tǒng)100的組件。例如，在一些實施例中，計算系統(tǒng)100可以不包含手持計算裝置104。在一些實施例中，可以不包含計算系統(tǒng)100的組件之間的其中一個或多個通信通路；例如，在一些實施例中，可穿戴計算裝置102可不經(jīng)由通信通路112與遠程計算裝置106直接通信(但可經(jīng)由手持計算裝置104和通信通路108和110與遠程計算裝置106通信)。在一些實施例中，計算裝置102和104都可以是可穿戴的，或者兩個計算裝置102和104都可以是手持的。
[0023]圖2描繪了說明性情緒信息處理系統(tǒng)200。如上面參考計算系統(tǒng)100所論述的，情緒信息處理系統(tǒng)200可配置成執(zhí)行若干情緒信息處理操作中的任何操作。例如，情緒信息處理系統(tǒng)200可配置成接收圖像，確定圖像中的人的情緒狀態(tài)，并引起與其它數(shù)據(jù)組合存儲人的情緒狀態(tài)，以實現(xiàn)對于情緒相關(guān)查詢的隨后響應(yīng)。按照各種實施例，情緒信息處理系統(tǒng)200可由圖1的計算系統(tǒng)100實現(xiàn)。具體地說，情緒信息處理系統(tǒng)200的組件可以任何適合的方式分布在計算系統(tǒng)100的其中一個或多個組件之間。盡管在圖2中圖示了若干組件，但各種實施例可視情況而定省略用于要執(zhí)行情緒信息處理操作的組件。例如，情緒信息處理系統(tǒng)200的一些實施例可不配置用于音頻信息處理，并且從而可以不包含音頻捕捉裝置226、語音分析器邏輯204、關(guān)鍵短語邏輯206或說話者身份邏輯208中的一個或多個。
[0024]情緒信息處理系統(tǒng)200可包含輸入裝置230。輸入裝置230可包含圖像捕捉裝置224、音頻捕捉裝置226和其它輸入裝置228。盡管輸入裝置230 (以及本文描述的其它組件)可以單數(shù)形式提及，但任何數(shù)量的輸入裝置都可包含在輸入裝置230中(并且類似地，任何組件都可包含多個此類組件)。在一些實施例中，輸入裝置230可包含單個輸入裝置(例如單個相機)。
[0025]在一些實施例中，圖像捕捉裝置224可包含一個或多個數(shù)碼相機，例如，并且可使用任何成像波長(例如可見光或紅外光)。本文所使用