信息通信方法
【專(zhuān)利摘要】一種能夠在多種多樣的設(shè)備間進(jìn)行通信的信息通信方法,包括:步驟(SA11),設(shè)定圖像傳感器的曝光時(shí)間,以使得在通過(guò)由圖像傳感器進(jìn)行的被攝體的攝像得到的圖像中,根據(jù)該被攝體的亮度變化而發(fā)生與在該圖像傳感器中包含的曝光行對(duì)應(yīng)的亮線(xiàn);步驟(SA12),通過(guò)圖像傳感器將亮度變化的被攝體以設(shè)定的曝光時(shí)間攝像,取得包含亮線(xiàn)的圖像;步驟(SA13),通過(guò)將由所取得的圖像中包含的亮線(xiàn)的樣式確定的數(shù)據(jù)解調(diào),取得信息。
【專(zhuān)利說(shuō)明】信息通信方法
【技術(shù)領(lǐng)域】
[0001]本發(fā)明涉及智能電話(huà)、平板電腦、便攜電話(huà)等的便攜終端與空調(diào)、照明設(shè)備、炊飯機(jī)等的家電設(shè)備的通信方法。
【背景技術(shù)】
[0002]在近年來(lái)的家庭網(wǎng)絡(luò)中,通過(guò)除了由Ethernet (注冊(cè)商標(biāo))或無(wú)線(xiàn)LAN(LocalArea Network)下的IP(Internet Protocol)連接進(jìn)行的AV家電的協(xié)同之外、還具有與環(huán)境問(wèn)題對(duì)應(yīng)的電力使用量的管理、或從宅外的電源ON / OFF這樣的功能的家庭能源管理系統(tǒng)(HEMS)實(shí)現(xiàn)多種多樣的家電設(shè)備連接在網(wǎng)絡(luò)的家電協(xié)同功能的導(dǎo)入正在進(jìn)展。但是,在具有通信功能方面,也有運(yùn)算力不充分的家電、或在成本方面難以實(shí)現(xiàn)通信功能的搭載的豕電等。
[0003]為了解決這樣的問(wèn)題,在專(zhuān)利文獻(xiàn)I中,記載有在使用光向自由空間傳遞信息的光空間傳送裝置中、通過(guò)進(jìn)行使用多個(gè)照明光的單色光源的通信、能夠在有限的發(fā)送裝置中有效率地實(shí)現(xiàn)設(shè)備間的通信的技術(shù)。
[0004]現(xiàn)有技術(shù)
[0005]專(zhuān)利文獻(xiàn)
[0006]專(zhuān)利文獻(xiàn)1:日本特開(kāi)2002-290335號(hào)公報(bào)
【發(fā)明內(nèi)容】
[0007]發(fā)明概要
[0008]發(fā)明解決的課題
[0009]但是,在上述以往的方式中,限定于使用的設(shè)備具有照明那樣的3色光源的情況。本發(fā)明解決這樣的問(wèn)題,提供一種能夠進(jìn)行包括運(yùn)算力較少那樣的設(shè)備的多種多樣的設(shè)備間的通信的信息通信方法。
[0010]解決課題的手段
[0011]有關(guān)本發(fā)明的一技術(shù)方案的信息通信方法,是從被攝體取得信息的信息通信方法,包括:曝光時(shí)間設(shè)定步驟,設(shè)定圖像傳感器的曝光時(shí)間,以使得在通過(guò)由上述圖像傳感器進(jìn)行的上述被攝體的攝像得到的圖像中,對(duì)應(yīng)于上述被攝體的亮度變化而發(fā)生與上述圖像傳感器中包含的曝光行對(duì)應(yīng)的亮線(xiàn);攝像步驟,通過(guò)上述圖像傳感器將亮度變化的上述被攝體在設(shè)定的上述曝光時(shí)間中攝像,取得包含上述亮線(xiàn)的圖像;信息取得步驟,通過(guò)將由在所取得的上述圖像中包含的上述亮線(xiàn)的樣式(pattern)確定的數(shù)據(jù)解調(diào),取得信息。
[0012]另外,這些全局性或具體的技術(shù)方案既可以通過(guò)系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或計(jì)算機(jī)可讀取的CD-ROM等的記錄媒體實(shí)現(xiàn),也可以通過(guò)系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序及記錄媒體的任意的組合實(shí)現(xiàn)。
[0013]根據(jù)本發(fā)明,能夠?qū)崿F(xiàn)包括運(yùn)算力較少那樣的設(shè)備的多種多樣的設(shè)備間的通信的f目息通"[目方法?!緦?zhuān)利附圖】
【附圖說(shuō)明】
[0014]圖1是表示實(shí)施方式I的宅內(nèi)的環(huán)境的例子的圖。
[0015]圖2是表示實(shí)施方式I的家電設(shè)備與智能電話(huà)的通信的例子的圖。
[0016]圖3是表示實(shí)施方式I的發(fā)送側(cè)裝置的結(jié)構(gòu)的一例的圖。
[0017]圖4是表示實(shí)施方式I的接收側(cè)裝置的結(jié)構(gòu)的一例的圖。
[0018]圖5是表示實(shí)施方式I的通過(guò)發(fā)送側(cè)裝置的LED的閃爍向接收側(cè)裝置發(fā)送信息的處理的流程的圖。
[0019]圖6是表示實(shí)施方式I的通過(guò)發(fā)送側(cè)裝置的LED的閃爍向接收側(cè)裝置發(fā)送信息的處理的流程的圖。
[0020]圖7是表示實(shí)施方式I的通過(guò)發(fā)送側(cè)裝置的LED的閃爍向接收側(cè)裝置發(fā)送信息的處理的流程的圖。
[0021]圖8是表示實(shí)施方式I的通過(guò)發(fā)送側(cè)裝置的LED的閃爍向接收側(cè)裝置發(fā)送信息的處理的流程的圖。
[0022]圖9是表示實(shí)施方式I的通過(guò)發(fā)送側(cè)裝置的LED的閃爍向接收側(cè)裝置發(fā)送信息的處理的流程的圖。
[0023]圖10是用來(lái)說(shuō)明實(shí)施方式2的使用可視光進(jìn)行用戶(hù)與設(shè)備的通信的次序的圖。
[0024]圖11是用來(lái)說(shuō)明實(shí)施方式2的使用可視光進(jìn)行用戶(hù)與設(shè)備的通信的次序的圖。
[0025]圖12是用來(lái)說(shuō)明實(shí)施方式2的用戶(hù)購(gòu)買(mǎi)設(shè)備、進(jìn)行設(shè)備的初始設(shè)定為止的次序的圖。
[0026]圖13是用來(lái)對(duì)實(shí)施方式2的設(shè)備故障的情況下的服務(wù)人員專(zhuān)用的服務(wù)進(jìn)行說(shuō)明的圖。
[0027]圖14是用來(lái)對(duì)實(shí)施方式2的清掃機(jī)、和使用可視光通信的用來(lái)確認(rèn)清掃狀況的服務(wù)進(jìn)行說(shuō)明的圖。
[0028]圖15是實(shí)施方式3的使用光通信的住宅配送服務(wù)支援的概略圖。
[0029]圖16是用來(lái)說(shuō)明實(shí)施方式3的使用光通信的住宅配送服務(wù)支援的流程圖。
[0030]圖17是用來(lái)說(shuō)明實(shí)施方式3的使用光通信的住宅配送服務(wù)支援的流程圖。
[0031]圖18是用來(lái)說(shuō)明實(shí)施方式3的使用光通信的住宅配送服務(wù)支援的流程圖。
[0032]圖19是用來(lái)說(shuō)明實(shí)施方式3的使用光通信的住宅配送服務(wù)支援的流程圖。
[0033]圖20是用來(lái)說(shuō)明實(shí)施方式3的使用光通信的住宅配送服務(wù)支援的流程圖。
[0034]圖21是用來(lái)說(shuō)明實(shí)施方式3的使用光通信的住宅配送服務(wù)支援的流程圖。
[0035]圖22是用來(lái)說(shuō)明實(shí)施方式4的向服務(wù)器登記用戶(hù)和使用中的便攜電話(huà)的處理的圖。
[0036]圖23是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行用戶(hù)聲音特性的解析的處理的圖。
[0037]圖24是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行聲音識(shí)別處理的準(zhǔn)備的處理的圖。
[0038]圖25是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行從周邊的集音設(shè)備的集音的處理的圖。
[0039]圖26是用來(lái)說(shuō)明實(shí)施方式4的環(huán)境音特性的解析處理的圖。
[0040]圖27是用來(lái)說(shuō)明實(shí)施方式4的將來(lái)自存在于周邊的聲音輸出設(shè)備的聲音的處理的圖。[0041]圖28是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行烹調(diào)菜單的選擇和向電灶的運(yùn)轉(zhuǎn)內(nèi)容設(shè)定的處理的圖。
[0042]圖29是用來(lái)說(shuō)明實(shí)施方式4的從服務(wù)器等的DB取得電灶用的通知音、向電灶設(shè)定的處理的圖。
[0043]圖30是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行電灶的通知音的調(diào)整的處理的圖。
[0044]圖31是表示實(shí)施方式4的對(duì)電灶設(shè)定的通知音的波形的例子的圖。
[0045]圖32是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行烹調(diào)內(nèi)容的顯示的處理的圖。
[0046]圖33是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行電灶的通知音的識(shí)別的處理的圖。
[0047]圖34是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行從周邊的集音設(shè)備的集音和電灶通知音的識(shí)別的處理的圖。
[0048]圖35是用來(lái)說(shuō)明實(shí)施方式4的將電灶的運(yùn)轉(zhuǎn)結(jié)束向用戶(hù)通知的處理的圖。
[0049]圖36是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行便攜電話(huà)操作狀態(tài)的確認(rèn)的處理的圖。
[0050]圖37是用來(lái)說(shuō)明實(shí)施方式4的進(jìn)行用戶(hù)位置的跟蹤的處理的圖。
[0051]圖38是表不一邊將來(lái)自聲音輸出裝置的聲音消除一邊識(shí)別家電的通知音、使可通信的電子設(shè)備識(shí)別用戶(hù)(操作者)的當(dāng)前位置、根據(jù)用戶(hù)位置的識(shí)別結(jié)果、使處于距用戶(hù)位置較近的位置的設(shè)備進(jìn)行向用戶(hù)的通知的圖。
[0052]圖39是表示實(shí)施方式4的在服務(wù)器或便攜電話(huà)、電灶中保持的數(shù)據(jù)庫(kù)的內(nèi)容的圖。
[0053]圖40是表示實(shí)施方式4的用戶(hù)基于顯示在便攜電話(huà)上的烹調(diào)次序進(jìn)行烹調(diào)、此外用戶(hù)通過(guò)“向后”、“返回”等的聲音操作便攜電話(huà)的顯示內(nèi)容的圖。
[0054]圖41是表示實(shí)施方式4的開(kāi)始電灶的運(yùn)轉(zhuǎn)、在等待運(yùn)轉(zhuǎn)結(jié)束的期間中、或煮東西的期間等的時(shí)間中、用戶(hù)向其他場(chǎng)所移動(dòng)的圖。
[0055]圖42是表示對(duì)于經(jīng)由網(wǎng)絡(luò)與便攜電話(huà)連接、并且照相機(jī)或麥克風(fēng)、人感傳感器等的能夠進(jìn)行用戶(hù)的位置的識(shí)別或能夠識(shí)別用戶(hù)存在的設(shè)備、從便攜電話(huà)發(fā)送探知用戶(hù)的命令的圖。
[0056]圖43是作為實(shí)施方式4的用戶(hù)的探知的例子而表示用電視機(jī)附帶的照相機(jī)識(shí)別用戶(hù)的臉、此外用空調(diào)的人感傳感器識(shí)別用戶(hù)的移動(dòng)或存在的圖。
[0057]圖44是表示從探知到用戶(hù)的設(shè)備將探知到用戶(hù)的情況、及從探知到的設(shè)備到用戶(hù)的相對(duì)位置向便攜電話(huà)發(fā)送的圖。
[0058]圖45是表示實(shí)施方式4的便攜電話(huà)將電灶的運(yùn)轉(zhuǎn)結(jié)束音識(shí)別的圖。
[0059]圖46是表示向識(shí)別出電灶的運(yùn)轉(zhuǎn)結(jié)束的便攜電話(huà)向探知到用戶(hù)的設(shè)備中的、具有畫(huà)面顯示功能或聲音輸出功能的設(shè)備發(fā)送向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束的命令的圖。
[0060]圖47是表示實(shí)施方式4的接受到命令的設(shè)備將通知內(nèi)容向用戶(hù)通知的圖。
[0061]圖48是表示經(jīng)由網(wǎng)絡(luò)與便攜電話(huà)連接、具備麥克風(fēng)、存在于電灶的附近的設(shè)備將電灶的運(yùn)轉(zhuǎn)結(jié)束音識(shí)別的圖。
[0062]圖49是表示將電灶的運(yùn)轉(zhuǎn)結(jié)束從識(shí)別到該情況的設(shè)備向便攜電話(huà)通知的圖。
[0063]圖50是表示當(dāng)便攜電話(huà)接受到電灶的運(yùn)轉(zhuǎn)結(jié)束的通知時(shí)、如果便攜電話(huà)處于用戶(hù)的附近、則使用便攜電話(huà)的畫(huà)面顯示或聲音輸出等向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束的圖。
[0064]圖51是表示向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束的圖。[0065]圖52是表示接受到電灶的運(yùn)轉(zhuǎn)結(jié)束的通知的用戶(hù)向廚房移動(dòng)的圖。
[0066]圖53是表示從電灶用無(wú)線(xiàn)通信向便攜電話(huà)發(fā)送運(yùn)轉(zhuǎn)結(jié)束等的信息、從便攜電話(huà)向用戶(hù)正觀(guān)看的電視機(jī)進(jìn)行通知命令、用電視機(jī)的畫(huà)面顯示或聲音向用戶(hù)進(jìn)行通知的圖。
[0067]圖54是表示從電灶以無(wú)線(xiàn)通信向用戶(hù)正觀(guān)看的電視機(jī)發(fā)送運(yùn)轉(zhuǎn)結(jié)束等的信息、用電視機(jī)的畫(huà)面顯示或聲音向用戶(hù)進(jìn)行通知的圖。
[0068]圖55是表示用電視機(jī)的畫(huà)面顯示或聲音向用戶(hù)進(jìn)行通知的圖。
[0069]圖56是表示向處于遠(yuǎn)程的用戶(hù)進(jìn)行信息的通知的圖。
[0070]圖57是表示在不能從電灶向作為樞紐的便攜電話(huà)進(jìn)行直接通信的情況下、經(jīng)由個(gè)人計(jì)算機(jī)等向便攜電話(huà)發(fā)送信息的圖。
[0071]圖58是表示從接受到圖57的通信的便攜電話(huà)逆向沿著信息通信路徑向電灶發(fā)送操作命令等的信息的圖。
[0072]圖59是表示在從作為信息源設(shè)備空調(diào)向作為樞紐的便攜電話(huà)不能進(jìn)行直接的通信的情況下、向用戶(hù)進(jìn)行信息的通知的圖。
[0073]圖60是用來(lái)對(duì)利用使用700?900MHz的電波的通信裝置的系統(tǒng)進(jìn)行說(shuō)明的圖。
[0074]圖61是表示遠(yuǎn)程的便攜電話(huà)向用戶(hù)通知信息的圖。
[0075]圖62是表示遠(yuǎn)程的便攜電話(huà)向用戶(hù)進(jìn)行信息的通知的圖。
[0076]圖63是表示在與圖62同樣的情況下、代替進(jìn)行通知識(shí)別設(shè)備和信息通知設(shè)備的中繼的設(shè)備、2層的電視機(jī)發(fā)揮中繼設(shè)備的作用的情況下的圖。
[0077]圖64是表示實(shí)施方式5的宅內(nèi)的環(huán)境的例子的圖。
[0078]圖65是表不實(shí)施方式5的家電設(shè)備和智能電話(huà)的通信的例子的圖。
[0079]圖66是表示實(shí)施方式5的發(fā)送側(cè)裝置的結(jié)構(gòu)的圖。
[0080]圖67是表示實(shí)施方式5的接收側(cè)裝置的結(jié)構(gòu)的圖。
[0081]圖68是在圖64中、發(fā)送側(cè)終端(TV)與接收側(cè)終端(平板電腦)使用光通信進(jìn)行無(wú)線(xiàn)LAN認(rèn)證的情況下的順序圖。
[0082]圖69是進(jìn)行實(shí)施方式5的應(yīng)用下的認(rèn)證的情況下的順序圖。
[0083]圖70是表示實(shí)施方式5的發(fā)送側(cè)終端的動(dòng)作的流程圖。
[0084]圖71是表示實(shí)施方式5的接收側(cè)終端的動(dòng)作的流程圖。
[0085]圖72是實(shí)施方式6的移動(dòng)AV終端I向移動(dòng)AV終端2發(fā)送數(shù)據(jù)的順序圖。
[0086]圖73是實(shí)施方式6的移動(dòng)AV終端I向移動(dòng)AV終端2發(fā)送數(shù)據(jù)的情況下的畫(huà)面變遷圖。
[0087]圖74是實(shí)施方式6的移動(dòng)AV終端I向移動(dòng)AV終端2發(fā)送數(shù)據(jù)的情況下的畫(huà)面變遷圖。
[0088]圖75是實(shí)施方式6的移動(dòng)AV終端I是數(shù)字照相機(jī)的情況下的系統(tǒng)概略圖。
[0089]圖76是實(shí)施方式6的移動(dòng)AV終端I是數(shù)字照相機(jī)的情況下的系統(tǒng)概略圖。
[0090]圖77是實(shí)施方式6的移動(dòng)AV終端I是數(shù)字照相機(jī)的情況下的系統(tǒng)概略圖。
[0091]圖78是表示實(shí)施方式7的發(fā)光部的亮度的觀(guān)測(cè)方法的一例的圖。
[0092]圖79是表示實(shí)施方式7的發(fā)光部的亮度的觀(guān)測(cè)方法的一例的圖。
[0093]圖80是表示實(shí)施方式7的發(fā)光部的亮度的觀(guān)測(cè)方法的一例的圖。
[0094]圖81是表示實(shí)施方式7的發(fā)光部的亮度的觀(guān)測(cè)方法的一例的圖。[0095]圖82是表示實(shí)施方式7的發(fā)光部的亮度的觀(guān)測(cè)方法的一例的圖。
[0096]圖83是表示實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0097]圖84是表示實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0098]圖85是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0099]圖86是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0100]圖87是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0101]圖88是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0102]圖89是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0103]圖90是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0104]圖91是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0105]圖92是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0106]圖93是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0107]圖94是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0108]圖95是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0109]圖96是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0110]圖97是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0111]圖98是表不實(shí)施方式7的信號(hào)調(diào)制方式的一例的圖。
[0112]圖99是表示實(shí)施方式7的發(fā)光部的檢測(cè)方法的一例的圖。
[0113]圖100是表示實(shí)施方式7的發(fā)光部的檢測(cè)方法的一例的圖。
[0114]圖101是表示實(shí)施方式7的發(fā)光部的檢測(cè)方法的一例的圖。
[0115]圖102是表示實(shí)施方式7的發(fā)光部的檢測(cè)方法的一例的圖。
[0116]圖103是表不實(shí)施方式7的發(fā)光部的檢測(cè)方法的一例的圖。
[0117]圖104是表示實(shí)施方式7的發(fā)送信號(hào)的時(shí)間行、和將發(fā)光部攝像的圖像的圖。
[0118]圖105是表示實(shí)施方式7的通過(guò)位置樣式進(jìn)行的信號(hào)的傳送的一例的圖。
[0119]圖106是表示實(shí)施方式7的接收裝置的一例的圖。
[0120]圖107是表示實(shí)施方式7的發(fā)送裝置的一例的圖。
[0121]圖108是表示實(shí)施方式7的發(fā)送裝置的一例的圖。
[0122]圖109是表示實(shí)施方式7的發(fā)送裝置的一例的圖。
[0123]圖110是表示實(shí)施方式7的發(fā)送裝置的一例的圖。
[0124]圖111是表示實(shí)施方式7的發(fā)送裝置的一例的圖。
[0125]圖112是表示實(shí)施方式7的發(fā)送裝置的一例的圖。
[0126]圖113是表示實(shí)施方式7的發(fā)送裝置的一例的圖。
[0127]圖114是表示實(shí)施方式7的發(fā)送裝置的一例的圖。
[0128]圖115是表示實(shí)施方式7的發(fā)光部的構(gòu)造的一例的圖。
[0129]圖116是表不實(shí)施方式7的信號(hào)輸送波的一例的圖。
[0130]圖117是表示實(shí)施方式7的攝像部的一例的圖。
[0131]圖118是表示實(shí)施方式7的接收裝置的位置的推測(cè)的一例的圖。
[0132]圖119是表示實(shí)施方式7的接收裝置的位置的推測(cè)的一例的圖。
[0133]圖120是表示實(shí)施方式7的接收裝置的位置的推測(cè)的一例的圖。[0134]圖121是表示實(shí)施方式7的接收裝置的位置的推測(cè)的一例的圖。
[0135]圖122是表示實(shí)施方式7的接收裝置的位置的推測(cè)的一例的圖。
[0136]圖123是表示實(shí)施方式7的發(fā)送信息的設(shè)定的一例的圖。
[0137]圖124是表示實(shí)施方式7的發(fā)送信息的設(shè)定的一例的圖。
[0138]圖125是表示實(shí)施方式7的發(fā)送信息的設(shè)定的一例的圖。
[0139]圖126是表示實(shí)施方式7的接收裝置的構(gòu)成要素的一例的塊圖。
[0140]圖127是表示實(shí)施方式7的發(fā)送裝置的構(gòu)成要素的一例的塊圖。
[0141]圖128是表示實(shí)施方式7的接收的次序的一例的圖。
[0142]圖129是表示實(shí)施方式7的自己位置推測(cè)的次序的一例的圖。
[0143]圖130是表示實(shí)施方式7的發(fā)送控制的次序的一例的圖。
[0144]圖131是表示實(shí)施方式7的發(fā)送控制的次序的一例的圖。
[0145]圖132是表示實(shí)施方式7的發(fā)送控制的次序的一例的圖。
[0146]圖133是表不實(shí)施方式7的車(chē)站建筑內(nèi)的信息提供的一例的圖。
[0147]圖134是表不實(shí)施方式7的乘車(chē)服務(wù)的一例的圖。
[0148]圖135是表示實(shí)施方式7的店鋪內(nèi)服務(wù)的一例的圖。
[0149]圖136是表示實(shí)施方式7的無(wú)線(xiàn)連接的建立的一例的圖。
[0150]圖137是表示實(shí)施方式7的通信范圍的調(diào)整的一例的圖。
[0151]圖138是表不實(shí)施方式7的室內(nèi)的利用的一例的圖。
[0152]圖139是表示實(shí)施方式7的屋外的利用的一例的圖。
[0153]圖140是表示實(shí)施方式7的道路順序的指示的一例的圖。
[0154]圖141是表示實(shí)施方式7的多個(gè)攝像裝置的利用的一例的圖。
[0155]圖142是表示實(shí)施方式7的發(fā)送裝置自律控制的一例的圖。
[0156]圖143是表示實(shí)施方式7的發(fā)送信息的設(shè)定的一例的圖。
[0157]圖144是表示實(shí)施方式7的發(fā)送信息的設(shè)定的一例的圖。
[0158]圖145是表不實(shí)施方式7的發(fā)送信息的設(shè)定的一例的圖。
[0159]圖146是表示實(shí)施方式7的與二維條碼的組合的一例的圖。
[0160]圖147是表示實(shí)施方式7的地圖的制作和利用的一例的圖。
[0161]圖148是表示實(shí)施方式7的電子設(shè)備的狀態(tài)取得和操作的一例的圖。
[0162]圖149是表示實(shí)施方式7的電子設(shè)備的識(shí)別的一例的圖。
[0163]圖150是表示實(shí)施方式7的擴(kuò)展現(xiàn)實(shí)對(duì)象的顯示的一例的圖。
[0164]圖151是表不實(shí)施方式7的用戶(hù)界面的一例的圖。
[0165]圖152是表不實(shí)施方式7的用戶(hù)界面的一例的圖。
[0166]圖153是表不實(shí)施方式7的用戶(hù)界面的一例的圖。
[0167]圖154是表不實(shí)施方式7的用戶(hù)界面的一例的圖。
[0168]圖155是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0169]圖156是表不實(shí)施方式7的用戶(hù)界面的一例的圖。
[0170]圖157是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0171]圖158是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0172]圖159是表示實(shí)施方式7的用戶(hù)界面的一例的圖。[0173]圖160是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0174]圖161是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0175]圖162是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0176]圖163是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0177]圖164是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0178]圖165是表不實(shí)施方式7的用戶(hù)界面的一例的圖。
[0179]圖166是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0180]圖167是表示實(shí)施方式7的用戶(hù)界面的一例的圖。
[0181]圖168是表示實(shí)施方式8的向ITS的應(yīng)用例的圖。
[0182]圖169是表示實(shí)施方式8的向ITS的應(yīng)用例的圖。
[0183]圖170是表不實(shí)施方式8的向位置信息報(bào)知系統(tǒng)及施設(shè)系統(tǒng)的應(yīng)用例的圖。
[0184]圖171是表示實(shí)施方式8的向超級(jí)市場(chǎng)的系統(tǒng)的應(yīng)用例的圖。
[0185]圖172是表示實(shí)施方式8的向便攜電話(huà)終端與照相機(jī)的通信的應(yīng)用例的圖。
[0186]圖173是表示實(shí)施方式8的向水中通信的應(yīng)用例的圖。
[0187]圖174是用來(lái)說(shuō)明實(shí)施方式9的向用戶(hù)的服務(wù)提供例的圖。
[0188]圖175是用來(lái)說(shuō)明實(shí)施方式9的向用戶(hù)的服務(wù)提供例的圖。
[0189]圖176是表示實(shí)施方式9的接收機(jī)將從發(fā)送機(jī)接收到的多個(gè)信號(hào)同時(shí)處理的情況的流程圖。
[0190]圖177是表示實(shí)施方式9的通過(guò)相互通信實(shí)現(xiàn)設(shè)備間的通訊的情況的一例的圖。
[0191]圖178是用來(lái)說(shuō)明實(shí)施方式9的利用指向性的特性的服務(wù)的圖。
[0192]圖179是用來(lái)說(shuō)明實(shí)施方式9的向用戶(hù)的服務(wù)提供例的另一例的圖。
[0193]圖180是表示實(shí)施方式9的在發(fā)送機(jī)發(fā)出的光源中包含的信號(hào)的格式例的圖。
[0194]圖181是表示實(shí)施方式10的原理的圖。
[0195]圖182是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0196]圖183是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0197]圖184是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0198]圖185是表不實(shí)施方式10的動(dòng)作的一例的圖。
[0199]圖186是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0200]圖187是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0201]圖188是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0202]圖189是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0203]圖190是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0204]圖191是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0205]圖192是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0206]圖193是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0207]圖194是表示實(shí)施方式10的動(dòng)作的一例的圖。
[0208]圖195是實(shí)施方式11的信息通信裝置的發(fā)送信號(hào)的時(shí)間圖。
[0209]圖196是表示實(shí)施方式11的發(fā)送信號(hào)與接收信號(hào)的關(guān)系的圖。
[0210]圖197是表示實(shí)施方式11的發(fā)送信號(hào)與接收信號(hào)的關(guān)系的圖。[0211]圖198是表示實(shí)施方式11的發(fā)送信號(hào)與接收信號(hào)的關(guān)系的圖。
[0212]圖199是表示實(shí)施方式11的發(fā)送信號(hào)與接收信號(hào)的關(guān)系的圖。
[0213]圖200是表示實(shí)施方式11的發(fā)送信號(hào)與接收信號(hào)的關(guān)系的圖。
[0214]圖201是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0215]圖202是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0216]圖203是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0217]圖204是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0218]圖205是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0219]圖206是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0220]圖207是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0221]圖208是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0222]圖209是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0223]圖210是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0224]圖211是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0225]圖212是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0226]圖213是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0227]圖214是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0228]圖215是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0229]圖216是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0230]圖217是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0231]圖218是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0232]圖219是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0233]圖220是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0234]圖221是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0235]圖222是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0236]圖223是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0237]圖224是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0238]圖225是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0239]圖226是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0240]圖227是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0241]圖228是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0242]圖229是表示實(shí)施方式12的接收機(jī)的狀態(tài)的圖。
[0243]圖230是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0244]圖231是表示實(shí)施方式12的接收機(jī)的狀態(tài)的圖。
[0245]圖232是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0246]圖233是表示實(shí)施方式12的接收機(jī)的狀態(tài)的圖。
[0247]圖234是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0248]圖235是表示實(shí)施方式12的接收機(jī)的狀態(tài)的圖。
[0249]圖236是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。[0250]圖237是表示實(shí)施方式12的接收機(jī)的狀態(tài)的圖。
[0251]圖238是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0252]圖239是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0253]圖240是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0254]圖241是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0255]圖242是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0256]圖243是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0257]圖244是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0258]圖245是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0259]圖246是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0260]圖247是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0261]圖248是表示實(shí)施方式12的發(fā)送機(jī)的亮度變化的圖。
[0262]圖249是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0263]圖250是表示實(shí)施方式12的發(fā)送機(jī)的亮度變化的圖。
[0264]圖251是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0265]圖252是表示實(shí)施方式12的發(fā)送機(jī)的亮度變化的圖。
[0266]圖253是表不實(shí)施方式12的發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0267]圖254是表示實(shí)施方式12的發(fā)送機(jī)的亮度變化的圖。
[0268]圖255是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0269]圖256是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0270]圖257是表不實(shí)施方式12的發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0271]圖258是表示實(shí)施方式12的發(fā)送機(jī)的結(jié)構(gòu)例的圖。
[0272]圖259是表示實(shí)施方式12的發(fā)送機(jī)的結(jié)構(gòu)例的圖。
[0273]圖260是表示實(shí)施方式12的發(fā)送機(jī)的結(jié)構(gòu)例的圖。
[0274]圖261是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0275]圖262是表示實(shí)施方式12的由接收機(jī)和發(fā)送機(jī)進(jìn)行的顯示和攝影的例子的圖。
[0276]圖263是表示實(shí)施方式12的發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0277]圖264是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0278]圖265是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0279]圖266是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0280]圖267是表示實(shí)施方式12的接收機(jī)的狀態(tài)的圖。
[0281]圖268是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0282]圖269是表示實(shí)施方式12的接收機(jī)的狀態(tài)的圖。
[0283]圖270是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0284]圖271是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0285]圖272是表示實(shí)施方式12的發(fā)送機(jī)的波長(zhǎng)的一例的圖。
[0286]圖273是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0287]圖274是表示實(shí)施方式12的包括接收機(jī)和發(fā)送機(jī)的系統(tǒng)的結(jié)構(gòu)例的圖。
[0288]圖275是表不實(shí)施方式12的系統(tǒng)的處理動(dòng)作的一例的流程圖。[0289]圖276是表示實(shí)施方式12的包括接收機(jī)和發(fā)送機(jī)的系統(tǒng)的結(jié)構(gòu)例的圖。
[0290]圖277是表示實(shí)施方式12的系統(tǒng)的處理動(dòng)作的一例的流程圖。
[0291]圖278是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0292]圖279是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0293]圖280是表示實(shí)施方式12的包括接收機(jī)和發(fā)送機(jī)的系統(tǒng)的結(jié)構(gòu)例的圖。
[0294]圖281是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0295]圖282是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的應(yīng)用例的圖。
[0296]圖283是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0297]圖284是表示實(shí)施方式12的包括接收機(jī)和發(fā)送機(jī)的系統(tǒng)的結(jié)構(gòu)例的圖。
[0298]圖285是表不實(shí)施方式12的系統(tǒng)的處理動(dòng)作的一例的流程圖。
[0299]圖286是表示實(shí)施方式12的接收機(jī)的處理動(dòng)作的一例的流程圖。
[0300]圖287A是表示實(shí)施方式12的發(fā)送機(jī)的結(jié)構(gòu)的一例的圖。
[0301]圖287B是表示實(shí)施方式12的發(fā)送機(jī)的結(jié)構(gòu)的另一例的圖。
[0302]圖288是表示實(shí)施方式12的接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0303]圖289是表不實(shí)施方式13的關(guān)于接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0304]圖290是表示實(shí)施方式13的關(guān)于接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0305]圖291是表不實(shí)施方式13的關(guān)于接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0306]圖292是表不實(shí)施方式13的關(guān)于接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0307]圖293是表示實(shí)施方式13的關(guān)于接收機(jī)和發(fā)送機(jī)的處理動(dòng)作的一例的流程圖。
[0308]圖294是表示實(shí)施方式13的發(fā)送機(jī)的應(yīng)用例的圖。
[0309]圖295是表不實(shí)施方式13的發(fā)送機(jī)的應(yīng)用例的圖。
[0310]圖296是表不實(shí)施方式13的發(fā)送機(jī)的應(yīng)用例的圖。
[0311]圖297是表示實(shí)施方式13的發(fā)送機(jī)和接收機(jī)的應(yīng)用例的圖。
[0312]圖298是表示實(shí)施方式13的發(fā)送機(jī)和接收機(jī)的應(yīng)用例的圖。
[0313]圖299是表示實(shí)施方式13的發(fā)送機(jī)和接收機(jī)的應(yīng)用例的圖。
[0314]圖300是表示實(shí)施方式13的發(fā)送機(jī)和接收機(jī)的應(yīng)用例的圖。
[0315]圖301A是表示實(shí)施方式13的發(fā)送信號(hào)的例子的圖。
[0316]圖30IB是表不實(shí)施方式13的發(fā)送信號(hào)的另一例的圖。
[0317]圖302是表示實(shí)施方式13的發(fā)送信號(hào)的例子的圖。
[0318]圖303A是表示實(shí)施方式13的發(fā)送信號(hào)的例子的圖。
[0319]圖303B是表不實(shí)施方式13的發(fā)送信號(hào)的另一例的圖。
[0320]圖304是表示實(shí)施方式13的發(fā)送信號(hào)的例子的圖。
[0321]圖305A是表示實(shí)施方式13的發(fā)送信號(hào)的例子的圖。
[0322]圖305B是表示實(shí)施方式13的發(fā)送信號(hào)的例子的圖。
[0323]圖306是表示實(shí)施方式13的發(fā)送機(jī)的應(yīng)用例的圖。
[0324]圖307是表示實(shí)施方式13的發(fā)送機(jī)的應(yīng)用例的圖。
[0325]圖308是用來(lái)說(shuō)明實(shí)施方式13的攝像元件的圖。
[0326]圖309是用來(lái)說(shuō)明實(shí)施方式13的攝像元件的圖。
[0327]圖310是用來(lái)說(shuō)明實(shí)施方式13的攝像元件的圖。[0328]圖311A是表示有關(guān)各實(shí)施方式的變形例的接收裝置(攝像裝置)的處理動(dòng)作的流程圖。
[0329]圖311B是有關(guān)各實(shí)施方式的變形例的將通常攝像模式與微距攝像模式對(duì)比表示的圖。
[0330]圖312是表示有關(guān)各實(shí)施方式的變形例的顯示影像等的顯示裝置的圖。
[0331]圖313是表示有關(guān)各實(shí)施方式的變形例的顯示裝置的處理動(dòng)作的一例的圖。
[0332]圖314是表示有關(guān)各實(shí)施方式的變形例的顯示裝置的發(fā)送信號(hào)的部分的例子的圖。
[0333]圖315是表示有關(guān)各實(shí)施方式的變形例的顯示裝置的處理動(dòng)作的另一例的圖。
[0334]圖316是表示有關(guān)各實(shí)施方式的變形例的顯示裝置的發(fā)送信號(hào)的部分的另一例的圖。
[0335]圖317是表示由有關(guān)各實(shí)施方式的變形例的顯示裝置進(jìn)行的處理動(dòng)作的再另一例的圖。
[0336]圖318是表示有關(guān)各實(shí)施方式的變形例的包括發(fā)送機(jī)及接收機(jī)的通信系統(tǒng)的結(jié)構(gòu)的圖。
[0337]圖319是表示有關(guān)各實(shí)施方式的變形例的通信系統(tǒng)的處理動(dòng)作的流程圖。
[0338]圖320是表示有關(guān)各實(shí)施方式的變形例的信號(hào)傳送的例子的圖。
[0339]圖321是表示有關(guān)各實(shí)施方式的變形例的信號(hào)傳送的例子的圖。
[0340]圖322是表示有關(guān)各實(shí)施方式的變形例的信號(hào)傳送的例子的圖。
[0341]圖323A是表示有關(guān)各實(shí)施方式的變形例的信號(hào)傳送的例子的圖。
[0342]圖323B是表示有關(guān)各實(shí)施方式的變形例的信號(hào)傳送的例子的圖。
[0343]圖323C是表示有關(guān)各實(shí)施方式的變形例的信號(hào)傳送的例子的圖。
[0344]圖323D是表示有關(guān)各實(shí)施方式的變形例的包括顯示器或投影機(jī)和接收機(jī)的通信系統(tǒng)的處理動(dòng)作的流程圖。
[0345]圖324是表示有關(guān)各實(shí)施方式的變形例的發(fā)送信號(hào)的例子的圖。
[0346]圖325是表示有關(guān)各實(shí)施方式的變形例的發(fā)送信號(hào)的例子的圖。
[0347]圖326是表示有關(guān)各實(shí)施方式的變形例的發(fā)送信號(hào)的例子的圖。
[0348]圖327A是表示有關(guān)各實(shí)施方式的變形例的接收機(jī)的攝像元件的一例的圖。
[0349]圖327B是表示有關(guān)各實(shí)施方式的變形例的接收機(jī)的攝像裝置的內(nèi)部電路的結(jié)構(gòu)例的圖。
[0350]圖327C是表示有關(guān)各實(shí)施方式的變形例的發(fā)送信號(hào)的例子的圖。
[0351]圖327D是表示有關(guān)各實(shí)施方式的變形例的發(fā)送信號(hào)的例子的圖。
[0352]圖328A是有關(guān)本發(fā)明的一技術(shù)方案的信息通信方法的流程圖。
[0353]圖328B是有關(guān)本發(fā)明的一技術(shù)方案的信息通信裝置的塊圖。
[0354]圖329是表示通過(guò)有關(guān)本發(fā)明的一技術(shù)方案的信息通信方法得到的圖像的一例的圖。
[0355]圖330A是表示有關(guān)本發(fā)明的另一技術(shù)方案的信息通信方法的流程圖。
[0356]圖330B是表示有關(guān)本發(fā)明的另一技術(shù)方案的信息通信裝置的塊圖。
[0357]圖331A是表示有關(guān)本發(fā)明的再另一技術(shù)方案的信息通信方法的流程圖。[0358]圖331B是表示有關(guān)本發(fā)明的再另一技術(shù)方案的信息通信裝置的塊圖。
【具體實(shí)施方式】
[0359]有關(guān)本發(fā)明的一技術(shù)方案的信息通信方法,是從被攝體取得信息的信息通信方法,包括:曝光時(shí)間設(shè)定步驟,設(shè)定圖像傳感器的曝光時(shí)間,以使得在通過(guò)由上述圖像傳感器進(jìn)行的上述被攝體的攝像得到的圖像中,對(duì)應(yīng)于上述被攝體的亮度變化而發(fā)生與上述圖像傳感器中包含的曝光行(exposure line)對(duì)應(yīng)的亮線(xiàn);攝像步驟,通過(guò)上述圖像傳感器將亮度變化的上述被攝體在設(shè)定的上述曝光時(shí)間中攝像,取得包含上述亮線(xiàn)的圖像;信息取得步驟,通過(guò)將由在所取得的上述圖像中包含的上述亮線(xiàn)的樣式確定的數(shù)據(jù)解調(diào),取得信息。
[0360]由此,通過(guò)圖像傳感器的曝光行的曝光,取得由被攝體的亮度變化發(fā)送的信息,所以不需要例如用來(lái)進(jìn)行無(wú)線(xiàn)通信的特別的通信儀器,而能夠進(jìn)行多種多樣的設(shè)備間的通信。另外,曝光行是圖像傳感器中包含的、由同時(shí)曝光的多個(gè)像素構(gòu)成的列或行。此外,亮線(xiàn)例如是在由后述的圖79等表示的攝像圖像中包含的線(xiàn)。
[0361]例如,在上述攝像步驟中,將在上述圖像傳感器中包含的多個(gè)曝光行分別以相互不同的定時(shí)依次曝光。
[0362]由此,通過(guò)進(jìn)行卷簾快門(mén)方式的攝像發(fā)生的亮線(xiàn)包含在圖像內(nèi)的與各曝光行對(duì)應(yīng)的位置,所以能夠從被攝體取得許多信息。
[0363]這里,也可以是,在上述信息取得步驟中,將由上述亮線(xiàn)的樣式中的、與上述曝光行垂直的方向的樣式確定的上述數(shù)據(jù)解調(diào)。
[0364]由此,能夠適當(dāng)?shù)厝〉门c亮度變化對(duì)應(yīng)的信息。
[0365]此外,也可以是,在上述曝光時(shí)間設(shè)定步驟中,將上述曝光時(shí)間設(shè)定得比10毫秒短。
[0366]由此,能夠使圖像中更可靠地產(chǎn)生亮線(xiàn)。
[0367]這里,也可以是,在上述攝像步驟中,將以200Hz以上的頻率亮度變化的上述被攝體攝像。
[0368]由此,例如如后述的圖305A及圖305B所示,能夠人不感到閃變而從被攝體取得許
多信息。
[0369]此外,在上述攝像步驟中,取得包含與上述曝光行平行的亮線(xiàn)的上述圖像。
[0370]由此,能夠適當(dāng)?shù)厝〉门c亮度變化對(duì)應(yīng)的信息。
[0371]這里,也可以是,在上述信息取得步驟中,按照所取得的上述圖像內(nèi)的、與上述圖像傳感器中包含的各曝光行對(duì)應(yīng)的區(qū)域,將由根據(jù)在該區(qū)域中是否有亮線(xiàn)而確定的表示0或I的上述數(shù)據(jù)解調(diào)。
[0372]由此,能夠從被攝體取得PPM調(diào)制的許多信息。例如如后述的圖79所示,當(dāng)每I秒的圖像的數(shù)(幀速率)為f,構(gòu)成I圖像的曝光行數(shù)為I時(shí),如果根據(jù)各曝光行是否受光一定以上的光取得信息,則最大能夠以fl位每秒的速度取得信息。
[0373]此外,也可以是,在上述信息取得步驟中,按照上述區(qū)域,根據(jù)該區(qū)域的亮度值是否是閾值以上,確定在該區(qū)域中是否有亮線(xiàn)。
[0374]由此,能夠從被攝體適當(dāng)?shù)厝〉眯畔?。[0375]這里,也可以是,在上述攝像步驟中,按照規(guī)定的期間,將以與該規(guī)定的期間對(duì)應(yīng)的一定的頻率亮度變化的上述被攝體攝像;在上述信息取得步驟中,按照上述規(guī)定的期間,將由根據(jù)與該規(guī)定的期間對(duì)應(yīng)的一定的頻率的亮度變化生成的上述亮線(xiàn)的樣式確定的上述數(shù)據(jù)解調(diào)。
[0376]由此,能夠從被攝體取得FM調(diào)制的許多信息。例如如后述的圖188所示,能夠通過(guò)與頻率fl對(duì)應(yīng)的亮線(xiàn)的樣式、和與頻率f2對(duì)應(yīng)的亮線(xiàn)的樣式取得適當(dāng)?shù)男畔ⅰ?br>
[0377]此外,也可以是,在上述攝像步驟中,以通過(guò)調(diào)整亮度的上升及下降中的一方的變化與下次上述一方的變化之間的時(shí)間來(lái)發(fā)送信號(hào)的方式將亮度變化的上述被攝體攝像;在上述信息取得步驟中,將由上述亮線(xiàn)的樣式確定的、作為與上述時(shí)間建立了對(duì)應(yīng)的代碼的上述數(shù)據(jù)解調(diào)。
[0378]由此,例如如后述的圖248所示,能夠不改變從被攝體發(fā)送的信息的內(nèi)容,而通過(guò)PWM控制調(diào)整人感到的被攝體(例如照明設(shè)備)的明亮程度。
[0379]這里,也可以是,在上述攝像步驟中,將以對(duì)于上述亮度變化以5毫秒以上的幅度移動(dòng)平均時(shí)的各亮度值包含在預(yù)先設(shè)定的范圍中的方式亮度變化的上述被攝體攝像。
[0380]由此,能夠使得人不感到閃變而從被攝體取得許多信息。例如如后述的圖85所示,當(dāng)調(diào)制后的信號(hào)為0時(shí)不發(fā)光、為I時(shí)發(fā)光,如果在發(fā)送信號(hào)中沒(méi)有偏倚,則能夠使移動(dòng)平均時(shí)的各亮度值成為發(fā)光時(shí)的亮度值的約75%。結(jié)果,能夠防止人感到閃變。
[0381]此外,也可以是,上述亮線(xiàn)的樣式根據(jù)上述圖像傳感器的曝光時(shí)間而不同;在上述信息取得步驟中,將通過(guò)與設(shè)定的上述曝光時(shí)間對(duì)應(yīng)的上述樣式確定的上述數(shù)據(jù)解調(diào)。
[0382]由此,例如如后述的圖91所示,能夠根據(jù)曝光時(shí)間而從被攝體取得不同的信息。
[0383]這里,也可以是,上述信息通信方法還檢測(cè)具備上述圖像傳感器的攝像裝置的狀態(tài);在上述信息取得步驟中,取得表示上述被攝體的位置的上述信息,還基于所取得的上述信息和檢測(cè)出的上述狀態(tài),計(jì)算上述攝像裝置的位置。
[0384]由此,例如如后述的圖185所示,即使不能使用GPS等、或者與使用GPS等的情況相比,能夠更正確地確定攝像裝置的位置。
[0385]此外,也可以是,在上述攝像步驟中,將包括沿著上述曝光行而排列的多個(gè)區(qū)域、按照區(qū)域而亮度變化的上述被攝體攝像。
[0386]由此,例如如后述的圖258所示,能夠從被攝體取得許多信息。
[0387]這里,也可以是,在上述攝像步驟中,將以相互不同的定時(shí)發(fā)出同色異譜(metameric)的多種光的上述被攝體攝像。
[0388]由此,例如如后述的圖272所示,能夠使得人不感到閃變而從被攝體取得許多信
肩、O
[0389]此外,也可以是,上述信息通信方法還推測(cè)具備上述圖像傳感器的攝像裝置存在的場(chǎng)所;在上述信息取得步驟中,取得上述被攝體的識(shí)別信息作為上述信息,并且從服務(wù)器取得與上述場(chǎng)所及上述識(shí)別信息建立了關(guān)聯(lián)的關(guān)聯(lián)信息。
[0390]由此,例如后述的圖282及圖283所示,即使是從多個(gè)照明設(shè)備通過(guò)亮度變化發(fā)送相同的識(shí)別信息那樣的情況,也能夠根據(jù)攝像裝置存在的場(chǎng)所(建筑物)、即照明設(shè)備存在的場(chǎng)所(建筑物)取得適當(dāng)?shù)年P(guān)聯(lián)信息。
[0391]這里,有關(guān)本發(fā)明的一技術(shù)方案的信息通信方法,是通過(guò)亮度變化發(fā)送信號(hào)的信息通信方法,包括:決定步驟,通過(guò)將發(fā)送對(duì)象的信號(hào)調(diào)制,決定亮度變化的樣式;第I發(fā)送步驟,通過(guò)發(fā)光體按照所決定的上述樣式而亮度變化,將上述發(fā)送對(duì)象的信號(hào)發(fā)送;第2發(fā)送步驟,通過(guò)上述發(fā)光體在將上述發(fā)送對(duì)象的信號(hào)發(fā)送后33毫秒以?xún)?nèi)、按照與所決定的上述樣式相同的樣式而亮度變化,將與上述發(fā)送對(duì)象的信號(hào)相同的信號(hào)發(fā)送;在上述決定步驟中,決定上述樣式,以使對(duì)于上述亮度變化以5毫秒以上的幅度移動(dòng)平均時(shí)的各亮度值包含在預(yù)先設(shè)定的范圍中。
[0392]由此,決定亮度變化的樣式,以使得對(duì)于亮度變化以5毫秒以上的幅度移動(dòng)平均時(shí)的各亮度值包含在預(yù)先設(shè)定的范圍中,所以能夠防止人感到閃變并通過(guò)亮度變化發(fā)送信號(hào)。進(jìn)而,例如如后述的圖301B所示,由于在33毫秒以?xún)?nèi)發(fā)送相同的信號(hào),所以即使在接收信號(hào)的接收機(jī)中有空白(blanking),也能夠可靠地將信號(hào)向該接收機(jī)發(fā)送。
[0393]此外,也可以是,在上述決定步驟中,按照將由2位表示的信號(hào)分別調(diào)制為通過(guò)由表不相同的值的3位和表不其他值的I位構(gòu)成的4位表不的信號(hào)的方式,將上述發(fā)送對(duì)象的信號(hào)調(diào)制。
[0394]由此,例如如后述的圖85所示,當(dāng)調(diào)制后的信號(hào)為0時(shí)不發(fā)光,當(dāng)為I時(shí)發(fā)光,如果在發(fā)送信號(hào)中沒(méi)有偏倚,則能夠使移動(dòng)平均時(shí)的各亮度值成為發(fā)光時(shí)的亮度值的約75%。結(jié)果,能夠更可靠地防止人感到閃變。
[0395]這里,也可以是,在上述決定步驟中,通過(guò)將亮度的上升及下降中的一方的變化與下次上述一方的變化之間的時(shí)間根據(jù)上述發(fā)送對(duì)象的信號(hào)調(diào)整,決定上述亮度變化的樣式。
[0396]由此,例如如后述的圖248所示,能夠不改變發(fā)送對(duì)象的信號(hào)的內(nèi)容,而通過(guò)PWM控制調(diào)整人感到的發(fā)光體(例如照明設(shè)備)的明亮程度。
[0397]此外,也可以是,在上述第I發(fā)送步驟及上述第2發(fā)送步驟中,進(jìn)行亮度變化,以使得根據(jù)將亮度變化的上述發(fā)光體攝像的圖像傳感器的曝光時(shí)間,由具備上述圖像傳感器的攝像裝置取得不同的信號(hào)。
[0398]由此,例如如后述的圖91所示,能夠?qū)⒏鶕?jù)曝光時(shí)間而不同的信號(hào)向攝像裝置發(fā)送。
[0399]這里,也可以是,在上述第I發(fā)送步驟及上述第2發(fā)送步驟中,通過(guò)多個(gè)發(fā)光體同步地亮度變化,上述多個(gè)發(fā)光體發(fā)送共通的信息;在發(fā)送了上述共通的信息后,通過(guò)按照發(fā)光體而亮度變化,按照該發(fā)光體而發(fā)送不同的信息。
[0400]由此,例如如后述的圖98所示,通過(guò)多個(gè)發(fā)光體將共通的信息同時(shí)發(fā)送,能夠?qū)⒍鄠€(gè)發(fā)光體看作一個(gè)較大的發(fā)光體,能夠用接收該共通的信息的攝像裝置將發(fā)光體較大地?cái)z像,所以能夠?qū)⑿畔⒏臁母h(yuǎn)發(fā)送。進(jìn)而,例如如后述的圖186所示,通過(guò)多個(gè)發(fā)光體發(fā)送共通的信息,能夠按照發(fā)光體抑制發(fā)送的個(gè)別的信息的信息量。
[0401]此外,也可以是,上述信息通信方法還包括受理是否進(jìn)行上述發(fā)送對(duì)象的信號(hào)的調(diào)制的指示的指示受理步驟;在受理了表示進(jìn)行上述調(diào)制的指示的情況下,執(zhí)行上述決定步驟、上述第I發(fā)送步驟及上述第2發(fā)送步驟;在受理了表示不進(jìn)行上述調(diào)制的指示的情況下,不執(zhí)行上述決定步驟、上述第I發(fā)送步驟及上述第2發(fā)送步驟,上述發(fā)光體點(diǎn)燈或滅燈。
[0402]由此,例如如后述的圖186所示那樣切換是否進(jìn)行調(diào)制,所以能夠一致對(duì)于其他發(fā)光體的亮度變化作為噪聲帶來(lái)的影響。[0403]這里,也可以是,上述發(fā)光體包括沿著將該發(fā)光體攝像的圖像傳感器的曝光行而排列的多個(gè)區(qū)域;在上述第I發(fā)送步驟及上述第2發(fā)送步驟中,按照上述發(fā)光體的區(qū)域而亮
度變化。
[0404]由此,例如如后述的圖258所示,能夠發(fā)送許多信息。
[0405]此外,也可以是,在上述第I發(fā)送步驟及上述第2發(fā)送步驟中,上述發(fā)光體通過(guò)將同色異譜的多種光以相互不同的定時(shí)發(fā)出而亮度變化。
[0406]由此,例如如后述的圖272所示,能夠使人不感到閃變而發(fā)送許多信息。
[0407]這里,也可以是,在上述第I發(fā)送步驟及上述第2發(fā)送步驟中,作為上述發(fā)送對(duì)象的信號(hào)或上述相同的信號(hào)而發(fā)送上述發(fā)光體的識(shí)別信息。
[0408]由此,例如后述的圖282所示那樣發(fā)送發(fā)光體的識(shí)別信息,所以接收到該識(shí)別信息的攝像裝置能夠經(jīng)由因特網(wǎng)等的通信線(xiàn)路從服務(wù)器等取得與該識(shí)別信息建立了關(guān)聯(lián)的更多的信息。
[0409]此外,有關(guān)本發(fā)明的一技術(shù)方案的信息通信方法,是通過(guò)亮度變化而發(fā)送信號(hào)的信息通信方法,包括:決定步驟,通過(guò)將發(fā)送對(duì)象的信號(hào)調(diào)制,決定多個(gè)頻率;發(fā)送步驟,通過(guò)發(fā)光體按照所決定的上述多個(gè)頻率中的某個(gè)一定的頻率而亮度變化,來(lái)發(fā)送信號(hào);變更步驟,將在上述亮度變化中使用的頻率以33毫秒以上的周期依次變更為所決定的多個(gè)頻率中的其他頻率;在上述發(fā)送步驟中,上述發(fā)光體亮度變化,以使得對(duì)于上述亮度變化以5毫秒以上的幅度移動(dòng)平均時(shí)的各亮度值包含在預(yù)先設(shè)定的范圍中。
[0410]由此,決定亮度變化的樣式,以使得對(duì)于亮度變化以5毫秒以上的幅度移動(dòng)平均時(shí)的各亮度值包含在預(yù)先設(shè)定的范圍中,所以能夠防止人感到閃變并通過(guò)亮度變化發(fā)送信號(hào)。進(jìn)而,能夠?qū)M調(diào)制的許多信號(hào)發(fā)送。例如如后述的圖188所示,通過(guò)將亮度變化的頻率(fl、f2等)以33毫秒以上的周期變更,能夠發(fā)送適當(dāng)?shù)男畔ⅰ?br>
[0411]另外,這些全局性或具體的技術(shù)方案既可以通過(guò)系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或計(jì)算機(jī)可讀取的CD-ROM等的記錄媒體實(shí)現(xiàn),也可以通過(guò)系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序及記錄媒體的任意的組合實(shí)現(xiàn)。
[0412]以下,參照附圖對(duì)實(shí)施方式具體地說(shuō)明。
[0413]另外,以下說(shuō)明的實(shí)施方式都是表示全局或具體的例子的。在以下的實(shí)施方式中表示的數(shù)值、形狀、材料、構(gòu)成要素、構(gòu)成要素的配置位置及連接形態(tài)、步驟、步驟的順序等是一例,并不是限定本發(fā)明的意思。此外,關(guān)于以下的實(shí)施方式的構(gòu)成要素中的、在表示最上位概念的獨(dú)立權(quán)利要求中沒(méi)有記載的構(gòu)成要素,設(shè)為任意的構(gòu)成要素進(jìn)行說(shuō)明。
[0414](實(shí)施方式I)
[0415]以下,對(duì)通過(guò)作為設(shè)備具備的LED的閃爍樣式發(fā)送信息、使用智能電話(huà)的照相機(jī)通信的處理的流程進(jìn)行敘述。
[0416]圖1是表示本實(shí)施方式的宅內(nèi)的環(huán)境的例子的圖。在圖1所示的環(huán)境中,對(duì)于電視機(jī)1101及電灶1106、空氣凈化機(jī)1107,智能電話(huà)1105等也處于用戶(hù)的周邊。
[0417]圖2是表示本實(shí)施方式的家電設(shè)備與智能電話(huà)的通信的例子的圖。圖2是信息通信的例子,是表示通過(guò)由用戶(hù)持有的智能電話(huà)1201取得圖1的電視機(jī)1101或電灶1106那樣的各設(shè)備輸出的信息來(lái)得到信息的結(jié)構(gòu)的圖。如圖2所示,各設(shè)備使用LED的閃爍樣式發(fā)送信息,智能電話(huà)1201使用照相機(jī)等的攝像功能接受信息。[0418]圖3是表示本實(shí)施方式的發(fā)送側(cè)裝置1301的結(jié)構(gòu)的一例的圖。
[0419]該發(fā)送側(cè)裝置1301通過(guò)用戶(hù)按下按鈕、或由NFC(Near Field Communication)等送出發(fā)送指示、或檢測(cè)到裝置內(nèi)部的故障等的狀態(tài)的變化,將信息作為光的閃爍樣式發(fā)送。此時(shí)將發(fā)送重復(fù)一定時(shí)間。發(fā)送的信息如果是預(yù)先登記的設(shè)備間,也可以使用縮短ID。此夕卜,在具有無(wú)線(xiàn)LAN或特定節(jié)電無(wú)線(xiàn)等無(wú)線(xiàn)通信部的情況下,也可以將其連接所需要的認(rèn)證信息作為閃爍樣式發(fā)送。
[0420]此外,發(fā)送速度判斷部1309通過(guò)掌握設(shè)備內(nèi)部的時(shí)鐘發(fā)生裝置的性能,可以進(jìn)行在時(shí)鐘發(fā)生裝置因較便宜而精度較差的情況下使發(fā)送速度變慢、在較高的情況下使發(fā)送速度變快的處理。在時(shí)鐘發(fā)生裝置的性能較差的情況下,或者也可以通過(guò)將發(fā)送的信息自身劃分為較短,來(lái)減少因長(zhǎng)時(shí)間通信下的閃爍間隔的偏差的累積造成的錯(cuò)誤。
[0421]圖4是表示本實(shí)施方式的接收側(cè)裝置1401的結(jié)構(gòu)的一例的圖。
[0422]該接收側(cè)裝置1401根據(jù)圖像取得部1404取得的幀圖像判斷能看到光的閃爍的區(qū)域。此時(shí)閃爍也可以取能夠采取追隨可觀(guān)測(cè)到一定以上的亮度的高低的區(qū)域那樣的方法。
[0423]閃爍信息取得部1406根據(jù)閃爍的樣式取得發(fā)送的信息,在其中包含有設(shè)備ID等的設(shè)備關(guān)聯(lián)的情況下,使用該信息向云上的關(guān)聯(lián)服務(wù)器查詢(xún)附帶的信息,或者使用事前保管的無(wú)線(xiàn)通信區(qū)域內(nèi)的設(shè)備或保管在接收側(cè)裝置內(nèi)部中的信息進(jìn)行插補(bǔ)。由此,能夠得到削減為了取得因?qū)⒐獾陌l(fā)光樣式攝像時(shí)的噪聲帶來(lái)的錯(cuò)誤修正或已經(jīng)獲得的信息而用戶(hù)將智能電話(huà)罩在發(fā)送側(cè)裝置的發(fā)光部上的時(shí)間等的效果。
[0424]以下,說(shuō)明圖5。
[0425]圖5是表示通過(guò)本實(shí)施方式的發(fā)送側(cè)裝置的LED的閃爍向智能電話(huà)等的接收側(cè)裝置發(fā)送信息的處理的流程的圖。這里,設(shè)想具有通過(guò)NFC與智能電話(huà)通信的功能的發(fā)送側(cè)裝置、和植入在該發(fā)送側(cè)裝置具有的否FC用的通信標(biāo)記的一部分中的LED的發(fā)光樣式發(fā)送信息的狀況。
[0426]首先,在步驟IOOla中,用戶(hù)購(gòu)買(mǎi)家電設(shè)備,初次向插座插入電源,成為通電狀態(tài)。
[0427]接著,在步驟IOOlb中,確認(rèn)初始設(shè)定信息是否是已寫(xiě)入。在是的情況下向圖中的圈3前進(jìn)。另一方面,在否的情況下向步驟IOOlc前進(jìn),標(biāo)記以用戶(hù)容易理解的閃爍速度(例如:1?2 / 5)閃爍。
[0428]接著,在步驟IOOld中,確認(rèn)是否用戶(hù)通過(guò)以NFC通信將智能電話(huà)接觸在標(biāo)記上而取得家電的設(shè)備信息。這里,在是的情況下,向步驟IOOle前進(jìn),智能電話(huà)接收設(shè)備信息,向云的服務(wù)器登記。接著,在步驟IOOlf中,從云接收與智能電話(huà)的用戶(hù)的賬戶(hù)建立了關(guān)聯(lián)的縮短ID,向家電發(fā)送,向步驟IOOlg前進(jìn)。另外,在步驟IOOld中為否的情況下向步驟IOOlg
、產(chǎn).、rr.目U進(jìn)。
[0429]接著,在步驟IOOlg中,確認(rèn)是否有NFC下的登記。在是的情況下向步驟IOOlj前進(jìn),在藍(lán)色的閃爍2次后,在步驟IOOlk中閃爍結(jié)束。
[0430]另一方面,在步驟IOOlg中為否的情況下向步驟IOOlh前進(jìn)。接著,在步驟IOOlh中,確認(rèn)是否過(guò)了 30秒。這里,在是的情況下向步驟IOOli前進(jìn),LED部分通過(guò)光的閃爍將設(shè)備信息(設(shè)備的型號(hào)、NFC下的登記處理有無(wú)、設(shè)備的固有ID)輸出,向圖6的圈2前進(jìn)。
[0431]另外,在步驟IOOlh中為否的情況下向步驟IOOld返回。
[0432]接著,使用圖6?圖9,說(shuō)明本實(shí)施方式的發(fā)送側(cè)裝置的通過(guò)LED的閃爍向接收側(cè)裝置發(fā)送信息的處理的流程。這里,圖6?圖9是表示通過(guò)發(fā)送側(cè)裝置的LED的閃爍向接收側(cè)裝置發(fā)送信息的處理的流程的圖。
[0433]以下,說(shuō)明圖6。
[0434]首先,在步驟1002a中,用戶(hù)起動(dòng)取得智能電話(huà)的光閃爍信息的應(yīng)用。
[0435]接著,在步驟1002b中,圖像取得部分取得光的閃爍。并且,閃爍區(qū)域判斷部根據(jù)圖像的時(shí)間序列上的變化判斷閃爍的區(qū)域。
[0436]接著,在步驟1002c中,閃爍信息取得部判斷閃爍區(qū)域的閃爍樣式,等待前同步碼檢測(cè)。
[0437]接著,在步驟1002d中,在能夠檢測(cè)到前同步碼的情況下,取得該閃爍區(qū)域的信
肩、O
[0438]接著,在步驟1002e中,在能夠取得設(shè)備ID的信息的情況下,在接收繼續(xù)狀態(tài)下,也向云側(cè)的服務(wù)器發(fā)送信息,信息插補(bǔ)部一邊將從云側(cè)獲得的信息與閃爍信息取得部的信息比較一邊插補(bǔ)。
[0439]接著,在步驟1002f中,如果也包括插補(bǔ)的信息、全部的信息齊備,則向智能電話(huà)或用戶(hù)通知。此時(shí),通過(guò)將從云獲得的關(guān)聯(lián)站點(diǎn)或GUI顯示,能夠進(jìn)行豐富而容易理解的通知,向圖7的圈4前進(jìn)。
[0440]以下,說(shuō)明圖7。
[0441]首先,在步驟1003a中,在家電故障、或生成了向用戶(hù)通知的使用次數(shù)、室溫等的消息的情況下,開(kāi)始信息發(fā)送模式。
[0442]接著,在步驟1003b中,使標(biāo)記以I?2 / s閃爍。同時(shí),LED也開(kāi)始信息發(fā)信。
[0443]接著,在步驟1003c中,確認(rèn)是否開(kāi)始了 NFC下的通信。另外,在否的情況下向圖9的圈7前進(jìn)。在是的情況下向步驟1003d前進(jìn),停止LED的閃爍。
[0444]接著,在步驟1003e中,智能電話(huà)向云的服務(wù)器訪(fǎng)問(wèn),將關(guān)聯(lián)信息顯示。
[0445]接著,在步驟1003f中,在需要現(xiàn)場(chǎng)應(yīng)對(duì)的故障的情況下,在服務(wù)器側(cè)檢索支援的服務(wù)人員。利用家電、設(shè)置場(chǎng)所、位置信息。
[0446]接著,在步驟1003g中,服務(wù)人員通過(guò)以預(yù)先決定的順序按下家電的按鈕而成為支援模式。
[0447]接著,在步驟1003h中,在從智能電話(huà)看到由標(biāo)記以外的家電的LED進(jìn)行標(biāo)記的閃爍的情況下,同時(shí)可見(jiàn)的LED的一部分或全部以將信息插補(bǔ)的方式爍,向圖8的圈5前進(jìn)。
[0448]以下,說(shuō)明圖8。
[0449]首先,在步驟1004a中,服務(wù)人員在持有的接收終端的性能能夠檢測(cè)高速(例如:1000 / s次)的閃爍的情況下,按下其設(shè)定按鈕。
[0450]接著,在步驟1004b中,家電的LED進(jìn)行高速模式閃爍,向圈6前進(jìn)。
[0451]以下,說(shuō)明圖9。
[0452]首先,在步驟1005a中繼續(xù)閃爍。
[0453]接著,在步驟1005b中,用戶(hù)用智能電話(huà)來(lái)獲取LED的閃爍信息。
[0454]接著,在步驟1005c中,用戶(hù)將智能電話(huà)的取得光閃爍信息的應(yīng)用起動(dòng)。
[0455]接著,在步驟1005d中,圖像取得部分取得光的閃爍。并且,閃爍區(qū)域判斷部根據(jù)圖像的時(shí)間序列上的變化判斷閃爍的區(qū)域。[0456]接著,在步驟1005e中,閃爍信息取得部判斷閃爍區(qū)域的閃爍樣式,等待前同步碼檢測(cè)。
[0457]接著,在步驟1005f中,在能夠檢測(cè)到前同步碼的情況下,取得該閃爍區(qū)域的信
肩、O
[0458]接著,在步驟1005g中,在能夠取得設(shè)備ID的信息的情況下,在接收繼續(xù)狀態(tài)下,也向云側(cè)的服務(wù)器發(fā)送信息,信息插補(bǔ)部一邊將從云側(cè)獲得的信息與閃爍信息取得部的信息比較一邊插補(bǔ)。
[0459]接著,在步驟1005h中,如果也包括插補(bǔ)的信息、全部的信息齊備,則向智能電話(huà)或用戶(hù)通知。此時(shí),通過(guò)將從云獲得的關(guān)聯(lián)站點(diǎn)或GUI顯示,能夠進(jìn)行豐富而容易理解的通知。
[0460]并且,向圖7的步驟1003f前進(jìn)。
[0461]這樣,家電設(shè)備等的發(fā)送裝置能夠通過(guò)LED的閃爍向智能電話(huà)發(fā)送信息。即使是沒(méi)有無(wú)線(xiàn)功能或NFC等的通信機(jī)構(gòu)那樣的設(shè)備也能夠發(fā)信信息,還能夠經(jīng)由智能電話(huà)向處于云上的服務(wù)器的豐富的信息向用戶(hù)提供。
[0462]此外,如本實(shí)施方式那樣,在至少包括一個(gè)可拿持的設(shè)備的兩個(gè)設(shè)備間具有通過(guò)雙向通信(例如NFC通信)和單向通信(例如通過(guò)LED的亮度變化進(jìn)行的通信)的兩個(gè)通信方法進(jìn)行數(shù)據(jù)的收發(fā)的功能的情況下,當(dāng)從一方的設(shè)備向另一方的設(shè)備以單向通信進(jìn)行數(shù)據(jù)的發(fā)送時(shí),在以雙向通信實(shí)現(xiàn)了數(shù)據(jù)收發(fā)的情況下,能夠停止單向的通信。由此,能夠省去單向通信所需要的耗電的浪費(fèi),所以是有效率的。
[0463]以上,根據(jù)實(shí)施方式1,能夠?qū)崿F(xiàn)能夠進(jìn)行包括運(yùn)算力較弱那樣的設(shè)備的多種多樣的設(shè)備間的通信的信息通信裝置。
[0464]具體而言,本實(shí)施方式的信息通信裝置具有管理包括自己的唯一的ID和設(shè)備的狀態(tài)信息的設(shè)備信息的信息管理部、發(fā)光元件、和作為上述發(fā)光元件的閃爍樣式而發(fā)送信息的光發(fā)送部,上述光發(fā)送部在上述設(shè)備的內(nèi)部的狀態(tài)中有變化的情況下,將上述設(shè)備信息變換為光的閃爍樣式而發(fā)送。
[0465]這里,例如也可以是,還具備保存自己的起動(dòng)狀態(tài)及用戶(hù)的使用履歷等的設(shè)備內(nèi)部的傳感到的信息的起動(dòng)履歷管理部,上述光發(fā)送部取得利用的時(shí)鐘發(fā)生裝置的預(yù)先登記的性能信息,變更發(fā)送速度。
[0466]此外,例如也可以是,上述光發(fā)送部在用來(lái)通過(guò)光的閃爍發(fā)送信息的第一發(fā)光元件的周?chē)渲糜械诙l(fā)光元件,上述第二發(fā)光元件在將通過(guò)上述第一發(fā)光元件的閃爍進(jìn)行的信息發(fā)信重復(fù)一定次數(shù)的情況下,在信息發(fā)信的結(jié)束和開(kāi)始之間發(fā)光。
[0467]另外,這些全局的或具體的技術(shù)方案也可以由系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或記錄媒體實(shí)現(xiàn),也可以通過(guò)系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或記錄媒體的任意的組合實(shí)現(xiàn)。
[0468](實(shí)施方式2)
[0469]在本實(shí)施方式中,以清掃機(jī)為例,對(duì)使用可視光通信的設(shè)備與用戶(hù)的通信次序、以及對(duì)從使用可視光通信的初始設(shè)定到故障時(shí)的修理對(duì)應(yīng)服務(wù)、使用清掃機(jī)的服務(wù)協(xié)同進(jìn)行說(shuō)明。
[0470]圖10和圖11是用來(lái)說(shuō)明本實(shí)施方式的使用可視光進(jìn)行用戶(hù)與設(shè)備的通信的次序的圖。
[0471]以下,對(duì)圖10進(jìn)行說(shuō)明。
[0472]首先,在圈I中開(kāi)始。
[0473]接著,在步驟2001a中,用戶(hù)將電源投入。
[0474]接著,在步驟2001b中,作為起動(dòng)處理,確認(rèn)是否進(jìn)行了設(shè)置設(shè)定、NW設(shè)定等的初始設(shè)定。
[0475]這里,在進(jìn)行了初始設(shè)定的情況下,向步驟200If前進(jìn),開(kāi)始通常動(dòng)作,如圈3所示那樣結(jié)束。
[0476]另一方面,在沒(méi)有進(jìn)行初始設(shè)定的情況下,向步驟2001c前進(jìn),通過(guò)“LED通常發(fā)光”、“蜂鳴音”向用戶(hù)通知需要初始設(shè)定。
[0477]接著,在步驟200Id中,收集設(shè)備信息(制品號(hào)碼和制造號(hào)碼),進(jìn)行可視光通信的準(zhǔn)備。
[0478]接著,在步驟2001e中,將設(shè)備信息(制品號(hào)碼和制造號(hào)碼)和能夠進(jìn)行可視光通信的情況通過(guò)“LED通信發(fā)光”、“向顯示器的圖標(biāo)顯示”、“蜂鳴音”、“將多個(gè)LED發(fā)光”向用戶(hù)通知。
[0479]并且,如圈2所示那樣結(jié)束。
[0480]接著,對(duì)圖11進(jìn)行說(shuō)明。
[0481]首先,如圈2所示那樣開(kāi)始。
[0482]接著,在步驟2002a中,通過(guò)“接近傳感器”、“照度傳感器”及“人感傳感器”感知可視光接收終端的接近。
[0483]接著,在步驟2002b中,以感知到的情況為觸發(fā)事件,開(kāi)始可視光通信。
[0484]接著,在步驟2002c中,用戶(hù)用可視光接收終端取得設(shè)備信息。
[0485]接著,如圈4所示那樣結(jié)束?;蛘?,向步驟2002f?步驟2002i的某個(gè)前進(jìn)。
[0486]在前進(jìn)到步驟2002f的情況下,通過(guò)“感度傳感器”的感知、以及“與調(diào)光設(shè)備的協(xié)同”,感知到房間被滅燈的情況,停止設(shè)備信息的發(fā)光,如圈5所示那樣結(jié)束。此外,在前進(jìn)到步驟2002g的情況下,可視光接收終端取得設(shè)備信息,將感知到的情況通過(guò)“NFC通信”及“NW通信”通知并結(jié)束。在前進(jìn)到步驟2002h的情況下,感知可視光接收終端的脫離,將設(shè)備信息停止并結(jié)束。在前進(jìn)到步驟2002i的情況下,等待一定時(shí)間的經(jīng)過(guò),將設(shè)備信息的發(fā)光停止并結(jié)束。
[0487]另外,在步驟2002a中沒(méi)有感知到的情況下,向步驟2002d前進(jìn),等待一定時(shí)間的經(jīng)過(guò),將能夠進(jìn)行可視光通信的通知通過(guò)“變亮”、“使聲音變大”、“移動(dòng)圖標(biāo)”等強(qiáng)化并通知。這里,向步驟2002d返回?;蛘?,向步驟2002e前進(jìn),進(jìn)而在一定時(shí)間經(jīng)過(guò)后,向步驟2002i前進(jìn)。
[0488]圖12是用來(lái)說(shuō)明本實(shí)施方式的用戶(hù)購(gòu)買(mǎi)設(shè)備、進(jìn)行設(shè)備的初始設(shè)定為止的次序的圖。
[0489]在圖12中,首先如圈4所示那樣開(kāi)始。
[0490]接著,在步驟2003a中,用GPS (Global Positioning System)取得接收到設(shè)備信息的智能電話(huà)的位置信息。
[0491]接著,在步驟2003b中,如果在智能電話(huà)中有用戶(hù)信息,則在終端內(nèi)收集用戶(hù)名、電話(huà)號(hào)碼、郵件地址等的用戶(hù)信息?;蛘?,在步驟2003c中,如果在智能電話(huà)中沒(méi)有用戶(hù)信息,則通過(guò)NW從周邊設(shè)備收集用戶(hù)信息。
[0492]接著,在步驟2003d中,將設(shè)備信息、用戶(hù)信息和位置信息向云服務(wù)器發(fā)送。
[0493]接著,在步驟2003e中,使用設(shè)備信息和位置信息收集初始設(shè)定所需要的信息和激活信息。
[0494]接著,在步驟2003f中,收集為了與用戶(hù)已登記的設(shè)備的協(xié)同在設(shè)定中需要的IP、認(rèn)證方式及可利用服務(wù)等相關(guān)信息?;蛘?,在步驟2003g中,通過(guò)對(duì)用戶(hù)已登記的設(shè)備通過(guò)NW發(fā)送設(shè)備信息和設(shè)定信息,進(jìn)行與周邊設(shè)備的協(xié)同設(shè)定。
[0495]接著,在步驟2003h中,使用設(shè)備信息和用戶(hù)信息進(jìn)行用戶(hù)設(shè)定。
[0496]接著,在步驟2003i中,將初始設(shè)定信息、活動(dòng)信息和協(xié)同設(shè)定信息向智能電話(huà)發(fā)送。
[0497]接著,在步驟2003 j中,將初始設(shè)定信息、激活信息和協(xié)同設(shè)定信息用NFC向家電發(fā)送。
[0498]接著,在步驟2003k中,通過(guò)初始設(shè)定信息、激活信息和協(xié)同設(shè)定信息進(jìn)行設(shè)備的設(shè)定。
[0499]并且,如圈6所示那樣結(jié)束。
[0500]圖13是用來(lái)對(duì)本實(shí)施方式的設(shè)備故障的情況下的、服務(wù)人員專(zhuān)用的服務(wù)進(jìn)行說(shuō)明的圖。
[0501]在圖13中,首先如圈3所示那樣開(kāi)始。
[0502]接著,在步驟2004a中,將在設(shè)備的通常動(dòng)作中發(fā)生的動(dòng)作日志、用戶(hù)操作日志等的履歷信息向本地存儲(chǔ)媒體記錄。
[0503]接著,在步驟2004b中,在故障發(fā)生的同時(shí),將錯(cuò)誤代碼、錯(cuò)誤詳細(xì)情況等的錯(cuò)誤信息記錄,將能夠進(jìn)行可視光通信的情況用LED異常發(fā)光通知。
[0504]接著,在步驟2004c中,通過(guò)服務(wù)人員的特殊命令執(zhí)行而成為L(zhǎng)ED高速發(fā)光模式,開(kāi)始可視光的高速通信。
[0505]接著,在步驟2004d中,判別接近的終端是通常智能電話(huà)、還是服務(wù)人員的專(zhuān)用接收終端。這里,在前進(jìn)到了步驟2004e的情況下,在智能電話(huà)的情況下取得錯(cuò)誤信息并結(jié)束。
[0506]另一方面,在前進(jìn)到了步驟2004f的情況下,在服務(wù)人員的情況下,用專(zhuān)用接收終端取得錯(cuò)誤信息和履歷信息。
[0507]接著,在步驟2004g中,向云發(fā)送設(shè)備信息、錯(cuò)誤信息和履歷信息,取得修理方法。這里,在前進(jìn)到了步驟2004h的情況下,通過(guò)服務(wù)人員的特殊命令執(zhí)行將LED高速發(fā)光模式解除并結(jié)束。
[0508]另一方面,在前進(jìn)到了步驟2004i的情況下,從云服務(wù)器取得設(shè)備信息的關(guān)聯(lián)商品、類(lèi)似商品的商品信息、最近店鋪的銷(xiāo)售價(jià)格、新商品信息。
[0509]接著,在步驟2004j中,用用戶(hù)的智能電話(huà)和服務(wù)人員的專(zhuān)用終端通過(guò)可視光通信取得用戶(hù)信息,經(jīng)由云服務(wù)器向最近店鋪訂購(gòu)商品。
[0510]并且,如圈9所示那樣結(jié)束。
[0511]圖14是用來(lái)對(duì)本實(shí)施方式的和清掃機(jī)使用可視光通信的、用于確認(rèn)清掃狀況的服務(wù)進(jìn)行說(shuō)明的圖。
[0512]首先,如圈3所示那樣開(kāi)始。
[0513]接著,在步驟2005a中,記錄設(shè)備的通常動(dòng)作中的清掃信息。
[0514]接著,在步驟2005b中,房間布局信息組合而制作污垢信息,進(jìn)行加密壓縮。
[0515]這里,在前進(jìn)到步驟2005c的情況下,將污垢信息的壓縮作為觸發(fā)事件,將污垢信息向本地存儲(chǔ)媒體記錄?;蛘撸谇斑M(jìn)到了步驟2005d的情況下,將清掃的暫停(吸入處理停止)作為觸發(fā)事件將污垢信息通過(guò)可視光通信向照明器具發(fā)送?;蛘撸谇斑M(jìn)到了步驟2005e的情況下,將污垢信息的記錄作為觸發(fā)事件,將污垢信息用NW向家庭內(nèi)本地服務(wù)器及云服務(wù)器發(fā)送。
[0516]接著,在步驟2005f中,以污垢信息的發(fā)送及記錄為觸發(fā)事件,將設(shè)備信息、保存部位、解密密鑰通過(guò)可視光通信向智能電話(huà)發(fā)送。
[0517]接著,在步驟2005g中,通過(guò)NW及NFC取得污垢信息并解碼。
[0518]并且,如圈10所示那樣結(jié)束。
[0519]如以上這樣,根據(jù)實(shí)施方式1,能夠?qū)崿F(xiàn)包括能夠進(jìn)行包括運(yùn)算力較弱那樣的設(shè)備的多種多樣的設(shè)備間的通信的信息通信裝置的可視光通信系統(tǒng)。
[0520]具體而言,包括本實(shí)施方式的信息通信裝置的可視光通信系統(tǒng)(圖10)搭載有用來(lái)判斷可視光發(fā)送的準(zhǔn)備是否完成的可視光發(fā)送可否判斷部、和將是可視光發(fā)送中向用戶(hù)通知的可視光發(fā)送通知部,當(dāng)成為能夠進(jìn)行可視光通信的狀態(tài)時(shí)向用戶(hù)視覺(jué)及聽(tīng)覺(jué)地通知的可視光通信系統(tǒng)。由此,通過(guò)使LED的發(fā)光模式為“發(fā)光色”、“聲音”、“圖標(biāo)顯示”、“多LED發(fā)光”向用戶(hù)通知能夠進(jìn)行可視光接收的狀況,能夠提高用戶(hù)的方便性。
[0521]優(yōu)選的是,如在圖11中說(shuō)明那樣,也可以是一種可視光通信系統(tǒng),搭載有感知可視光接收終端的接近的終端接近感知部、和根據(jù)可視光接收終端的位置判斷可視光發(fā)送的開(kāi)始和停止的可視光發(fā)送判斷部,以由終端接近感知部感知到可視光接收終端的接近作為觸發(fā)事件開(kāi)始可視光發(fā)送。
[0522]這里,例如如在圖11中說(shuō)明那樣,也可以是以由終端接近感知部感知到可視光接收終端的脫離為觸發(fā)事件而將可視光發(fā)送停止的可視光通信系統(tǒng)。此外,例如如在圖11中說(shuō)明那樣,也可以是一種可視光通信系統(tǒng),搭載有感知房間的滅燈的周邊照度感知部,以由周邊照度感知部感知到房間的滅燈為觸發(fā)事件將可視光發(fā)送停止。由此,通過(guò)感知可視光接收終端的接近和脫離、以及房間的滅燈,通過(guò)僅在能夠可視光通信的狀況下開(kāi)始可視光通信,能夠省去不必要的可視光通信而實(shí)現(xiàn)節(jié)能化。
[0523]進(jìn)而,例如如在圖11中說(shuō)明那樣,也可以是一種可視光通信系統(tǒng),搭載有計(jì)測(cè)進(jìn)行可視光發(fā)送的時(shí)間的可視光通信時(shí)間監(jiān)視部、和將是可視光發(fā)送中的情況向用戶(hù)通知的可視光發(fā)送通知部,以可視光通信進(jìn)行了一定以上但沒(méi)有可視光接收終端的接近的情況為觸發(fā)事件,將向用戶(hù)的視覺(jué)及聽(tīng)覺(jué)的通知進(jìn)一步強(qiáng)化。此外,例如如在圖11中說(shuō)明那樣,也可以是一種以可視光發(fā)送通知部將通知強(qiáng)化后可視光發(fā)送時(shí)間進(jìn)行了一定以上但沒(méi)有可視光接收終端的接近的情況為觸發(fā)事件、將可視光發(fā)送停止的可視光通信系統(tǒng)。
[0524]由此,通過(guò)在雖然經(jīng)過(guò)了一定以上的可視光發(fā)送時(shí)間、但沒(méi)有進(jìn)行用戶(hù)的接收的情況下進(jìn)行向用戶(hù)的可視光接收的情況和停止,放置忘記接收或忘記取消,能夠提高用戶(hù)的方便性。[0525]此外,包括本實(shí)施方式的信息通信裝置的可視光通信系統(tǒng)(圖12)也可以是一種可視光通信系統(tǒng),搭載有判斷接收到可視光通信的可視光接收判斷部、用來(lái)取得終端位置的接收終端位置取得部、和取得設(shè)備信息和位置信息并收集設(shè)備設(shè)定信息的設(shè)備設(shè)定信息收集部,以接收到可視光為觸發(fā)事件而取得接收終端的位置,收集設(shè)備設(shè)定所需要的信息。由此,通過(guò)以由可視光通信取得設(shè)備信息為觸發(fā)事件、自動(dòng)收集設(shè)備設(shè)定及用戶(hù)登記所需要的位置信息和用戶(hù)信息并設(shè)定,省略由用戶(hù)進(jìn)行的輸入和登記步驟,能夠提高方便性。
[0526]這里,還如在圖14中說(shuō)明那樣,也可以是一種可視光通信系統(tǒng),搭載有管理設(shè)備信息的設(shè)備信息管理部、管理設(shè)備與設(shè)備的類(lèi)似性的設(shè)備關(guān)系管理部、管理銷(xiāo)售設(shè)備的店鋪信息的店鋪信息管理部、和根據(jù)位置信息檢索最近店鋪的最寄店鋪檢索部,以接收設(shè)備信息和位置信息為觸發(fā)事件,取得銷(xiāo)售類(lèi)似設(shè)備的最近店鋪及價(jià)格。由此,根據(jù)設(shè)備信息收集關(guān)聯(lián)的設(shè)備的銷(xiāo)售狀況及銷(xiāo)售店鋪,通過(guò)省去檢索設(shè)備的工夫,能夠提高用戶(hù)的方便性。
[0527]此外,包括本實(shí)施方式的信息通信裝置的可視光通信系統(tǒng)(圖12)也可以是一種可視光通信系統(tǒng),搭載有監(jiān)視用戶(hù)信息保存在終端內(nèi)的情況的用戶(hù)信息監(jiān)視部、通過(guò)NW從周邊設(shè)備收集用戶(hù)信息的用戶(hù)信息收集部、和取得用戶(hù)信息和設(shè)備信息并進(jìn)行用戶(hù)登記的用戶(hù)登記處理部,以沒(méi)有用戶(hù)信息為觸發(fā)事件,從可訪(fǎng)問(wèn)的周邊設(shè)備收集用戶(hù)信息,與設(shè)備信息一起進(jìn)行用戶(hù)登記。由此,通過(guò)以由可視光通信取得設(shè)備信息為觸發(fā)事件、自動(dòng)收集設(shè)備設(shè)定、及用戶(hù)登記所需要的位置信息和用戶(hù)信息并設(shè)定,省略由用戶(hù)進(jìn)行的輸入和登記步驟,能夠提高方便性。
[0528]此外,包括本實(shí)施方式的信息通信裝置的可視光通信系統(tǒng)(圖13)也可以是一種可視光通信系統(tǒng),搭載有受理特殊命令的命令判斷部、可視光通信的頻率、和操作多LED協(xié)同的可視光通信速度調(diào)整部,通過(guò)由受理特殊命令進(jìn)行可視光通信的頻率的調(diào)整和發(fā)送LED數(shù),使可視光通信高速化。這里,例如,如在圖14中說(shuō)明那樣,也可以是一種可視光通信系統(tǒng),搭載有通過(guò)NFC通信判別接近終端的種類(lèi)的終端種類(lèi)判斷部、和根據(jù)終端種類(lèi)判別發(fā)送的信息的發(fā)送信息種類(lèi)判斷部,將由接近的終端發(fā)送的信息的量和可視光通信速度變更。由此,通過(guò)根據(jù)接收終端調(diào)整可視光通信的頻率及發(fā)送LED數(shù)、變更可視光通信的速度和發(fā)送信息,能夠進(jìn)行高速通信,能夠提高用戶(hù)的方便性。
[0529]此外,包括本實(shí)施方式的信息通信裝置的可視光通信系統(tǒng)(圖14)也可以是一種可視光通彳目系統(tǒng),搭載有記錄清掃彳目息的清掃彳目息記錄部、記錄房間布局彳目息的房間布局信息記錄部、通過(guò)將房間布局信息與清掃信息疊加而生成污垢部位信息的信息合成部、和監(jiān)視通常動(dòng)作的停止的動(dòng)作監(jiān)視部,通過(guò)以設(shè)備的停止的感知為觸發(fā)事件,將污垢部位信息可視光發(fā)送。
[0530]另外,這些全局的或具體的技術(shù)方案也可以由系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或記錄媒體實(shí)現(xiàn),也可以通過(guò)系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或記錄媒體的任意的組合實(shí)現(xiàn)。
[0531](實(shí)施方式3)
[0532]在本實(shí)施方式中,舉住宅配送服務(wù)為例,對(duì)使用光通信的Web信息及設(shè)備的協(xié)同進(jìn)行說(shuō)明。
[0533]在圖15中表示本實(shí)施方式的概要。即,圖15是本實(shí)施方式的使用光通信的住宅配送服務(wù)支援的概略圖。[0534]具體而言,訂購(gòu)者使用移動(dòng)終端3001a從商品購(gòu)買(mǎi)站點(diǎn)進(jìn)行商品的訂購(gòu)。在訂購(gòu)?fù)瓿蓵r(shí),從商品購(gòu)買(mǎi)站點(diǎn)發(fā)行訂購(gòu)號(hào)碼。接收到訂購(gòu)號(hào)碼的移動(dòng)終端3001a將訂購(gòu)號(hào)碼使用NFC通信向門(mén)禁電話(huà)宅內(nèi)器300 Ib發(fā)送。
[0535]門(mén)禁電話(huà)宅內(nèi)器3001b將從移動(dòng)終端3001a接收到的訂購(gòu)號(hào)碼向本設(shè)備的監(jiān)視器顯示等,向用戶(hù)呈現(xiàn)發(fā)送完成的消息。
[0536]門(mén)禁電話(huà)宅內(nèi)器3001b對(duì)門(mén)禁電話(huà)宅外器3001c發(fā)送內(nèi)置在門(mén)禁電話(huà)宅外器3001c中的LED的閃爍指示和閃爍樣式。閃爍樣式根據(jù)從移動(dòng)終端3001a接收到的訂購(gòu)號(hào)碼由門(mén)禁電話(huà)宅內(nèi)器300 Ib生成。
[0537]門(mén)禁電話(huà)宅外器3001c根據(jù)從門(mén)禁電話(huà)宅內(nèi)器3001b指定的閃爍樣式而使LED閃爍。
[0538]作為移動(dòng)終端的替代,也可以是PC等的能夠向處于Wffff3001d的商品購(gòu)買(mǎi)站點(diǎn)訪(fǎng)問(wèn)的環(huán)境。
[0539]作為從移動(dòng)終端3001a向門(mén)禁電話(huà)宅內(nèi)器3001b的發(fā)送機(jī)構(gòu),除了 NFC通信以外,也可以使用宅內(nèi)網(wǎng)絡(luò)。
[0540]移動(dòng)終端3001a也可以不經(jīng)由門(mén)禁電話(huà)宅內(nèi)器3001b而直接向門(mén)禁電話(huà)宅外器3001c發(fā)送訂購(gòu)號(hào)碼。
[0541]在從訂購(gòu)者有訂購(gòu)的情況下,從住宅配送訂購(gòu)接收服務(wù)器3001e對(duì)住宅配送者移動(dòng)終端3001f?發(fā)送訂購(gòu)號(hào)碼。當(dāng)住宅配送者到達(dá)了住宅配送目標(biāo)時(shí),在住宅配送者移動(dòng)終端3001f和門(mén)禁電話(huà)宅外器3001c的雙向進(jìn)行使用基于訂購(gòu)號(hào)碼生成的LED閃爍樣式的光通信。
[0542]接著,使用圖16~圖21進(jìn)行說(shuō)明。圖16~圖21是用來(lái)說(shuō)明發(fā)明的實(shí)施方式3的使用光通信的住宅配送服務(wù)支援的流程圖。
[0543]圖16表示訂購(gòu)者進(jìn)行訂購(gòu)、到發(fā)行訂購(gòu)號(hào)碼為止的流程。以下,對(duì)圖16進(jìn)行說(shuō)明。
[0544]訂購(gòu)者移動(dòng)終端3001a在步驟3002a中,通過(guò)智能電話(huà)的Web瀏覽器或應(yīng)用實(shí)施住宅配送的預(yù)約。并且,向圖17的圈I前進(jìn)。
[0545]此外,訂購(gòu)者移動(dòng)終端3001a接著圖17的圈2,在步驟3002b中,在訂購(gòu)號(hào)碼發(fā)送等待狀態(tài)下待機(jī)。接著,在步驟3002c中,確認(rèn)是否接觸在了訂購(gòu)號(hào)碼發(fā)送目標(biāo)設(shè)備上。在是的情況下,向步驟3002d前進(jìn),對(duì)門(mén)禁電話(huà)室內(nèi)器NFC接觸而發(fā)送訂購(gòu)號(hào)碼(在門(mén)禁電話(huà)存在于與智能電話(huà)相同網(wǎng)絡(luò)中的情況下也有經(jīng)由網(wǎng)絡(luò)發(fā)送的方法)。另一方面,在否的情況下,向步驟3002b返回。
[0546]門(mén)禁電話(huà)宅內(nèi)器3001b首先在步驟3002e中,從其他終端等待LED閃爍的請(qǐng)求。接著,在步3002f中,從智能電話(huà)接收訂購(gòu)號(hào)碼。接著,在步驟3002g中,根據(jù)接收到的訂購(gòu)號(hào)碼,發(fā)出門(mén)禁電話(huà)室外機(jī)的LED閃爍指示。并且,向圖19的圈3前進(jìn)。
[0547]門(mén)禁電話(huà)宅外器3001c首先在步驟3002h中,從門(mén)禁電話(huà)宅內(nèi)器等待LED閃爍指示。并且,向圖19的圈7前進(jìn)。
[0548]住宅配送者移動(dòng)終端3001f在步驟3002i中,在訂購(gòu)?fù)ㄖ却隣顟B(tài)下待機(jī)。接著,在步驟3002j中,確認(rèn)是否被從住宅配送訂購(gòu)服務(wù)器通知了訂購(gòu)?fù)ㄖ?。這里,在否的情況下,向步驟3002i返回。在是的情況下,向步驟3002k前進(jìn),接收訂購(gòu)號(hào)碼、住宅配送目標(biāo)住址等的信息。接著,在步驟3002n中,待機(jī)直到用戶(hù)有接收到的訂購(gòu)號(hào)碼的LED發(fā)光指示或?yàn)榱似渌O(shè)備的LED發(fā)光識(shí)別而起動(dòng)照相機(jī)。并且,向圖18的圈5前進(jìn)。
[0549]圖17表示到訂購(gòu)者用訂購(gòu)者移動(dòng)終端3001a進(jìn)行住宅配送訂購(gòu)為止的流程。以下,對(duì)圖17進(jìn)行說(shuō)明。
[0550]住宅配送訂購(gòu)服務(wù)器3001e首先在步驟3003a中等待接受訂購(gòu)號(hào)碼。接著,在步驟3003b中確認(rèn)是否接收到住宅配送訂購(gòu)。這里,在否的情況下,向步驟3003a返回。在是的情況下,向步驟3003c前進(jìn),對(duì)接收到的住宅配送訂購(gòu)發(fā)行訂購(gòu)號(hào)碼。接著,在步驟3003d中,對(duì)住宅配送者通知接收到住宅配送訂購(gòu)的情況并結(jié)束。
[0551]訂購(gòu)者移動(dòng)終端300Ia接著圖16的圈1,在步驟3003e中,從住宅配送訂購(gòu)服務(wù)器提示的菜單中選擇訂購(gòu)內(nèi)容。接著,在步驟3003f中,確定訂購(gòu),向住宅配送服務(wù)器發(fā)送。接著,在步驟3003g中,確認(rèn)是否接收到訂購(gòu)號(hào)碼。這里,在否的情況下,向步驟3003f返回。在是的情況下,向步驟3003h前進(jìn),顯示接收到的訂購(gòu)號(hào)碼,進(jìn)行敦促向門(mén)禁電話(huà)宅內(nèi)器的接觸的顯示。并且,向圖16的圈2前進(jìn)。 [0552]圖18表示住宅配送者使用住宅配送者移動(dòng)終端3001f?與住宅配送目標(biāo)的門(mén)禁電話(huà)宅外器3001c進(jìn)行光通信的流程。以下,對(duì)圖18進(jìn)行說(shuō)明。
[0553]住宅配送者移動(dòng)終端3001f接著圖16的圈5,在步驟3004a中,確認(rèn)是否為了識(shí)別住宅配送目標(biāo)的門(mén)禁電話(huà)宅外器3001c的LED而起動(dòng)照相機(jī)。這里,在否的情況下,向圖16的圈5返回。
[0554]另一方面,在是的情況下,向步驟3004b前進(jìn),通過(guò)住宅配送者移動(dòng)終端的照相機(jī)確認(rèn)住宅配送目標(biāo)門(mén)禁電話(huà)宅外器的LED閃爍。
[0555]接著,在步驟3004c中,識(shí)別門(mén)禁電話(huà)宅外器的LED發(fā)光并與訂購(gòu)號(hào)碼對(duì)照。
[0556]接著,在步驟3004d中,確認(rèn)門(mén)禁電話(huà)宅外器的LED閃爍是否與訂購(gòu)號(hào)碼一致。這里,在是的情況下,向圖20的圈6前進(jìn)。
[0557]另外,在否的情況下,確認(rèn)是否在照相機(jī)內(nèi)能夠確認(rèn)其他LED閃爍。并且,在是的情況下,向步驟3004c返回,在否的情況下結(jié)束。
[0558]圖19表示進(jìn)行門(mén)禁電話(huà)宅內(nèi)器3001b與門(mén)禁電話(huà)宅外器3001c間的訂購(gòu)號(hào)碼對(duì)照的流程。以下,對(duì)圖19進(jìn)行說(shuō)明。
[0559]門(mén)禁電話(huà)宅外器3001c接著圖16的圈7,在步驟3005a中,確認(rèn)是否從門(mén)禁電話(huà)宅內(nèi)器有LED閃爍的指示。在否的情況下,向圖16的圈返回。在是的情況下,向步驟3005b前進(jìn),按照從門(mén)禁電話(huà)宅內(nèi)器指示的LED閃爍使LED閃爍。并且,向圖20的圈8前進(jìn)。
[0560]此外,門(mén)禁電話(huà)宅外器3001c接著圖20的圈9,在步驟3005c中,將由門(mén)禁電話(huà)宅外器的照相機(jī)識(shí)別出的LED閃爍向門(mén)禁電話(huà)宅內(nèi)器通知。并且,向圖21的圈10前進(jìn)。
[0561]門(mén)禁電話(huà)宅內(nèi)器3001c接著圖16的圈3,在步驟3005d中,對(duì)門(mén)禁電話(huà)宅外器實(shí)施對(duì)應(yīng)于訂購(gòu)號(hào)碼的LED閃爍指示。接著,在步驟3005e中待機(jī),直到門(mén)禁電話(huà)宅外器的照相機(jī)識(shí)別住宅配送者移動(dòng)終端的LED閃爍。接著,在步驟3005f中,確認(rèn)是否從門(mén)禁電話(huà)宅外器識(shí)別出了 LED閃爍。這里,在否的情況下,向步驟3005e返回。在是的情況下,在步驟3005g中將門(mén)禁電話(huà)宅外器的LED閃爍與訂購(gòu)號(hào)碼對(duì)照。接著,在步驟3005h中,確認(rèn)門(mén)禁電話(huà)宅外器的LED閃爍與訂購(gòu)號(hào)碼是否一致。在是的情況下,向圖21的圈11前進(jìn)。另一方面,在否的情況下,在步驟3005i中,向門(mén)禁電話(huà)宅外器指示LED閃爍的中止并結(jié)束。
[0562]圖20表示訂購(gòu)號(hào)碼對(duì)照后的門(mén)禁電話(huà)宅外器3001c與住宅配送者移動(dòng)終端3001f間的流程。以下,對(duì)圖20進(jìn)行說(shuō)明。
[0563]住宅配送者移動(dòng)終端3001f接著圖18的圈6,在步驟3006a中,根據(jù)住宅配送者移動(dòng)終端保持的訂購(gòu)號(hào)碼開(kāi)始LED閃爍。
[0564]接著,在步驟3006b中,將LED閃爍部分配置到從門(mén)禁電話(huà)宅外器照相機(jī)能夠攝影的范圍中。
[0565]接著,在步驟3006c中,關(guān)于門(mén)禁電話(huà)宅外器的照相機(jī)攝影的住宅配送者移動(dòng)終端的LED閃爍與門(mén)禁電話(huà)宅內(nèi)器保持的訂購(gòu)號(hào)碼是否一致,確認(rèn)門(mén)禁電話(huà)宅外器LED閃爍
是否表示一致。
[0566]這里,在否的情況下,向步驟3006b返回。另一方面,在是的情況下,向步驟3006e前進(jìn),將是否一致顯示在住宅配送者移動(dòng)終端上并結(jié)束。
[0567]此外,如圖20所示,門(mén)禁電話(huà)宅外器3001c接著圖19的圈8,在步驟3006f中,確認(rèn)是否由門(mén)禁電話(huà)宅外器的照相機(jī)識(shí)別出了住宅配送者移動(dòng)終端的LED閃爍。這里,在是的情況下,向圖19的圈9前進(jìn)。在否的情況下,向圖19的圈返回。
[0568]圖21表示訂購(gòu)號(hào)碼對(duì)照后的門(mén)禁電話(huà)宅外器3001c與住宅配送者移動(dòng)終端3001f間的流程。以下,對(duì)圖21進(jìn)行說(shuō)明。
[0569]門(mén)禁電話(huà)宅外器3001c接著圖19的圈11,在步驟3007a中,關(guān)于門(mén)禁電話(huà)宅內(nèi)器通知的LED閃爍是否與訂購(gòu)號(hào)碼一致確認(rèn)是否有通知。這里,在否的情況下向圖19的圈11返回。另一方面,在是的情況下向步驟3007b前進(jìn),通過(guò)門(mén)禁電話(huà)宅外器進(jìn)行表示是否一致的LED閃爍并結(jié)束。
[0570]此外,如圖21所示,門(mén)禁電話(huà)宅內(nèi)器3001b接著圖19的圈10,在步驟3007c中,用門(mén)禁電話(huà)宅內(nèi)器將配送者已到達(dá)的顯示調(diào)出,通過(guò)聲音輸出向訂購(gòu)者通知。接著,在步驟3007d中,向門(mén)禁電話(huà)宅外器指示表示LED閃爍的中止與訂購(gòu)號(hào)碼一致的LED閃爍。接著結(jié)束。
[0571]另外,在公寓中住宅配送目標(biāo)不在的情況下,有在玄關(guān)等設(shè)置收存住宅配送物的住宅配送盒的情況。住宅配送者在住宅配送時(shí)訂購(gòu)者不在的情況下,將住宅配送物向住宅配送盒收存。也可以是,通過(guò)使用住宅配送者移動(dòng)終端3001f的LED對(duì)門(mén)禁電話(huà)宅外器3001c的照相機(jī)進(jìn)行光通信并發(fā)送住宅配送物的尺寸,門(mén)禁電話(huà)宅外器3001c能夠自動(dòng)地僅利用與住宅配送物的尺寸相符的住宅配送盒。
[0572]如以上這樣,根據(jù)實(shí)施方式3,能夠?qū)崿F(xiàn)使用光通信的Web信息及設(shè)備的協(xié)同。
[0573](實(shí)施方式4)
[0574]以下,對(duì)實(shí)施方式4進(jìn)行說(shuō)明。
[0575](向服務(wù)器登記用戶(hù)和使用中的便攜電話(huà))
[0576]圖22是用來(lái)說(shuō)明向本實(shí)施方式的服務(wù)器登記用戶(hù)和使用中的便攜電話(huà)的處理的圖。以下說(shuō)明圖22。
[0577]首先,在步驟400 Ib中,用戶(hù)將應(yīng)用起動(dòng)。
[0578]接著,在步驟4001c中,將該用戶(hù)和便攜電話(huà)的信息向服務(wù)器對(duì)照。
[0579]接著,在步驟4001d中,確認(rèn)在服務(wù)器的DB中是否登記有用戶(hù)信息和使用中的便攜電話(huà)的信息。
[0580]在是的情況下向步驟4001f前進(jìn),作為并行處理而開(kāi)始(處理a)用戶(hù)聲音特性的解析,向圖24的B前進(jìn)。
[0581]另一方面,在否的情況下向4001e前進(jìn),向DB的便攜電話(huà)表登記便攜電話(huà)ID和用戶(hù)ID,向圖24的B前進(jìn)。
[0582](處理a:用戶(hù)聲音特性的解析)
[0583]圖23是用來(lái)說(shuō)明本實(shí)施方式的用戶(hù)聲音特性的解析的處理的圖。以下,說(shuō)明圖23。
[0584]首先,在步驟4002a中,從麥克風(fēng)進(jìn)行集音。
[0585]接著,在步驟4002b中,確認(rèn)聲音識(shí)別的結(jié)果是否將集音的聲音推測(cè)為用戶(hù)的聲音。這里,在否的情況下向步驟4002a返回。
[0586]在是的情況下向步驟4002c前進(jìn),確認(rèn)發(fā)生內(nèi)容是否是在該應(yīng)用中使用的鍵字(“向后”“返回”等)。在是的情況下,向步驟4002f前進(jìn),將聲音數(shù)據(jù)向服務(wù)器的用戶(hù)鍵字聲音表登記,向步驟4002d前進(jìn)。另一方面,在否的情況下向步驟4002d前進(jìn)。
[0587]接著,在步驟4002d中,將聲音特性(頻率、聲壓、講話(huà)速度)解析。
[0588]接著,在步驟4002e中,將解析結(jié)果向便攜電話(huà)和服務(wù)器的用戶(hù)聲音特性表登記。
[0589](聲音識(shí)別處理的準(zhǔn)備)
[0590]圖24是用來(lái)說(shuō)明本實(shí)施方式的進(jìn)行聲音識(shí)別處理的準(zhǔn)備的處理的圖。以下,說(shuō)明圖24。
[0591]首先,接著圖中的B,在步驟4003a中,(用戶(hù)操作)進(jìn)行顯示烹調(diào)菜單一覽的操作。
[0592]接著,在步驟4003b中,從服務(wù)器取得烹調(diào)菜單一覽。
[0593]接著,在步驟4003c中,將烹調(diào)菜單一覽向便攜設(shè)備畫(huà)面顯示。
[0594]接著,在步驟4004d中,從連接在便攜電話(huà)上的麥克風(fēng)開(kāi)始集音。
[0595]接著,在步驟4003e中,作為并行處理而開(kāi)始(處理b)從周邊的集音設(shè)備的集音。
[0596]接著,在步驟4003f中,作為并行處理而開(kāi)始(處理c)環(huán)境音特性的解析。
[0597]接著,在步驟4003g中,作為并行處理而開(kāi)始(處理d)來(lái)自存在于周邊的聲音輸出設(shè)備的聲音的消除。
[0598]接著,在步驟4003h中,從服務(wù)器的DB取得用戶(hù)聲音特性。
[0599]最后,在步驟4003i中,開(kāi)始用戶(hù)聲音的識(shí)別,向圖28的C前進(jìn)。
[0600](處理b:從周邊的集音設(shè)備的集音)
[0601]圖25是用來(lái)說(shuō)明進(jìn)行從本實(shí)施方式的周邊的集音設(shè)備的集音的處理的圖。以下,說(shuō)明圖25。
[0602]首先,在步驟4004a中,搜索從便攜電話(huà)能夠通信、能夠集音的設(shè)備(集音設(shè)備)。
[0603]接著,在步驟4004b中,確認(rèn)是否發(fā)現(xiàn)了集音設(shè)備。
[0604]這里,在否的情況下結(jié)束。在是的情況下向步驟4004c前進(jìn),從服務(wù)器取得集音器機(jī)的位置信息和麥克風(fēng)特性信息。
[0605]接著,在步驟4004d中,確認(rèn)在服務(wù)器中是否存在信息。
[0606]在是的情況下向步驟4004e前進(jìn),確認(rèn)是否集音設(shè)備的設(shè)置位置距便攜電話(huà)的位置足夠近、能夠?qū)⒂脩?hù)的聲音集音。另外,在步驟4004e中為否的情況下,向步驟4004a返回。另一方面,在步驟4004e中為是的情況下,向步驟4004f前進(jìn),使集音設(shè)備開(kāi)始集音。接著,在步驟4004g中,向便攜電話(huà)發(fā)送由集音設(shè)備集音的聲音,直到有集音處理結(jié)束的命令。另外,也可以不將集音的聲音原樣向便攜電話(huà)發(fā)送,而向便攜電話(huà)發(fā)送進(jìn)行了聲音識(shí)別的結(jié)果。此外,將向便攜設(shè)備發(fā)送的聲音與從連接在便攜電話(huà)上的麥克風(fēng)集音的聲音同樣處理,向步驟4004a返回。
[0607]另外,在步驟4004d中為否的情況下,向步驟4004h前進(jìn),使集音設(shè)備開(kāi)始集音。接著,在步驟4004i中,從便攜電話(huà)輸出信號(hào)音。接著,在步驟4004j中,向便攜電話(huà)發(fā)送由集音設(shè)備集音的聲音。接著,在步驟4004k中,確認(rèn)是否能夠根據(jù)從集音設(shè)備傳送的聲音識(shí)別出信號(hào)音。這里,在是的情況下向步驟4004g前進(jìn),在否的情況下向步驟4004a返回。
[0608](處理c:環(huán)境音特性的解析)
[0609]圖26是用來(lái)說(shuō)明本實(shí)施方式的環(huán)境音特性的解析處理的圖。以下,說(shuō)明圖26。
[0610]首先,在步驟4005f中,取得將該用戶(hù)擁有的設(shè)備中的除了位置距電灶的位置足夠遠(yuǎn)者以外的設(shè)備的列表。從DB取得這些設(shè)備發(fā)出的聲音的數(shù)據(jù)。
[0611]接著,在步驟4005g中,將所取得的聲音數(shù)據(jù)的特性(頻率、聲壓等)解析,作為環(huán)境音特性保持。另外,處于電灶的附近的炊飯機(jī)等發(fā)出的聲音由于特別容易發(fā)生誤識(shí)別,所以設(shè)定較高的重要度并保持。
[0612]接著,在步驟4005a中,從麥克風(fēng)集音。
[0613]接著,在步驟4005b中,確認(rèn)集音的聲音是否是用戶(hù)的聲音,在是的情況下向步驟4005a返回。在否的情況下,向步驟4005c前進(jìn),將集音的聲音的特性(頻率、聲壓)解析。
[0614]接著,在步驟4005d中,根據(jù)解析結(jié)果將環(huán)境音特性更新。
[0615]接著,在步驟4005e中,確認(rèn)結(jié)束標(biāo)志是否亮起,在是的情況下結(jié)束。在否的情況下向步驟4005a返回。
[0616](處理d:將來(lái)自存在于周邊的聲音輸出設(shè)備的聲音消除)
[0617]圖27是用來(lái)說(shuō)明本實(shí)施方式的將來(lái)自存在于周邊的聲音輸出設(shè)備的聲音消除的處理的圖。以下,說(shuō)明圖27。
[0618]首先,在步驟4006a中,搜索能夠通信的設(shè)備且能夠聲音輸出的設(shè)備(聲音輸出設(shè)備)。
[0619]接著,在步驟4006b中,確認(rèn)是否發(fā)現(xiàn)了聲音輸出設(shè)備,在否的情況下結(jié)束。在是的情況下,向步驟4006c前進(jìn),使聲音輸出設(shè)備輸出包含各種各樣的頻率的信號(hào)音。
[0620]接著,在步驟4006d中,用便攜電話(huà)及圖25的集音設(shè)備(各集音設(shè)備)進(jìn)行集音,將從聲音輸出設(shè)備輸出的信號(hào)音集音。
[0621]接著,在步驟4006e中,確認(rèn)是否能夠?qū)⑿盘?hào)音集音、識(shí)別,在否的情況下結(jié)束。在是的情況下,向步驟4006f前進(jìn),將從聲音輸出設(shè)備到各集音設(shè)備的傳送特性(各頻率的輸出音量與集音的音量的關(guān)系、以及從信號(hào)音輸出到集音的延遲時(shí)間)解析。
[0622]接著,在步驟4006g中,確認(rèn)聲音輸出設(shè)備輸出的聲音數(shù)據(jù)是否從便攜電話(huà)能夠訪(fǎng)問(wèn)。
[0623]這里,在是的情況下向步驟4006h前進(jìn),在有消除處理結(jié)束的命令之前,取得從聲音輸出設(shè)備輸出的聲音源、輸出部位、音量,一邊考慮傳送特性一邊從由各集音設(shè)備集音的聲音中將由聲音輸出設(shè)備輸出的聲音消除。向步驟4006a返回。另一方面,在否的情況下,向步驟4006i前進(jìn),在有消除處理結(jié)束的命令之前,取得從聲音輸出設(shè)備輸出的聲音,一邊考慮傳送特性一邊從由各集音設(shè)備集音的聲音將由聲音輸出設(shè)備輸出的聲音消除,向步驟4006a返回。
[0624](烹調(diào)菜單的選擇和向電灶的運(yùn)轉(zhuǎn)內(nèi)容設(shè)定)
[0625]圖28是用來(lái)說(shuō)明本實(shí)施方式的進(jìn)行烹調(diào)菜單的選擇和向電灶的運(yùn)轉(zhuǎn)內(nèi)容設(shè)定的處理的圖。以下,說(shuō)明圖28。
[0626]首先,接著圖中的C,在步驟4007a中,(用戶(hù)操作)選擇想要烹調(diào)的菜單。
[0627]接著,在步驟4007b中,(用戶(hù)操作)設(shè)定烹飪法參數(shù)(烹調(diào)的分量、味的濃度、火候調(diào)節(jié)等)。
[0628]接著,在步驟4007c中,從服務(wù)器取得與烹飪法參數(shù)相符的烹飪法數(shù)據(jù),進(jìn)行電灶運(yùn)轉(zhuǎn)內(nèi)容設(shè)定命令。
[0629]接著,在步驟4007d中,向用戶(hù)敦促使便攜電話(huà)向植入在電灶中的非接觸IC標(biāo)簽接觸。
[0630]接著,在步驟4007e中,確認(rèn)是否檢測(cè)到向電灶的接觸。
[0631]這里,在否的情況下向步驟4007e返回。在是的情況下,向步驟4007f前進(jìn),將從服務(wù)器取得的電灶的設(shè)定命令向電灶發(fā)送。由此,在該烹飪法中需要的電灶的設(shè)定全部被進(jìn)行,用戶(hù)僅通過(guò)按下電灶的運(yùn)轉(zhuǎn)開(kāi)始按鈕就能夠烹調(diào)。
[0632]接著,在步驟4007g中,(處理e)從服務(wù)器等的DB取得電灶用的通知音,向電灶設(shè)定。
[0633]接著,在步驟4007h中,(處理f)進(jìn)行電灶的通知音的調(diào)整,向圖32的D前進(jìn)。
[0634](處理e:從服務(wù)器等的DB取得電灶用的通知音,向電灶設(shè)定)
[0635]圖29是用來(lái)說(shuō)明本實(shí)施方式的從服務(wù)器等的DB取得電灶用的通知音、向電灶設(shè)定的處理的圖。以下,說(shuō)明圖29。
[0636]首先,在步驟4008a中,用戶(hù)將便攜電話(huà)向植入在電灶中的非接觸IC標(biāo)簽靠近(=接觸)。
[0637]接著,在步驟4008b中,向電灶詢(xún)問(wèn)在電灶中是否登記有面向該便攜電話(huà)的通知音數(shù)據(jù)(在電灶的操作時(shí)或運(yùn)轉(zhuǎn)結(jié)束時(shí)輸出的聲音的數(shù)據(jù))。
[0638]接著,在步驟4008c中,確認(rèn)在電灶中是否登記有面向該便攜電話(huà)的通知音數(shù)據(jù)。
[0639]這里,在是的情況下結(jié)束。在否的情況下,向步驟4008d前進(jìn),確認(rèn)在便攜設(shè)備中是否登記有面向該便攜電話(huà)的通知音數(shù)據(jù)。在是的情況下,向步驟4008h前進(jìn),將登記在便攜電話(huà)中的通知音數(shù)據(jù)向電灶登記并結(jié)束。另一方面,在否的情況下,向步驟4008e前進(jìn),參照服務(wù)器或便攜電話(huà)或電灶的DB。
[0640]接著,在步驟4008f中,在DB中有面向該便攜電話(huà)的通知音數(shù)據(jù)(該便攜電話(huà)容易識(shí)別的通知音的數(shù)據(jù))的情況下從DB取得該數(shù)據(jù),在沒(méi)有的情況下從DB取得面向一般的便攜電話(huà)的通知音數(shù)據(jù)(一般便攜電話(huà)容易識(shí)別的通知音的數(shù)據(jù))。
[0641]接著,在步驟4008g中,將所取得的通知音數(shù)據(jù)向便攜電話(huà)登記。
[0642]接著,在步驟4008h中,將登記在便攜電話(huà)中的通知音數(shù)據(jù)向電灶登記并結(jié)束。
[0643](處理f:電灶的通知音的調(diào)整)
[0644]圖30是用來(lái)說(shuō)明本實(shí)施方式的進(jìn)行電灶的通知音的調(diào)整的處理的圖。以下,說(shuō)明圖30。[0645]首先,在步驟4009a中,取得登記在便攜電話(huà)中的該電灶的通知音數(shù)據(jù)。
[0646]接著,在步驟4009b中,確認(rèn)該終端用的通知音的頻率與環(huán)境音的頻率的重疊是否為一定以上。
[0647]這里,在否的情況下結(jié)束。
[0648]另一方面,在是的情況下,向步驟4009c前進(jìn),將通知音的音量設(shè)定為相比環(huán)境音足夠大的音量?;蛘邔⑼ㄖ舻念l率變更。
[0649]這里,如果舉將頻率變更的通知音的制作方法的一例,則如果電灶能夠輸出圖31的(C)的聲音,則以(C)的樣式制作通知音并結(jié)束。如果(C)不能而(b)能夠,則以(b)的樣式制作通知音并結(jié)束。如果僅(a)能夠,則以(a)的樣式制作通知音并結(jié)束。
[0650]圖31是表示本實(shí)施方式的向電灶設(shè)定的通知音的波形的例子的圖。
[0651]圖31(a)所示的波形是單純的矩形波,能夠由幾乎全部的聲音輸出裝置輸出。由于容易與通知音以外的聲音混淆,所以輸出幾次,如果能夠識(shí)別其中的幾個(gè),則應(yīng)當(dāng)進(jìn)行識(shí)別為該通知首響起等的對(duì)應(yīng)。
[0652]圖31 (b)所示的波形是通過(guò)短時(shí)間的矩形波將(a)的波形細(xì)小地劃分那樣的波形,如果聲音輸出裝置的動(dòng)作時(shí)鐘足夠快則能夠輸出。該聲音在人的耳朵中能夠與(a)的聲音同樣聽(tīng)到,但在機(jī)械識(shí)別中,有信息量比(a)多、難以與通知音以外的聲音混淆的性質(zhì)。
[0653]圖31 (C)所示的波形是將聲音輸出部分的時(shí)間的長(zhǎng)度改變的波形,稱(chēng)作PWM波形。比(b)難輸出,但信息量比(b)多,也可以使識(shí)別率提高、從電灶向便攜電話(huà)同時(shí)傳遞想要傳遞的信息。
[0654]另外,圖31(b)、圖31 (C)的波形相比圖31(a)誤識(shí)別的可能性較低,但與圖31 (a)同樣,通過(guò)將相同的波形重復(fù)多次,能夠進(jìn)一步提高識(shí)別率。
[0655](烹調(diào)內(nèi)容的顯示)
[0656]圖32是表示本實(shí)施方式的向電灶設(shè)定的通知音的波形的例子的圖。以下,說(shuō)明圖32。
[0657]首先,接著圖中的D,在步驟4011a中,顯示烹調(diào)內(nèi)容。
[0658]接著,在步驟4011b中,確認(rèn)烹調(diào)內(nèi)容是否是電灶的運(yùn)轉(zhuǎn)。
[0659]這里,在是的情況下,向步驟4011c前進(jìn),向用戶(hù)通知向電灶裝入食材并按下運(yùn)轉(zhuǎn)開(kāi)始按鈕,向圖33的E前進(jìn)。
[0660]另一方面,在否的情況下,向步驟4011d前進(jìn),顯示烹調(diào)內(nèi)容,向圖中的F前進(jìn)或向步驟4011e前進(jìn)。
[0661]在步驟4011e中,確認(rèn)用戶(hù)的操作是什么樣的。在應(yīng)用結(jié)束的情況下結(jié)束。
[0662]另一方面,在顯示內(nèi)容的變更操作、手輸入(按鈕按下等)、聲音輸入(“向后”“向前”等)的情況下,向步驟4011f?前進(jìn),確認(rèn)顯示內(nèi)容變更的結(jié)果是否是烹調(diào)結(jié)束。這里,在是的情況下,向步驟4011g前進(jìn),將烹調(diào)結(jié)束向用戶(hù)通知并結(jié)束。在否的情況下向步驟4011a前進(jìn)。
[0663](電灶的通知音的識(shí)別)
[0664]圖33是用來(lái)說(shuō)明本實(shí)施方式的進(jìn)行電灶的通知音的識(shí)別的處理的圖。以下,說(shuō)明圖33。[0665]首先,接著圖中的E,在步驟4012a中,作為并行處理,(處理g)開(kāi)始從周邊的集音設(shè)備的集音和電灶通知音的識(shí)別。
[0666]接著,在步驟4012f中,作為并行處理,(處理i)開(kāi)始便攜電話(huà)操作狀態(tài)的確認(rèn)。
[0667]接著,在步驟4012g中,作為并行處理,(處理j)開(kāi)始用戶(hù)位置的追蹤。
[0668]接著,在步驟4012b中,對(duì)識(shí)別內(nèi)容進(jìn)行確認(rèn)。
[0669]這里,在識(shí)別出按鈕按下的通知音的情況下,向步驟4012c前進(jìn),登記設(shè)定變更,向步驟4012b返回。在識(shí)別出用戶(hù)的操作的情況下,向圖32的F前進(jìn)。在從顯示向電灶裝入食材并按下運(yùn)轉(zhuǎn)開(kāi)始按鈕起經(jīng)過(guò)運(yùn)轉(zhuǎn)時(shí)間后識(shí)別出(運(yùn)轉(zhuǎn)結(jié)束的通知音或?qū)㈦娫畹拈T(mén)打開(kāi)的聲音)的情況下,在步驟4012e中,(處理h)向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束,向圖32的G前進(jìn)。在識(shí)別出運(yùn)轉(zhuǎn)開(kāi)始的通知音的情況下,向步驟4012d前進(jìn),待機(jī)直到經(jīng)過(guò)運(yùn)轉(zhuǎn)時(shí)間,向步驟4012e前進(jìn),(處理h)向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束,向圖32的G前進(jìn)。
[0670](處理g:從周邊的集音設(shè)備的集音和電灶通知音的識(shí)別)
[0671]圖34是用來(lái)說(shuō)明本實(shí)施方式的進(jìn)行從周邊的集音設(shè)備的集音和電灶通知音的識(shí)別的處理的圖。以下,說(shuō)明圖34。
[0672]首先,在步驟4013a中,搜索能夠從便攜電話(huà)通信、能夠集音的設(shè)備(集音設(shè)備)。
[0673]接著,在步驟4013b中,確認(rèn)是否發(fā)現(xiàn)了集音設(shè)備。
[0674]這里,在否的情況下結(jié)束。另一方面,在是的情況下,向步驟4013c前進(jìn),從服務(wù)器取得集音器機(jī)的位置信息和麥克風(fēng)特性信息。
[0675]接著,在步驟4013d中,確認(rèn)在服務(wù)器中是否存在信息。
[0676]在是的情況下,向步驟4013r前進(jìn),確認(rèn)是否集音設(shè)備的設(shè)置位置距電灶足夠近、能夠?qū)⑼ㄖ艏簟?br>
[0677]這里,在步驟4013r中為否的情況下向步驟4013a返回。在是的情況下,向步驟4013s前進(jìn),確認(rèn)集音設(shè)備的運(yùn)算裝置是否能夠進(jìn)行聲音識(shí)別。在步驟4013s中為是的情況下,在步驟4013u中,向集音設(shè)備發(fā)送用于電灶的通知音識(shí)別的信息。接著,在步驟4013v中,使集音設(shè)備開(kāi)始集音和聲音識(shí)別,向便攜電話(huà)發(fā)送識(shí)別結(jié)果。接著,在步驟4013q中,在向下個(gè)烹調(diào)階段前進(jìn)之前,進(jìn)行電灶的通知音的識(shí)別處理,將識(shí)別結(jié)果向便攜電話(huà)發(fā)送。另一方面,在步驟4013s中為否的情況下,向步驟4013t前進(jìn),使集音設(shè)備開(kāi)始集音,將集音聲音向便攜電話(huà)發(fā)送。接著,在步驟4013j中,在向下個(gè)烹調(diào)階段前進(jìn)之前,將集音的聲音向便攜電話(huà)發(fā)送,由便攜電話(huà)識(shí)別電灶的通知音。
[0678]另外,在步驟4013d中為否的情況下,向步驟4013e前進(jìn),確認(rèn)集音設(shè)備的運(yùn)算裝置是否能夠進(jìn)行聲音識(shí)別。
[0679]在是的情況下,向步驟4013k前進(jìn),向集音設(shè)備發(fā)送用于電灶的通知音識(shí)別的信息。接著,在步驟4013m中,使集音設(shè)備開(kāi)始集音和聲音識(shí)別,將識(shí)別結(jié)果向便攜電話(huà)發(fā)送。接著,在步驟4013n中,使電灶的通知音響起。接著,在步驟4013p中,確認(rèn)是否能夠由集音設(shè)備識(shí)別上述通知音。在步驟4013p中為是的情況下,向4013q前進(jìn),在向下個(gè)烹調(diào)階段前進(jìn)之前進(jìn)行電灶的通知音的識(shí)別處理,將識(shí)別結(jié)果向便攜電話(huà)發(fā)送,向步驟4013a返回。在步驟4013p中為否的情況下,向步驟4013a返回。
[0680]此外,在步驟4013e中為否的情況下,向步驟4013f前進(jìn),使集音設(shè)備開(kāi)始集音,將集音聲音向便攜電話(huà)發(fā)送。接著,在步驟4013g中,使電灶的通知音響起。接著,在步驟4013h中,對(duì)從集音設(shè)備送來(lái)的聲音進(jìn)行識(shí)別處理。接著,在步驟4013i中,確認(rèn)是否能夠識(shí)別上述通知音。這里,在是的情況下,向4013j前進(jìn),在向下個(gè)烹調(diào)階段前進(jìn)之前,將集音的聲音向便攜電話(huà)發(fā)送,由便攜電話(huà)識(shí)別電灶的通知音,向步驟4013a返回。在否的情況下向步驟4013a返回。
[0681](處理h:向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束)
[0682]圖35是用來(lái)說(shuō)明本實(shí)施方式的向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束的處理的圖。以下,說(shuō)明圖35。
[0683]首先,在步驟4013a中,確認(rèn)是否能夠判斷出是正在使用便攜電話(huà)中或根據(jù)傳感器數(shù)據(jù)判斷出便攜電話(huà)是移動(dòng)中。另外,在是的情況下,向步驟4014m前進(jìn),使用便攜電話(huà)的畫(huà)面顯示、聲音或振動(dòng)等向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束并結(jié)束。
[0684]另一方面,在步驟4013a中為否的情況下,向步驟4014b前進(jìn),搜索由用戶(hù)登入的PC等操作中的設(shè)備(用戶(hù)操作中設(shè)備)。
[0685]接著,在步驟4014c中,確認(rèn)是否發(fā)現(xiàn)了用戶(hù)操作中設(shè)備。另外,在是的情況下,使用用戶(hù)操作中設(shè)備的畫(huà)面顯示等向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束并結(jié)束。
[0686]另一方面,在步驟4014c中為否的情況下,向步驟4014e前進(jìn),搜索能夠從便攜電話(huà)通信、能夠取得圖像的設(shè)備(攝像設(shè)備)。
[0687]接著,在步驟4014f中,確認(rèn)是否發(fā)現(xiàn)了攝像設(shè)備。
[0688]這里,在是的情況下,向步驟4014p前進(jìn),使攝像設(shè)備攝像,向攝像設(shè)備發(fā)送用戶(hù)的臉數(shù)據(jù),進(jìn)行用戶(hù)的臉識(shí)別。或者,將攝像圖像向便攜電話(huà)或服務(wù)器傳送,在圖像的發(fā)送目標(biāo)中進(jìn)行用戶(hù)的臉識(shí)別。
[0689]接著,在步驟4014q中,確認(rèn)是否識(shí)別出了用戶(hù)的臉。在否的情況下向步驟4014e返回。在是的情況下,向步驟40141r前進(jìn),確認(rèn)在發(fā)現(xiàn)了用戶(hù)的設(shè)備(發(fā)現(xiàn)設(shè)備)中是否有顯示裝置或發(fā)聲裝置。在步驟40141r中為是的情況下,向步驟4014s前進(jìn),使用附屬于設(shè)備的裝置向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束并結(jié)束。
[0690]此外,在步驟4014f中為否的情況下,向步驟4014g前進(jìn),搜索能夠從便攜電話(huà)通信、能夠集音的設(shè)備(集音設(shè)備)。
[0691]此外,在步驟4014h中為否的情況下,向步驟4014i前進(jìn),發(fā)現(xiàn)能夠通過(guò)其他設(shè)備的操作或步行振動(dòng)等的方法確定用戶(hù)的位置的設(shè)備。接著,向步驟4014m前進(jìn),使用便攜電話(huà)的畫(huà)面顯示、聲音或振動(dòng)等向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束并結(jié)束。
[0692]另外,在步驟4014i中為是的情況下,向步驟4014r前進(jìn),確認(rèn)在發(fā)現(xiàn)了用戶(hù)的設(shè)備(發(fā)現(xiàn)設(shè)備)中是否有顯示裝置或發(fā)聲裝置。這里,在否的情況下,向步驟4014t前進(jìn),從服務(wù)器取得發(fā)現(xiàn)設(shè)備的位置信息。
[0693]接著,在步驟4014U中,搜索處于發(fā)現(xiàn)設(shè)備的附近、有顯示裝置或發(fā)聲裝置的設(shè)備(通知設(shè)備)。接著,在步驟4014v中,考慮從通知設(shè)備到用戶(hù)的距離,通過(guò)畫(huà)面顯示或足夠的音量的聲音向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束并結(jié)束。
[0694](處理1:便攜電話(huà)操作狀態(tài)的確認(rèn))
[0695]圖36是用來(lái)說(shuō)明本實(shí)施方式的進(jìn)行便攜電話(huà)操作狀態(tài)的確認(rèn)的處理的圖。以下,說(shuō)明圖36。
[0696]首先,在步驟4015a中,確認(rèn)是否是正在操作便攜電話(huà)中,或便攜電話(huà)正在移動(dòng),或在連接于便攜電話(huà)上的輸入輸出裝置中有輸入輸出,或正在將影像或音樂(lè)再現(xiàn)中,或處于距便攜電話(huà)較近的位置的設(shè)備為操作中,或由處于距便攜電話(huà)較近的位置的設(shè)備的照相機(jī)或各種傳感器識(shí)別到了用戶(hù)。
[0697]這里,在是的情況下,向步驟4015b前進(jìn),識(shí)別為用戶(hù)的位置距該便攜電話(huà)較近的概率較高,向步驟4015a返回。
[0698]另一方面,在否的情況下,向步驟4015c前進(jìn),確認(rèn)是否處于距便攜電話(huà)較遠(yuǎn)的位置的設(shè)備是操作中,或由處于距便攜電話(huà)較遠(yuǎn)的位置的設(shè)備的照相機(jī)或各種傳感器識(shí)別到用戶(hù),或是充電中。
[0699]在步驟4015c中,在是的情況下,向步驟4015d前進(jìn),識(shí)別為用戶(hù)的位置距該便攜電話(huà)較遠(yuǎn)的概率較高,向步驟4015a返回。在步驟4015c中,在否的情況下向步驟4015a返回。
[0700](處理j:用戶(hù)位置的跟蹤)
[0701]圖37是用來(lái)說(shuō)明本實(shí)施方式的進(jìn)行用戶(hù)位置的跟蹤的處理的圖。以下,說(shuō)明圖37。
[0702]首先,在步驟4016a中,確認(rèn)是否由方位傳感器、位置傳感器或加速度傳感器判斷出便攜電話(huà)正被移動(dòng)。
[0703]在步驟4016a中為是的情況下,向步驟4016b前進(jìn),將便攜電話(huà)和用戶(hù)的位置向DB登記,向步驟4016a返回。
[0704]另一方面,在步驟4016a中為否的情況下,向步驟4016c前進(jìn),搜索能夠從便攜電話(huà)通信、照相機(jī)或麥克風(fēng)、人感傳感器等的能夠檢測(cè)用戶(hù)的位置或用戶(hù)存在的情況的設(shè)備(用戶(hù)探知設(shè)備)。
[0705]接著,在步驟4016d中,確認(rèn)是否發(fā)現(xiàn)集音設(shè)備。在步驟4016d中為否的情況下,向步驟4016a返回。
[0706]在步驟4016d中為是的情況下,向步驟4016e前進(jìn),確認(rèn)是否由用戶(hù)探知設(shè)備探知到用戶(hù)。步驟4016e中為否的情況下,向步驟4016a返回。
[0707]在步驟4016e中為是的情況下,向步驟4016f前進(jìn),將用戶(hù)的探知向便攜電話(huà)發(fā)送。
[0708]接著,在步驟4016g中,將在用戶(hù)探知設(shè)備的附近存在用戶(hù)的情況向DB登記。
[0709]接著,在步驟4016h中,如果在DB中有用戶(hù)探知設(shè)備的位置信息則取得,確定用戶(hù)的位置,向步驟4016a返回。
[0710]圖38是表不一邊將來(lái)自聲音輸出裝置的聲音消除一邊識(shí)別家電的通知音、使可通信的電子設(shè)備識(shí)別用戶(hù)(操作者)的當(dāng)前位置、根據(jù)用戶(hù)位置的識(shí)別結(jié)果使處于距用戶(hù)位置較近的位置的設(shè)備進(jìn)行向用戶(hù)的通知的圖。此外,圖39是表示在本實(shí)施方式的服務(wù)器或便攜電話(huà)、電灶中保持的數(shù)據(jù)庫(kù)的內(nèi)容的圖。
[0711]如圖39所不,在電灶表4040a中,將電灶的機(jī)種、確定可輸出的聲音的數(shù)據(jù)(揚(yáng)聲器特性、調(diào)制方式等)、具有容易按照各種便攜電話(huà)機(jī)種識(shí)別該便攜電話(huà)的特性的通知音的數(shù)據(jù)、和一般的便攜電話(huà)平均容易識(shí)別的通知音數(shù)據(jù)建立對(duì)應(yīng)保持。
[0712]在便攜設(shè)備表4040b中,將便攜電話(huà)的各個(gè)體、該便攜電話(huà)的機(jī)種、使用該便攜電話(huà)的用戶(hù)、和表示該便攜電話(huà)的位置的數(shù)據(jù)建立對(duì)應(yīng)保持。[0713]在便攜設(shè)備機(jī)種表4040c中,將便攜電話(huà)的機(jī)種與在該便攜電話(huà)機(jī)種中附帶的麥克風(fēng)等的集音特性建立對(duì)應(yīng)保持。
[0714]在用戶(hù)聲音特性表4040d中,將用戶(hù)與該用戶(hù)的聲音的聲響特性建立對(duì)應(yīng)保持。
[0715]在用戶(hù)鍵字聲音表4040e中,將用戶(hù)、與該用戶(hù)發(fā)聲“向后” “返回”等的便攜電話(huà)要識(shí)別的鍵字時(shí)的聲音波形數(shù)據(jù)建立對(duì)應(yīng)保持。另外,該數(shù)據(jù)也可以不是聲音波形數(shù)據(jù)本身,而是將其解析、變形為容易處置的形式后的數(shù)據(jù)。
[0716]在用戶(hù)擁有設(shè)備位置表4040f中,將用戶(hù)、用戶(hù)擁有的設(shè)備、和該設(shè)備的位置數(shù)據(jù)建立對(duì)應(yīng)保持。
[0717]在用戶(hù)擁有設(shè)備位置表4040g中,將用戶(hù)、用戶(hù)擁有的設(shè)備、和該設(shè)備發(fā)出的通知音或運(yùn)轉(zhuǎn)音等的聲音的數(shù)據(jù)建立對(duì)應(yīng)保持。
[0718]在用戶(hù)位置表4040h中,將用戶(hù)與用戶(hù)的位置的數(shù)據(jù)建立對(duì)應(yīng)保持。
[0719]此外,圖40是表示本實(shí)施方式的用戶(hù)基于顯示在便攜電話(huà)上的烹調(diào)次序進(jìn)行烹調(diào)、此外用戶(hù)通過(guò)“向后” “返回”等的聲音操作便攜電話(huà)的顯示內(nèi)容的圖。圖41是表示本實(shí)施方式的在開(kāi)始電灶的運(yùn)轉(zhuǎn)、等待運(yùn)轉(zhuǎn)結(jié)束的期間、或煮東西的期間等的時(shí)間中、用戶(hù)向其他場(chǎng)所移動(dòng)的圖。圖42是表示對(duì)于經(jīng)由網(wǎng)絡(luò)與便攜電話(huà)連接、并且照相機(jī)或麥克風(fēng)、人感傳感器等的能夠進(jìn)行用戶(hù)的位置的識(shí)別或能夠識(shí)別用戶(hù)存在的設(shè)備、從便攜電話(huà)發(fā)送探知用戶(hù)的命令的圖。圖43作為用戶(hù)的探知的例子而表示用電視機(jī)附帶的照相機(jī)識(shí)別用戶(hù)的臉、此外用空調(diào)的人感傳感器識(shí)別用戶(hù)的移動(dòng)或存在的圖。另外,該識(shí)別處理也可以由電視機(jī)或空調(diào)進(jìn)行,也可以將圖像數(shù)據(jù)等向便攜電話(huà)或服務(wù)器發(fā)送,由發(fā)送目標(biāo)進(jìn)行識(shí)別處理。但是,從隱私保護(hù)的觀(guān)點(diǎn),不應(yīng)將用戶(hù)的數(shù)據(jù)向外部服務(wù)器發(fā)送。
[0720]圖44是表示從探知到用戶(hù)的設(shè)備向便攜電話(huà)發(fā)送探知到用戶(hù)的情況、及從探知到的設(shè)備到用戶(hù)的相對(duì)位置的圖。
[0721]這樣,如果在DB中存在探知到用戶(hù)的設(shè)備的位置信息,則能夠確定用戶(hù)的位置。
[0722]圖45是表示本實(shí)施方式的便攜電話(huà)識(shí)別電灶的運(yùn)轉(zhuǎn)結(jié)束音的圖。圖46是表示識(shí)別出電灶的運(yùn)轉(zhuǎn)結(jié)束的便攜電話(huà)對(duì)探知到用戶(hù)的設(shè)備中的、具有畫(huà)面顯示功能或聲音輸出功能的設(shè)備(在本圖中是處于用戶(hù)的正面的電視機(jī))發(fā)送向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束的命令的圖。
[0723]圖47是表示接受到上述命令的設(shè)備將通知內(nèi)容向用戶(hù)通知(在本圖中,在電視機(jī)的畫(huà)面上顯示電灶的運(yùn)轉(zhuǎn)已結(jié)束)的圖。圖48是表示經(jīng)由網(wǎng)絡(luò)與便攜電話(huà)連接、具備麥克風(fēng)、存在于電灶的附近的設(shè)備識(shí)別電灶的運(yùn)轉(zhuǎn)結(jié)束音的圖。圖49是表示從識(shí)別到電灶的運(yùn)轉(zhuǎn)結(jié)束的設(shè)備向便攜電話(huà)通知該情況的圖。圖50是表示當(dāng)便攜電話(huà)接受到電灶的運(yùn)轉(zhuǎn)結(jié)束的通知時(shí)、如果便攜電話(huà)處于用戶(hù)的附近則使用便攜電話(huà)的畫(huà)面顯示或聲音輸出等向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束的圖。
[0724]圖51是表示將電灶的運(yùn)轉(zhuǎn)結(jié)束向用戶(hù)通知的圖。具體而言,圖51是表示當(dāng)便攜電話(huà)接受到電灶的運(yùn)轉(zhuǎn)結(jié)束的通知時(shí)、如果便攜電話(huà)不在用戶(hù)的附近、則在探知到用戶(hù)的設(shè)備中的、對(duì)具有畫(huà)面顯示功能或聲音輸出功能的設(shè)備(在本圖中處于用戶(hù)的正面的電視機(jī))發(fā)送向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束的命令、接受到該命令的設(shè)備向用戶(hù)通知電灶的運(yùn)轉(zhuǎn)結(jié)束的圖。表示當(dāng)便攜電話(huà)連接在充電器上時(shí),便攜電話(huà)在電灶的附近、用戶(hù)的附近都不存在的情況較多,容易發(fā)生本圖所示的狀況。[0725]圖52是表示接受到電灶的運(yùn)轉(zhuǎn)結(jié)束的通知的用戶(hù)向廚房移動(dòng)的圖。另外,此時(shí)便攜電話(huà)顯示接著的烹調(diào)內(nèi)容。此外也可以是,便攜電話(huà)通過(guò)聲音等識(shí)別出用戶(hù)已向廚房移動(dòng),在正合適的時(shí)機(jī)開(kāi)始接著的烹調(diào)次序的說(shuō)明。
[0726]圖53是表示從電灶通過(guò)無(wú)線(xiàn)通信向便攜電話(huà)發(fā)送運(yùn)轉(zhuǎn)結(jié)束等的信息、從便攜電話(huà)對(duì)用戶(hù)正觀(guān)看的電視機(jī)進(jìn)行通知命令、通過(guò)電視機(jī)的畫(huà)面顯示或聲音向用戶(hù)進(jìn)行通知的圖。
[0727]另外,信息源設(shè)備(在本圖中是電灶)與便攜電話(huà)的通信、及便攜電話(huà)與向用戶(hù)進(jìn)行通知的設(shè)備(在本圖中是電視機(jī))的通信可以利用家庭內(nèi)LAN,或直接的無(wú)線(xiàn)通信,特別是700MHz?900MHz臺(tái)的無(wú)線(xiàn)通信等。此外,這里利用便攜電話(huà)作為樞紐,但可以代替便攜電話(huà)而利用具有通信能力的其他設(shè)備。
[0728]圖54是表示從電灶通過(guò)無(wú)線(xiàn)通信向用戶(hù)正觀(guān)看的電視機(jī)發(fā)送運(yùn)轉(zhuǎn)結(jié)束等的信息、使用電視機(jī)的畫(huà)面顯示或聲音對(duì)用戶(hù)進(jìn)行通知的。它表示不經(jīng)由在圖53中承擔(dān)作為樞紐的作用的便攜電話(huà)的情況下的動(dòng)作。
[0729]圖55是表示在I層的空調(diào)進(jìn)行某個(gè)信息通知的情況下、向2層的空調(diào)發(fā)送信息、從2層的空調(diào)向便攜電話(huà)發(fā)送信息、從便攜電話(huà)對(duì)用戶(hù)觀(guān)看的電視機(jī)進(jìn)行通知命令、通過(guò)電視機(jī)的畫(huà)面顯示或聲音對(duì)用戶(hù)進(jìn)行通知的圖。它表示在不能從信息源設(shè)備(在本圖中是I層的空調(diào))向作為樞紐的便攜電話(huà)直接通信的情況下向能夠通信的其他設(shè)備發(fā)送信息、進(jìn)行到便攜電話(huà)為止的通信。
[0730]圖56是表示向處于遠(yuǎn)程的用戶(hù)進(jìn)行信息的通知的圖。具體而言,圖56表示從經(jīng)由聲音、光或無(wú)線(xiàn)通信等從電灶接受到通知的便攜電話(huà)通過(guò)因特網(wǎng)或載波通信向處于遠(yuǎn)程的用戶(hù)進(jìn)行信息的通知。圖57是表示在不能從電灶向作為樞紐的便攜電話(huà)進(jìn)行直接通信的情況下、經(jīng)由個(gè)人計(jì)算機(jī)等對(duì)便攜電話(huà)發(fā)送信息的圖。圖58是表示從圖57的接受到通信的便攜電話(huà)逆向沿著信息通信路徑對(duì)電灶發(fā)送操作命令等的信息的圖。
[0731]另外,便攜電話(huà)也可以接受圖57的信息、自動(dòng)地發(fā)送信息,也可以將該信息向用戶(hù)通知、接受到該通知而發(fā)送用戶(hù)進(jìn)行的操作的信息。
[0732]圖59是表示從作為信息源設(shè)備的空調(diào)不能對(duì)作為樞紐的便攜電話(huà)進(jìn)行直接的通信的情況下、對(duì)用戶(hù)進(jìn)行信息的通知的圖。具體而言,圖59表示,在不能從作為信息源設(shè)備的空調(diào)對(duì)作為樞紐的便攜電話(huà)進(jìn)行直接的通信的情況下,首先,在圈I中,對(duì)個(gè)人計(jì)算機(jī)等的、作為向便攜電話(huà)的通信的階梯的設(shè)備發(fā)送信息,在圈2和圈3中,通過(guò)因特網(wǎng)或載波通信網(wǎng)從個(gè)人計(jì)算機(jī)向便攜電話(huà)發(fā)送信息,便攜電話(huà)自動(dòng)處理該信息,或者,接受拿著便攜電話(huà)的用戶(hù)的操作,在圈4和圈5中,通過(guò)因特網(wǎng)或載波通信網(wǎng)將信息向個(gè)人計(jì)算機(jī)發(fā)送,在圈6中,個(gè)人計(jì)算機(jī)對(duì)能夠向想要通知的用戶(hù)通知的設(shè)備(在本圖中是電視機(jī))發(fā)送通知命令,在圈7中,使用電視機(jī)的畫(huà)面顯示或聲音對(duì)用戶(hù)進(jìn)行信息的通知。
[0733]這樣的狀況在應(yīng)接受來(lái)自空調(diào)的通知信息的用戶(hù)與正使用便攜電話(huà)的用戶(hù)不同的情況下容易發(fā)生。
[0734]另外,在本圖中,在個(gè)人計(jì)算機(jī)與便攜電話(huà)之間的通信中經(jīng)由因特網(wǎng)或載波通信網(wǎng),但也可以通過(guò)家庭內(nèi)LAN或直接通信等進(jìn)行通信。
[0735]圖60是用來(lái)對(duì)利用使用700?900MHz的電波的通信裝置的系統(tǒng)說(shuō)明的圖。具體而言,在圖60的結(jié)構(gòu)中,對(duì)利用使用700?900MHz的電波(以下稱(chēng)作G電波)的通信裝置(以下稱(chēng)作G裝置)的系統(tǒng)進(jìn)行說(shuō)明,表示從帶有G裝置的電灶對(duì)帶有G裝置的3層的便攜電話(huà)使用G電波發(fā)送信息、從帶有G裝置的3層的便攜電話(huà)利用家庭內(nèi)網(wǎng)絡(luò)對(duì)沒(méi)有G裝置的2層的便攜電話(huà)發(fā)送信息、從2層的便攜電話(huà)向用戶(hù)進(jìn)行信息的通知。
[0736]另外,可以考慮在帶有G裝置的設(shè)備間的通信的登記、認(rèn)證中使用附屬于兩設(shè)備的否FC的方法。此外,在某個(gè)設(shè)備中沒(méi)有NFC的情況下,可以考慮作為登記模式而降低G電波的輸出以使得僅在10?20cm程度的距離下能夠通信、在將雙方的設(shè)備靠近而通信成功的情況下進(jìn)行G裝置間的通信的登記、認(rèn)證的方法。
[0737]此外,信息源設(shè)備(在本圖中是電灶)只要具備G裝置,也可以是電灶以外的設(shè)備。
[0738]此外,進(jìn)行信息源設(shè)備和信息通知設(shè)備(在本圖中是2層的便攜電話(huà))的中繼的設(shè)備(在本圖中是3層的便攜電話(huà))只要能夠?qū)電波和家庭內(nèi)網(wǎng)絡(luò)訪(fǎng)問(wèn),也可以不是便攜電話(huà),而是個(gè)人計(jì)算機(jī)、空調(diào)或智能電表等的設(shè)備。
[0739]此外,信息通知設(shè)備只要能夠向家庭內(nèi)網(wǎng)絡(luò)訪(fǎng)問(wèn)、能夠使用畫(huà)面顯示或聲音輸出等進(jìn)行向用戶(hù)的通知,也可以不是便攜電話(huà),而是個(gè)人計(jì)算機(jī)或電視機(jī)等的設(shè)備。
[0740]圖61是表示遠(yuǎn)程的便攜電話(huà)對(duì)用戶(hù)通知信息的圖。具體而言,圖61表示從帶有G裝置的空調(diào)對(duì)帶有G裝置的宅內(nèi)的便攜電話(huà)發(fā)送信息、從宅內(nèi)的便攜電話(huà)通過(guò)因特網(wǎng)或載波通信網(wǎng)對(duì)遠(yuǎn)程的便攜電話(huà)發(fā)送信息、用遠(yuǎn)程的便攜電話(huà)向用戶(hù)通知信息。
[0741]另外,信息源設(shè)備(在本圖中是空調(diào))只要具備G裝置,也可以是電灶以外的設(shè)備。
[0742]此外,進(jìn)行信息源設(shè)備和信息通知設(shè)備(在本圖中是遠(yuǎn)程的便攜電話(huà))的中繼的設(shè)備(在本圖中是宅內(nèi)的便攜電話(huà))只要能夠?qū)電波和因特網(wǎng)或載波通信網(wǎng)訪(fǎng)問(wèn),也可以不是便攜電話(huà),而是個(gè)人計(jì)算機(jī)、空調(diào)或智能電表等的設(shè)備。
[0743]另外,信息通知設(shè)備只要能夠?qū)σ蛱鼐W(wǎng)或載波通信網(wǎng)訪(fǎng)問(wèn)、能夠使用畫(huà)面顯示或聲音輸出等進(jìn)行向用戶(hù)的通知,也可以不是便攜電話(huà),而是個(gè)人計(jì)算機(jī)或電視機(jī)等的設(shè)備。
[0744]圖62是表示遠(yuǎn)程的便攜電話(huà)向用戶(hù)進(jìn)行信息的通知的圖。具體而言,圖62表示,帶有G裝置的電視機(jī)識(shí)別沒(méi)有G裝置的電灶的通知音,電視機(jī)經(jīng)由G電波向帶有G裝置的宅內(nèi)的便攜電話(huà)發(fā)送信息,從宅內(nèi)的便攜電話(huà)經(jīng)由因特網(wǎng)或載波通信網(wǎng)向遠(yuǎn)程的便攜電話(huà)發(fā)送信息,遠(yuǎn)程的便攜電話(huà)向用戶(hù)進(jìn)行信息的通知。
[0745]另外,信息源設(shè)備(在本圖中是電灶)如果是其他設(shè)備也同樣,通知識(shí)別設(shè)備(在本圖中是電視機(jī))識(shí)別信息源設(shè)備的通知的方法如果不是聲音而是發(fā)光狀態(tài)等也是同樣的。
[0746]此外,通知識(shí)別設(shè)備也即使是帶有G裝置的其他設(shè)備也同樣。此外,進(jìn)行通知識(shí)別設(shè)備和信息通知設(shè)備(在本圖中是遠(yuǎn)程的便攜電話(huà))的中繼的設(shè)備(在本圖中是宅內(nèi)的便攜電話(huà))只要能夠?qū)電波和因特網(wǎng)或載波通信網(wǎng)訪(fǎng)問(wèn),也可以不是便攜電話(huà),而是個(gè)人計(jì)算機(jī)、空調(diào)或智能電表等的設(shè)備。
[0747]另外,信息通知設(shè)備只要能夠?qū)σ蛱鼐W(wǎng)或載波通信網(wǎng)訪(fǎng)問(wèn)、能夠使用畫(huà)面顯示或聲音輸出等進(jìn)行向用戶(hù)的通知,也可以不是便攜電話(huà),而是個(gè)人計(jì)算機(jī)或電視機(jī)等的設(shè)備。
[0748]此外,圖63是在與圖62同樣的情況下、代替進(jìn)行通知識(shí)別設(shè)備(在本圖中是2層的電視機(jī))和信息通知設(shè)備(在本圖中是遠(yuǎn)程的便攜電話(huà))的中繼的設(shè)備(在圖62中是宅內(nèi)的便攜電話(huà))而由2層的電視機(jī)發(fā)揮中繼設(shè)備的作用的情況下的圖。
[0749]根據(jù)以上,本實(shí)施方式的裝置實(shí)現(xiàn)以下的功能。
[0750]?通過(guò)應(yīng)用的利用來(lái)學(xué)習(xí)用戶(hù)的聲音特性的功能
[0751]?在能夠從便攜電話(huà)通信、具有集音功能的設(shè)備中、找到能夠?qū)谋銛y電話(huà)發(fā)出的聲音集音的集音設(shè)備的功能
[0752]?在能夠從便攜電話(huà)通信、具有集音功能的設(shè)備中、找到能夠?qū)碾娮釉O(shè)備發(fā)出的聲音集音的集音設(shè)備的功能
[0753]?將由集音設(shè)備集音的聲音原樣或?qū)⒙曇糇R(shí)別結(jié)果向便攜電話(huà)發(fā)送的功能
[0754]?將環(huán)境音的特性解析、使聲音識(shí)別的精度提高的功能
[0755]?從DB取得能夠從用戶(hù)擁有的設(shè)備輸出的聲音、使聲音識(shí)別的精度提高的功能
[0756]?在能夠從便攜電話(huà)通信、具有集音功能的設(shè)備中、找到便攜電話(huà)或集音設(shè)備能夠?qū)脑撛O(shè)備發(fā)出的聲音集音的聲音輸出設(shè)備的功能
[0757]?取得從聲音輸出設(shè)備輸出的聲音數(shù)據(jù)、通過(guò)考慮傳送特性而從集音聲音中減除、從集音聲音中將不需要的聲音消除的功能
[0758]?接受烹調(diào)烹飪法的參數(shù)輸入、從服務(wù)器取得對(duì)用戶(hù)進(jìn)行指示的烹調(diào)次序、和用來(lái)控制烹調(diào)設(shè)備的控制數(shù)據(jù)的功能
[0759]?基于設(shè)備能夠輸出的聲音的數(shù)據(jù)設(shè)定設(shè)備發(fā)出的通知音、以使便攜電話(huà)或集音設(shè)備容易識(shí)別的功能
[0760]?通過(guò)基于用戶(hù)的聲音特性調(diào)整識(shí)別功能、使用戶(hù)聲音的識(shí)別精度提高的功能
[0761]?使用多個(gè)集音設(shè)備識(shí)別用戶(hù)的聲音的功能
[0762]?使用多個(gè)集音設(shè)備識(shí)別電子設(shè)備的通知音的功能
[0763]?經(jīng)由便攜電話(huà)和電子設(shè)備的非接觸IC卡等、僅通過(guò)一次的操作、為了進(jìn)行一系列的作業(yè)而從電子設(shè)備得到需要的信息、對(duì)電灶進(jìn)行設(shè)定的功能
[0764]?在從便攜電話(huà)能夠通信的設(shè)備中,使用照相機(jī)或麥克風(fēng)、人感傳感器等的能夠探知用戶(hù)的設(shè)備探索用戶(hù)、將用戶(hù)的當(dāng)前位置向便攜電話(huà)發(fā)送或向DB保存的功能
[0765]?使用保存在DB中的用戶(hù)位置、從存在于附近的設(shè)備對(duì)用戶(hù)進(jìn)行通知的功能
[0766]?根據(jù)便攜電話(huà)的狀態(tài)(操作狀態(tài)、傳感器值、充電狀態(tài)、數(shù)據(jù)鏈路狀態(tài)等)推測(cè)在便攜電話(huà)的附近是否存在用戶(hù)的功能
[0767]另外,在圖22到圖52的處理中,如果分別將聲音數(shù)據(jù)改讀作發(fā)光數(shù)據(jù)(頻率或亮度等)、將聲音輸出改讀作發(fā)光、將集音改讀作受光,也能夠?qū)崿F(xiàn)同樣的功能。
[0768]此外,在本實(shí)施方式中以電灶為例,但發(fā)出識(shí)別的通知音的電子設(shè)備如果不是電灶,而改變?yōu)橄匆聶C(jī)或炊飯機(jī)、清掃機(jī)、電冰箱、空氣凈化機(jī)、熱水壺、餐具清洗干燥機(jī)、空調(diào)、個(gè)人計(jì)算機(jī)、便攜電話(huà)、電視機(jī)、汽車(chē)、電話(huà)、郵件收信裝置等,也有同樣的效果。
[0769]此外,在本實(shí)施方式中,電灶、便攜電話(huà)、和電視機(jī)等的向用戶(hù)進(jìn)行通知的設(shè)備直接進(jìn)行通信,但在直接的通信中存在不良狀況的情況下,也可以經(jīng)過(guò)其他設(shè)備間接地進(jìn)行通信。
[0770]此外,在本實(shí)施方式中,設(shè)想了主要利用家庭LAN的通信,但如果是經(jīng)由設(shè)備彼此的直接無(wú)線(xiàn)通信、因特網(wǎng)或載波通信網(wǎng)的通信的情況,也能夠?qū)崿F(xiàn)同樣的功能。
[0771]此外,在本實(shí)施方式中,將使用者的場(chǎng)所通過(guò)從便攜電話(huà)的一下子的詢(xún)問(wèn)、用TV的照相機(jī)等進(jìn)行人物識(shí)別,向本人的便攜電話(huà)加密發(fā)送,所以具有防止個(gè)人信息的泄漏的效果。在家中有多個(gè)人的情況下,通過(guò)將空調(diào)或空氣凈化機(jī)、電冰箱的人感傳感器的數(shù)據(jù)放置到便攜設(shè)備等的位置管理數(shù)據(jù)庫(kù)中,通過(guò)隨著識(shí)別了一次的操作者的移動(dòng)用傳感器跟蹤,也能夠推測(cè)操作者的位置。
[0772]另外,在用戶(hù)持有具備陀螺儀或方位計(jì)的便攜電話(huà)的情況下,可以將所確定的位置數(shù)據(jù)登記到用戶(hù)位置數(shù)據(jù)庫(kù)中。
[0773]此外,當(dāng)操作者將便攜設(shè)備放置時(shí),首先,由于物理傳感器的運(yùn)動(dòng)在一定期間中靜止,所以能夠檢測(cè)到該情況。接著離開(kāi)的情況,使用家電或照明器具的人感傳感器或按鈕操作、TV等的照相機(jī)、便攜設(shè)備的麥克風(fēng)等檢測(cè)。并且,將其位置向便攜設(shè)備或家內(nèi)的服務(wù)器的用戶(hù)位置數(shù)據(jù)庫(kù)登記。
[0774]如以上這樣,根據(jù)實(shí)施方式4,能夠?qū)崿F(xiàn)能夠進(jìn)行設(shè)備間的通信的信息通信裝置(識(shí)別裝置)。
[0775]具體而言,本實(shí)施方式的信息通信裝置也可以包括在從操作終端能夠通信的電子設(shè)備中探索具有集音功能的電子設(shè)備(集音設(shè)備)、利用上述集音設(shè)備的集音功能識(shí)別別的電子設(shè)備的通知音的識(shí)別裝置。
[0776]這里,該識(shí)別裝置還可以是利用僅能夠?qū)牟僮鹘K端發(fā)出的信號(hào)音集音的集音設(shè)備的集音功能的識(shí)別裝置。
[0777]此外,本實(shí)施方式的信息通信裝置也可以包括在從操作終端能夠通信的電子設(shè)備中探索具有集音功能的電子設(shè)備(集音設(shè)備)、將上述聲音輸出設(shè)備與上述集音設(shè)備之間的聲音傳送特性解析而取得上述聲音輸出設(shè)備的輸出聲音數(shù)據(jù)、根據(jù)上述聲音傳送特性和上述輸出聲音數(shù)據(jù)、從集音聲音中將從上述聲音輸出設(shè)備輸出的聲音消除的集音裝置。
[0778]此外,本實(shí)施方式的信息通信裝置也可以包括調(diào)整想要識(shí)別通知音的電子設(shè)備的通知音、以使其不會(huì)被環(huán)境音掩埋的識(shí)別裝置。
[0779]此外,本實(shí)施方式的信息通信裝置也可以是,將用戶(hù)擁有的電子設(shè)備(擁有電子設(shè)備)、擁有電子設(shè)備輸出的聲音的數(shù)據(jù)和擁有電子設(shè)備的位置數(shù)據(jù)保持在數(shù)據(jù)庫(kù)中,包括調(diào)整上述想要識(shí)別的電子設(shè)備的上述通知音、以便容易區(qū)別擁有電子設(shè)備輸出的聲音和想要通知音的電子設(shè)備的通知音的識(shí)別裝置。
[0780]這里,該識(shí)別裝置還可以是調(diào)整聲音識(shí)別處理、以便容易區(qū)別擁有電子設(shè)備輸出的聲音和想要識(shí)別通知音的電子設(shè)備的通知音的識(shí)別裝置。
[0781]此外,本實(shí)施方式的信息通信裝置也可以包括利用操作終端的操作狀態(tài)、物理傳感器的傳感器值、數(shù)據(jù)鏈路狀態(tài)和充電狀態(tài)、識(shí)別上述操作終端與操作者的位置是否較近的識(shí)別裝置。
[0782]這里,該識(shí)別裝置還可以是利用能夠從上述操作終端通信的電子設(shè)備的操作狀態(tài)、照相機(jī)、麥克風(fēng)、人感傳感器、保持在數(shù)據(jù)庫(kù)中的上述電子設(shè)備的位置數(shù)據(jù)識(shí)別用戶(hù)的位置的識(shí)別裝置。
[0783]此外,該上述識(shí)別裝置還可以包含在信息通知裝置中,所述信息通知裝置利用上述用戶(hù)位置的識(shí)別結(jié)果、和保持在數(shù)據(jù)庫(kù)中的、具有能夠通過(guò)畫(huà)面顯示或聲音輸出等的手段向上述用戶(hù)通知的功能的電子設(shè)備(通知設(shè)備)的位置數(shù)據(jù),使用能夠向上述用戶(hù)通知的上述通知設(shè)備對(duì)用戶(hù)進(jìn)行信息的通知。[0784]另外,這些全局的或具體的技術(shù)方案也可以由系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或記錄媒體實(shí)現(xiàn),也可以通過(guò)系統(tǒng)、方法、集成電路、計(jì)算機(jī)程序或記錄媒體的任意的組合實(shí)現(xiàn)。
[0785](實(shí)施方式5)
[0786]當(dāng)前,在無(wú)線(xiàn)通信中研究了各種各樣的簡(jiǎn)單認(rèn)證方式。例如,在由W1-Fi聯(lián)盟制定的無(wú)線(xiàn)LAN的WPS中,規(guī)定了按鈕方式、PIN輸入方式、NFC方式等。在無(wú)線(xiàn)的各種各樣的簡(jiǎn)單認(rèn)證方式中,對(duì)于正使用設(shè)備的用戶(hù)是否要進(jìn)行認(rèn)證,通過(guò)限定時(shí)間、或者確定處于能夠直接接觸到雙方的設(shè)備上來(lái)判斷,進(jìn)行認(rèn)證。
[0787]但是,限定時(shí)間的方法在有惡意的用戶(hù)處于某種程度接近的距離中的情況下不能說(shuō)是安全的。此外,在家電設(shè)備等的固定放置設(shè)備中,有直接碰觸較困難或較麻煩的情況。
[0788]所以,在本實(shí)施方式中,說(shuō)明通過(guò)在無(wú)線(xiàn)認(rèn)證中使用采用可視光的通信、確定要進(jìn)行認(rèn)證的用戶(hù)確實(shí)處于房間內(nèi)、簡(jiǎn)單且安全地進(jìn)行家電設(shè)備的無(wú)線(xiàn)認(rèn)證的方法。
[0789]圖64是表不本實(shí)施方式的宅內(nèi)的環(huán)境的例子的圖。圖65是表不本實(shí)施方式的家電設(shè)備與智能電話(huà)的通信的例子的圖。圖66是表示本實(shí)施方式的發(fā)送側(cè)裝置的結(jié)構(gòu)的圖。圖67是表示本實(shí)施方式的接收側(cè)裝置的結(jié)構(gòu)的圖。圖64?圖67是與圖1?圖4同樣的圖,詳細(xì)的說(shuō)明省略。
[0790]宅內(nèi)環(huán)境可以考慮圖64所示那樣的、將用戶(hù)在廚房中拿持的平板電腦與處于起居室中的TV認(rèn)證那樣的環(huán)境。兩者是能夠連接到無(wú)線(xiàn)LAN的終端,假設(shè)安裝了 WPS模組。
[0791]圖68是在圖64中、發(fā)送側(cè)終端(TV)與接收側(cè)終端(平板電腦)使用光通信進(jìn)行無(wú)線(xiàn)LAN認(rèn)證的情況下的順序圖。以下,對(duì)圖68進(jìn)行說(shuō)明。
[0792]首先,例如圖66所示那樣的發(fā)送側(cè)終端制作隨機(jī)數(shù)(步驟5001a)。接著,向WPS的寄存器登記(步驟5001b)。進(jìn)而,如登記在寄存器中的隨機(jī)數(shù)的樣式那樣使發(fā)光元件發(fā)光(步驟5001c)。
[0793]另一方面,在發(fā)送側(cè)裝置的發(fā)光元件發(fā)光的期間中,例如在圖67所示那樣的接收側(cè)裝置中,以光認(rèn)證模式使照相機(jī)起動(dòng)。這里,所謂光認(rèn)證模式,是能夠識(shí)別發(fā)光元件為認(rèn)證用而發(fā)光的模式,是指能夠與發(fā)光側(cè)的周期匹配而攝影的運(yùn)動(dòng)圖像攝影模式。
[0794]S卩,首先,用戶(hù)將發(fā)送側(cè)終端的發(fā)光元件攝影(步驟5001d)。接著,接收側(cè)終端通過(guò)攝影而受光隨機(jī)數(shù)(步驟5001e)。接著,受光到隨機(jī)數(shù)的接收側(cè)終端將隨機(jī)數(shù)作為WPS的PIN輸入(步驟5001f)。
[0795]這里,成為了由雙方共享PIN的狀態(tài)的收發(fā)終端按照WPS中的規(guī)定,進(jìn)行認(rèn)證處理(步驟 500 Ig)。
[0796]接著,如果認(rèn)證完成,則發(fā)送側(cè)終端從寄存器將隨機(jī)數(shù)刪除,使得不會(huì)受理來(lái)自多個(gè)終端的認(rèn)證(500 Ih)。
[0797]另外,本方式并不限于無(wú)線(xiàn)LAN的認(rèn)證,能夠應(yīng)用到使用共享密鑰的無(wú)線(xiàn)的認(rèn)證方式全部中。
[0798]此外,本方式并不限定于無(wú)線(xiàn)的認(rèn)證方式。對(duì)于例如在TV與平板電腦間的兩者中搭載的應(yīng)用的認(rèn)證也能夠適用。
[0799]圖69是本實(shí)施方式的進(jìn)行應(yīng)用中的認(rèn)證的情況下的順序圖。以下,說(shuō)明圖69。
[0800]首先,發(fā)送側(cè)終端根據(jù)終端的狀態(tài)制作發(fā)送側(cè)ID (步驟5002a)。這里,發(fā)送側(cè)ID既可以是隨機(jī)數(shù),也可以是用于加密的密鑰。此外,也可以包含發(fā)送側(cè)終端的終端ID(MAC地址、IP地址)。接著,發(fā)送側(cè)終端如發(fā)送側(cè)ID的樣式那樣發(fā)光(步驟5002b)。
[0801]另一方面,接收側(cè)裝置以與無(wú)線(xiàn)認(rèn)證的情況相同的次序受光發(fā)送側(cè)ID(步驟5002f)。接著,接收側(cè)裝置如果接收到發(fā)送側(cè)ID,則制作能夠證明已接收到發(fā)送側(cè)ID的接收側(cè)ID (步驟5002g)。例如,也可以是用發(fā)送側(cè)ID加密的接收側(cè)終端的終端ID。此外,也可以包括在接收側(cè)終端中起動(dòng)的應(yīng)用的進(jìn)程ID或口令。接著,接收側(cè)終端將接收側(cè)ID通過(guò)無(wú)線(xiàn)進(jìn)行廣播(步驟5002h)。另外,在發(fā)送側(cè)ID中包含發(fā)送側(cè)終端的終端ID的情況下也可以進(jìn)行單播。
[0802]接著,用無(wú)線(xiàn)接收到接收側(cè)ID的5002c發(fā)送側(cè)終端與發(fā)送來(lái)所接收到的接收側(cè)ID的終端使用相互共享的發(fā)送側(cè)ID進(jìn)行認(rèn)證(步驟5002d)。
[0803]圖70是表示本實(shí)施方式的發(fā)送側(cè)終端的動(dòng)作的流程圖。以下,對(duì)圖70進(jìn)行說(shuō)明。
[0804]首先,發(fā)送側(cè)終端發(fā)光與終端的狀態(tài)對(duì)應(yīng)的ID (步驟5003a)。
[0805]接著,以與ID對(duì)應(yīng)的樣式發(fā)光(步驟5003b)。
[0806]接著,確認(rèn)是否有與發(fā)光的ID對(duì)應(yīng)的無(wú)線(xiàn)應(yīng)答(步驟5003c)。在有應(yīng)答的情況下(步驟5003c中是),對(duì)應(yīng)答來(lái)的終端進(jìn)行認(rèn)證處理(步驟5003d)。另外,在步驟5003c中,在沒(méi)有應(yīng)答的情況下,等待過(guò)期時(shí)間(步驟5003i),顯示無(wú)應(yīng)答并結(jié)束(步驟5003j)。
[0807]接著,在步驟5003e中確認(rèn)認(rèn)證處理是否成功,在認(rèn)證處理成功的情況下(步驟5003e中是),如果在發(fā)光的ID中包含認(rèn)證以外的命令(步驟5003f中是),則進(jìn)行遵循命令的處理(步驟5003g)。
[0808]另外,在步驟5003e中認(rèn)證失敗的情況下,顯示認(rèn)證錯(cuò)誤(步驟5003h)并結(jié)束。
[0809]圖71是表示本實(shí)施方式的接收側(cè)終端的動(dòng)作的流程圖。以下,對(duì)圖71進(jìn)行說(shuō)明。
[0810]首先,接收側(cè)終端以光認(rèn)證模式將照相機(jī)起動(dòng)(步驟5004a)。
[0811]接著,確認(rèn)是否能夠以特定樣式受光到光(步驟5004b),在能夠確認(rèn)的情況下(步驟5004b中是),制作能夠證明接收到了發(fā)送側(cè)ID的接收側(cè)ID (步驟5004c)。另外,在不能確認(rèn)的情況下(步驟5004b中否),等待過(guò)期時(shí)間(步驟5004i中是),顯示過(guò)期(步驟5004j)并結(jié)束。
[0812]接著,確認(rèn)在發(fā)送側(cè)終端中是否包含發(fā)送終端的ID (步驟5004k),在包含的情況下(步驟5004k中是),向該終端將接收側(cè)ID單播發(fā)送(步驟5004d)。另一方面,在不包含的情況下(步驟5004k中否)進(jìn)行廣播(步驟50041)。
[0813]接著,從發(fā)送終端側(cè)開(kāi)始認(rèn)證處理(步驟5004e),在認(rèn)證處理成功的情況下(步驟5004e中是),判斷在受光到的ID中是否包含有命令(步驟5004f)。在步驟5004f中判斷為包含的情況下(步驟5004f中是),進(jìn)行與ID對(duì)應(yīng)的處理(步驟5004g)。
[0814]另外,在步驟5004e中認(rèn)證失敗的情況下(步驟5004e中否),顯示認(rèn)證錯(cuò)誤(步驟5004h)并結(jié)束。
[0815]以上,根據(jù)本實(shí)施方式,通過(guò)在無(wú)線(xiàn)認(rèn)證中使用利用可視光的通信,能夠確定要認(rèn)證的用戶(hù)確實(shí)處于房間內(nèi),簡(jiǎn)單且安全地進(jìn)行家電設(shè)備的無(wú)線(xiàn)認(rèn)證。
[0816](實(shí)施方式6)
[0817]在上述實(shí)施方式中,說(shuō)明了使用NFC通信及高速無(wú)線(xiàn)通信進(jìn)行數(shù)據(jù)交換時(shí)的流程,但并不限定于此。本實(shí)施方式當(dāng)然也可以設(shè)為例如圖72?圖74所示那樣的流程。[0818]圖72是本實(shí)施方式的移動(dòng)AV終端I向移動(dòng)AV終端2發(fā)送數(shù)據(jù)的順序圖。具體而言,圖72表示使用NFC —無(wú)線(xiàn)LAN無(wú)線(xiàn)通信的數(shù)據(jù)收發(fā)的順序圖。以下,說(shuō)明圖72。
[0819]移動(dòng)AV終端I首先在畫(huà)面上顯示作為向移動(dòng)AV終端2發(fā)送的對(duì)象的數(shù)據(jù)。
[0820]這里,如果移動(dòng)AV終端I和移動(dòng)AV終端2通過(guò)使相互的設(shè)備接觸而進(jìn)行NFC通信,則移動(dòng)AV終端I在畫(huà)面上發(fā)出是否進(jìn)行數(shù)據(jù)發(fā)送的確認(rèn)畫(huà)面。該確認(rèn)畫(huà)面既可以是與“是否發(fā)送數(shù)據(jù)?”的文字一起向用戶(hù)要求“是/否”的選擇的畫(huà)面,也可以為通過(guò)再一次接觸在移動(dòng)AV終端I的畫(huà)面上而開(kāi)始數(shù)據(jù)發(fā)送那樣的界面。
[0821 ] 在數(shù)據(jù)發(fā)送意思確認(rèn)為OK的情況下,移動(dòng)AV終端I和移動(dòng)AV終端2通過(guò)NFC通信交換發(fā)送的數(shù)據(jù)的信息及用來(lái)建立高速無(wú)線(xiàn)通信的信息。發(fā)送的數(shù)據(jù)的信息也可以通過(guò)無(wú)線(xiàn)LAN通信進(jìn)行。關(guān)于無(wú)線(xiàn)LAN通信建立的信息既可以是通信頻道或SSID、加密密鑰信息,也可以是交換隨機(jī)生成的ID信息、通過(guò)該信息建立安全的通信路的方式。
[0822]如果無(wú)線(xiàn)LAN通信建立,則移動(dòng)AV終端I和移動(dòng)AV終端2進(jìn)行通過(guò)無(wú)線(xiàn)LAN通信的數(shù)據(jù)通信,將移動(dòng)AV終端I的發(fā)送對(duì)象的數(shù)據(jù)向移動(dòng)AV終端2發(fā)送。
[0823]接著,使用圖73、圖74,進(jìn)行以移動(dòng)AV終端I及移動(dòng)AV終端2的畫(huà)面的變遷為中心的說(shuō)明。圖73是本實(shí)施方式的移動(dòng)AV終端I向移動(dòng)AV終端2發(fā)送數(shù)據(jù)的情況下的畫(huà)面變遷圖。圖74是本實(shí)施方式的移動(dòng)AV終端I向移動(dòng)AV終端2發(fā)送數(shù)據(jù)的情況下的畫(huà)面變遷圖。
[0824]在圖73及圖74中,在移動(dòng)AV終端I中用戶(hù)首先將再現(xiàn)運(yùn)動(dòng)圖像靜止圖像的應(yīng)用起動(dòng)。該應(yīng)用將處于移動(dòng)AV終端I內(nèi)的靜止圖像或運(yùn)動(dòng)圖像數(shù)據(jù)顯示。
[0825]這里,通過(guò)使移動(dòng)AV終端I與移動(dòng)AV終端2準(zhǔn)接觸而進(jìn)行NFC通信。該NFC通信是用來(lái)在移動(dòng)AV終端I中開(kāi)始靜止圖像或運(yùn)動(dòng)圖像數(shù)據(jù)的交換的處理。
[0826]首先,如果移動(dòng)AV終端I和移動(dòng)AV終端2通過(guò)NFC通信識(shí)別數(shù)據(jù)交換的開(kāi)始,則在移動(dòng)AV終端I的畫(huà)面上顯示是否可以數(shù)據(jù)發(fā)送的確認(rèn)畫(huà)面。另外,該確認(rèn)畫(huà)面如圖73那樣,既可以是為了數(shù)據(jù)發(fā)送開(kāi)始而使用戶(hù)接觸畫(huà)面那樣的界面,也可以是使用戶(hù)以是/否選擇數(shù)據(jù)發(fā)送可否的界面。在數(shù)據(jù)發(fā)送開(kāi)始判斷中為是的情況下,即在移動(dòng)AV終端I向移動(dòng)AV終端2發(fā)送數(shù)據(jù)的情況下,移動(dòng)AV終端I向移動(dòng)AV終端2發(fā)送交換的數(shù)據(jù)的信息、和關(guān)于通過(guò)無(wú)線(xiàn)LAN的高速無(wú)線(xiàn)通信開(kāi)始的信息。另外,該交換的數(shù)據(jù)的信息也可以使用高速無(wú)線(xiàn)通信進(jìn)行。
[0827]接著,如果移動(dòng)AV終端I及移動(dòng)AV終端2收發(fā)關(guān)于通過(guò)無(wú)線(xiàn)LAN的高速無(wú)線(xiàn)通信開(kāi)始的信息,則進(jìn)行用來(lái)建立無(wú)線(xiàn)LAN通信的連接的處理。該處理包括以怎樣的頻道進(jìn)行通信、在通信拓?fù)渖夏膫€(gè)為母終端、哪個(gè)為子終端、口令信息或相互的SSID或終端信息的交換等。
[0828]接著,如果建立無(wú)線(xiàn)LAN通信的連接,則移動(dòng)AV終端I及移動(dòng)AV終端2發(fā)送通過(guò)無(wú)線(xiàn)LAN通信的數(shù)據(jù)。在數(shù)據(jù)發(fā)送中,移動(dòng)AV終端I如通常那樣顯示運(yùn)動(dòng)圖像的再現(xiàn)畫(huà)面,作為接收數(shù)據(jù)側(cè)的移動(dòng)AV終端2顯示表示數(shù)據(jù)接收中的畫(huà)面。這是因?yàn)?,如果?duì)移動(dòng)AV終端I顯示數(shù)據(jù)發(fā)送中的畫(huà)面則不再能進(jìn)行其他處理,所以通過(guò)將數(shù)據(jù)發(fā)送在后臺(tái)進(jìn)行,具有用戶(hù)的方便性提高的優(yōu)點(diǎn)。此外,移動(dòng)AV終端2是正在接收數(shù)據(jù)中,通過(guò)在畫(huà)面上顯示表示數(shù)據(jù)接收中的畫(huà)面以便能夠?qū)⒔邮盏降臄?shù)據(jù)立即顯示,具有在數(shù)據(jù)的接收完成時(shí)能夠立即將接受診斷的數(shù)據(jù)顯示的優(yōu)點(diǎn)。[0829]最后,移動(dòng)AV終端2如果數(shù)據(jù)的接收完成,則將接受診斷的數(shù)據(jù)顯示到畫(huà)面上。
[0830]圖75?圖77是表示本實(shí)施方式的移動(dòng)AV終端I是數(shù)字照相機(jī)的情況下的系統(tǒng)概略圖。
[0831]如圖75所示,即使移動(dòng)AV終端I是數(shù)字照相機(jī),本實(shí)施的便攜終端也當(dāng)然能夠使用。
[0832]此外,在移動(dòng)AV終端I是數(shù)字照相機(jī)的情況下,一般數(shù)字照相機(jī)具有通過(guò)無(wú)線(xiàn)LAN的因特網(wǎng)訪(fǎng)問(wèn)的手段、但不具有通過(guò)移動(dòng)通信進(jìn)行的因特網(wǎng)訪(fǎng)問(wèn)的手段的情況較多。
[0833]因此,如圖76或圖77那樣,優(yōu)選的是構(gòu)成為,數(shù)字照相機(jī)(移動(dòng)AV終端I)能夠進(jìn)行無(wú)線(xiàn)LAN通信的環(huán)境下,將通過(guò)無(wú)線(xiàn)LAN攝影的圖像數(shù)據(jù)向照片共享服務(wù)發(fā)送,在不能進(jìn)行無(wú)線(xiàn)LAN通信的環(huán)境中,向移動(dòng)AV終端2首先使用無(wú)線(xiàn)LAN發(fā)送數(shù)據(jù),移動(dòng)AV終端2將接受了診斷的數(shù)據(jù)原樣通過(guò)便攜電話(huà)通信向照片共享服務(wù)發(fā)送。
[0834]無(wú)線(xiàn)LAN通信與便攜電話(huà)通信相比是高速的,所以通過(guò)在能夠進(jìn)行無(wú)線(xiàn)LAN通信的情況下進(jìn)行無(wú)線(xiàn)LAN通信,能夠高速地將照片向照片共享服務(wù)發(fā)送。此外,便攜電話(huà)通信網(wǎng)與無(wú)線(xiàn)LAN通信網(wǎng)相比服務(wù)區(qū)域一般較廣,所以在沒(méi)有無(wú)線(xiàn)LAN環(huán)境的情況下,通過(guò)具有將移動(dòng)AV終端2作為中繼通過(guò)便攜電話(huà)通信向照片共享服務(wù)發(fā)送數(shù)據(jù)的功能,能夠在各種各樣的場(chǎng)所立即將照片向照片共享服務(wù)發(fā)送。
[0835]以上,根據(jù)本實(shí)施方式,能夠使用NFC通信及高速無(wú)線(xiàn)通信進(jìn)行數(shù)據(jù)交換。
[0836]以上,基于實(shí)施方式對(duì)有關(guān)本發(fā)明的一個(gè)或多個(gè)技術(shù)方案的信息通信裝置等進(jìn)行了說(shuō)明,但本發(fā)明并不限定于該實(shí)施方式。只要不脫離本發(fā)明的主旨,對(duì)本實(shí)施方式實(shí)施了本領(lǐng)域的技術(shù)人員想到的各種變形后的形態(tài)、或?qū)⒉煌膶?shí)施方式的構(gòu)成要素組合而構(gòu)建的形態(tài)也包含在本發(fā)明的一個(gè)或多個(gè)技術(shù)方案的范圍內(nèi)。
[0837]另外,在上述各實(shí)施方式中,各構(gòu)成要素也可以由專(zhuān)用的硬件構(gòu)成、或通過(guò)執(zhí)行適合于各構(gòu)成要素的軟件程序來(lái)實(shí)現(xiàn)。各構(gòu)成要素也可以通過(guò)CPU或處理器等的程序執(zhí)行部將記錄在硬盤(pán)或半導(dǎo)體存儲(chǔ)器等的記錄媒體中的軟件程序讀出并執(zhí)行來(lái)實(shí)現(xiàn)。
[0838](實(shí)施方式7)
[0839]以下,對(duì)實(shí)施方式7進(jìn)行說(shuō)明。
[0840](發(fā)光部的亮度的觀(guān)測(cè))
[0841]CMOS傳感器等的攝像元件不是I次進(jìn)行全部的像素的曝光的,而如圖78那樣,按照行(曝光行)以時(shí)間差進(jìn)行曝光,完成I張攝像圖像。
[0842]在攝像元件的整面上拍攝有發(fā)光部的狀態(tài)下,在將閃爍的發(fā)光部攝像的情況下,如圖79那樣,根據(jù)各曝光行是否拍攝有發(fā)光部的光,能夠識(shí)別以超過(guò)攝像幀速率的速度閃爍的發(fā)光部的閃爍的狀況。
[0843]通過(guò)該方法,以超過(guò)攝像幀速率的速度進(jìn)行信息的傳送。
[0844]在一張攝像圖像中,曝光時(shí)間不重疊的曝光行有20行,當(dāng)攝像的幀速率為30fps時(shí),能夠識(shí)別I毫秒周期的亮度變化。在曝光時(shí)間不重疊的曝光行有1000行的情況下,能夠識(shí)別3萬(wàn)分之I秒(約33微秒)周期的亮度變化。另外,曝光時(shí)間例如設(shè)定得比10毫秒短。
[0845]圖79表示一個(gè)曝光行的曝光完成后開(kāi)始下個(gè)曝光行的曝光的情況。
[0846]在此情況下,當(dāng)每I秒的幀數(shù)(幀速率)為f、構(gòu)成I圖像的曝光行數(shù)為I時(shí),如果根據(jù)各曝光行是否受光一定以上的光來(lái)傳送信息,則最大能夠以fl位每秒的速度傳送信
肩、O
[0847]另外,在不是按照行、而是按照像素以時(shí)間差進(jìn)行曝光的情況下,能夠更高速地進(jìn)行通信。
[0848]此時(shí),在每曝光行的像素?cái)?shù)是m像素、通過(guò)各像素是否受光一定以上的光來(lái)傳送信息的情況下,傳送速度最大為f Im位每秒。
[0849]如圖80那樣,如果能夠?qū)⒂砂l(fā)光部的發(fā)光帶來(lái)的各曝光行的曝光狀態(tài)用多個(gè)水平識(shí)別,則通過(guò)將發(fā)光部的發(fā)光時(shí)間以比各曝光行的曝光時(shí)間短的單位的時(shí)間控制,能夠傳送更多的信息。
[0850]在能夠?qū)⑵毓鉅顟B(tài)在Elv階段中識(shí)別的情況下,最大能夠以flElv位每秒的速度傳送信息。
[0851]此外,通過(guò)在與各曝光行的曝光的定時(shí)稍稍錯(cuò)開(kāi)的定時(shí)使發(fā)光部發(fā)光,能夠識(shí)別發(fā)信的基本周期。
[0852]圖81表示在一個(gè)曝光行的曝光完成之前開(kāi)始下個(gè)曝光行的曝光的情況。
[0853]在此情況下,根據(jù)各曝光行的明亮程度計(jì)算曝光時(shí)間,識(shí)別發(fā)光部的發(fā)光的狀態(tài)。
[0854]另外,在在通過(guò)亮度是否是閾值以上的2值判別各曝光行的明亮程度的情況下,為了識(shí)別不發(fā)光的狀態(tài),發(fā)光部必須將不發(fā)光的狀態(tài)持續(xù)各行的曝光時(shí)間以上的時(shí)間。
[0855]如圖82那樣,根據(jù)攝像裝置,也有存在不進(jìn)行曝光的時(shí)間(空白)的情況。
[0856]在存在空白的情況下,不能觀(guān)察該時(shí)間的發(fā)光部的亮度。
[0857]通過(guò)發(fā)光部將相同的信號(hào)反復(fù)發(fā)送兩次以上,或附加錯(cuò)誤校正碼,能夠防止由空白帶來(lái)的傳送損失。
[0858]發(fā)光部為了防止相同的信號(hào)總是在空白的期間中被發(fā)送,以與將圖像攝像的周期互素(relatively prime)的周期、或者比將圖像攝像的周期短的周期發(fā)送信號(hào)。
[0859](信號(hào)調(diào)制方式)
[0860]在輸送波中使用可視光的情況下,通過(guò)使發(fā)光部發(fā)光以將以人的視覺(jué)的時(shí)間分辨率(resolution) (5毫秒到20毫秒左右)為窗寬時(shí)的發(fā)光部的亮度的移動(dòng)平均值保持為一定,如圖83那樣,對(duì)人而言發(fā)送裝置的發(fā)光部看起來(lái)以均勻的亮度發(fā)光,同時(shí)接收裝置能夠觀(guān)察發(fā)光部的亮度變化。
[0861 ] 作為使發(fā)光部發(fā)光以將以人的視覺(jué)的時(shí)間分辨率為窗寬時(shí)的發(fā)光部的亮度的移動(dòng)平均值保持為一定那樣的調(diào)制方式,有圖84所示的調(diào)制方法。假設(shè)當(dāng)調(diào)制后的信號(hào)為0時(shí)不發(fā)光、為I時(shí)發(fā)光、在發(fā)送信號(hào)中沒(méi)有偏倚,則發(fā)光部的亮度的平均值為發(fā)光時(shí)的亮度的約50%。
[0862]另外,假設(shè)發(fā)光/不發(fā)光的切換與人的視覺(jué)的時(shí)間分辨率是足夠高速的。
[0863]作為使發(fā)光部發(fā)光以將以人的視覺(jué)的時(shí)間分辨率為窗寬時(shí)的發(fā)光部的亮度的移動(dòng)平均值保持為一定那樣的調(diào)制方式,有圖85所示的調(diào)制方法。假設(shè)當(dāng)調(diào)制后的信號(hào)為0時(shí)不發(fā)光、為I時(shí)發(fā)光、在發(fā)送信號(hào)中沒(méi)有偏倚,則發(fā)光部的亮度的平均值為發(fā)光時(shí)的亮度的約75%。
[0864]與圖84的調(diào)制方式相比,編碼效率為0.5是同等的,但能夠使平均亮度變高。
[0865]作為使發(fā)光部發(fā)光以將以人的視覺(jué)的時(shí)間分辨率為窗寬時(shí)的發(fā)光部的亮度的移動(dòng)平均值保持為一定那樣的調(diào)制方式,有圖86所示的調(diào)制方法。假設(shè)當(dāng)調(diào)制后的信號(hào)為O時(shí)不發(fā)光、為I時(shí)發(fā)光、在發(fā)送信號(hào)中沒(méi)有偏倚,則發(fā)光部的亮度的平均值為發(fā)光時(shí)的亮度的約87.5%。
[0866]與圖84、圖85所示的調(diào)制方式相比,編碼效率為0.375較差,但能夠?qū)⑵骄炼缺?br>
持得較高。
[0867]以下同樣,能夠進(jìn)行與編碼效率權(quán)衡(trade off)而使平均亮度變高的調(diào)制。
[0868]作為使發(fā)光部發(fā)光以將以人的視覺(jué)的時(shí)間分辨率為窗寬時(shí)的發(fā)光部的亮度的移動(dòng)平均值保持為一定那樣的調(diào)制方式,有圖87所示的調(diào)制方法。
[0869]假設(shè)當(dāng)調(diào)制后的信號(hào)為0時(shí)不發(fā)光、為I時(shí)發(fā)光、在發(fā)送信號(hào)中沒(méi)有偏倚,則發(fā)光部的亮度的平均值為發(fā)光時(shí)的亮度的約25%。
[0870]通過(guò)與圖85所示的調(diào)制方式等組合而周期性地使調(diào)制方式變化,能夠使發(fā)光部對(duì)于人或曝光時(shí)間較長(zhǎng)的攝像裝置而言看起來(lái)閃爍。
[0871]同樣,通過(guò)使調(diào)制方法變化,能夠使發(fā)光部對(duì)于人或曝光時(shí)間較長(zhǎng)的攝像裝置而言看起來(lái)一邊進(jìn)行任意的亮度變化一邊發(fā)光。
[0872]在輸送波中使用可視光的情況下,通過(guò)使發(fā)光部發(fā)光以使以人的視覺(jué)的時(shí)間分辨率為窗寬時(shí)的發(fā)光部的亮度的移動(dòng)平均值周期性地變化,如圖88那樣,對(duì)人而言可看到發(fā)信裝置的發(fā)光部閃爍或以任意的節(jié)奏變化,同時(shí)接收裝置能夠觀(guān)察發(fā)光信號(hào)。
[0873]如果使在背燈中使用LED光源的液晶TV的LED部發(fā)光,也能夠得到同樣的效果。在此情況下,通過(guò)至少降低光通信部的畫(huà)面部分的對(duì)比度、向白色靠近,能夠進(jìn)行錯(cuò)誤率較少的光通信。通過(guò)使整面或在通信中使用的畫(huà)面部分為白色,能夠提高通信速度。
[0874]在使用電視機(jī)的顯示器等作為發(fā)光部的情況下,通過(guò)將以人的視覺(jué)的時(shí)間分辨率為窗寬時(shí)的發(fā)光部的亮度的移動(dòng)平均值成為想要使人看到的圖像的亮度,如圖89那樣,對(duì)人而言能看到通常那樣的電視機(jī)的影像,同時(shí)接收裝置能夠觀(guān)察發(fā)光信號(hào)。
[0875]通過(guò)將設(shè)為攝像圖像每I幀的時(shí)間左右的窗寬時(shí)的發(fā)光部的亮度的移動(dòng)平均值調(diào)節(jié)為按照攝像幀傳送信號(hào)的情況下的信號(hào)的值,如圖90那樣,通過(guò)在從近距離攝像的情況下按照曝光行觀(guān)察發(fā)送裝置的發(fā)光狀態(tài)、在從遠(yuǎn)距離攝像的情況下按照攝像幀觀(guān)察發(fā)送裝置的發(fā)光狀態(tài),能夠以?xún)煞N速度進(jìn)行信號(hào)傳輸。
[0876]另外,在從近距離攝像的情況下,也能夠接收在從遠(yuǎn)距離攝像的情況下能夠接收的信號(hào)。
[0877]圖91是表不按照曝光時(shí)間怎樣觀(guān)察發(fā)光的圖。
[0878]由于攝像出的像素的亮度與將攝像元件曝光的時(shí)間的攝像對(duì)象的平均亮度成比例,所以如果曝光時(shí)間較短則如2217b那樣原樣觀(guān)察到發(fā)光樣式2217a,如果曝光時(shí)間較長(zhǎng),則如2217c、2217d、2217e那樣觀(guān)察。
[0879]另外,2217a為將圖85所示的調(diào)制方式分形地反復(fù)使用的調(diào)制方式。
[0880]通過(guò)利用這樣的發(fā)光樣式,能夠向具有曝光時(shí)間較短的攝像裝置的接收裝置發(fā)送許多信息,向具有曝光時(shí)間較長(zhǎng)的攝像裝置的接收裝置同時(shí)發(fā)送較少的信息。
[0881]接收裝置如果遍及曝光行的I行或一定數(shù)量的行而發(fā)光部推測(cè)位置的像素的亮度是一定以上則識(shí)別為接收到1,如果是一定以下則識(shí)別為接收到O。
[0882]I持續(xù)的情況與通常的(不發(fā)送信號(hào)而總是發(fā)亮)發(fā)光部沒(méi)有區(qū)別,0持續(xù)的情況與不存在發(fā)光部的情況沒(méi)有區(qū)別。
[0883]因此,發(fā)送裝置也可以在相同的數(shù)字連續(xù)一定數(shù)量的情況下發(fā)送不同的數(shù)字。
[0884]此外,也可以如圖92那樣,分為必定包含I和0的頭部和發(fā)送信號(hào)的體部而發(fā)送。在此情況下,相同的數(shù)字不超過(guò)5次連續(xù)出現(xiàn)。
[0885]在發(fā)光部處于不與I部分的曝光行相配的位置的情況下、或在存在空白的情況下,不能由接收裝置的攝像裝置捕捉發(fā)光部的全部的狀況。
[0886]因此,需要表示該信號(hào)是整體的哪個(gè)部分的信號(hào)。
[0887]為此,如圖93那樣,有將數(shù)據(jù)部和表示數(shù)據(jù)的位置的地址部一起發(fā)送的方法。
[0888]另外,為了在接收裝置中容易進(jìn)行信號(hào)的接收,優(yōu)選的是將把數(shù)據(jù)部和地址部加在一起的大小的發(fā)光樣式的長(zhǎng)度設(shè)定得足夠短,以將發(fā)光樣式用接收裝置攝像到一張攝像圖像中。
[0889]如圖94那樣,有發(fā)送裝置發(fā)送基準(zhǔn)部和數(shù)據(jù)部、接收裝置根據(jù)與接收到基準(zhǔn)部時(shí)的時(shí)刻的差識(shí)別數(shù)據(jù)的位置的方法。
[0890]如圖95那樣,有發(fā)送裝置將基準(zhǔn)部、地址樣式部和數(shù)據(jù)部發(fā)送、接收裝置根據(jù)處于基準(zhǔn)部的接著之處的地址樣式部得到數(shù)據(jù)部的數(shù)據(jù)和其位置的樣式、根據(jù)該樣式和接收到基準(zhǔn)部的時(shí)刻與接收到各數(shù)據(jù)時(shí)的時(shí)刻的差識(shí)別數(shù)據(jù)的位置的方法。
[0891]通過(guò)能夠利用多個(gè)種類(lèi)的地址樣式,不僅是均勻地發(fā)送數(shù)據(jù),可以將重要性較高的數(shù)據(jù)或應(yīng)先處理的數(shù)據(jù)先發(fā)送、或相比其他數(shù)據(jù)增加重復(fù)次數(shù)。
[0892]發(fā)光部不與全部的曝光行相配的情況下、或存在空白的情況下,不能由接收裝置的攝像裝置捕捉發(fā)光部的全部的狀況。
[0893]如圖96那樣,通過(guò)附加頭部,能夠檢測(cè)信號(hào)的劃分、檢測(cè)地址部或數(shù)據(jù)部。
[0894]在頭部的發(fā)光樣式中,使用在地址部或數(shù)據(jù)部中沒(méi)有出現(xiàn)的樣式。
[0895]例如,在使用表2200.2a的調(diào)制方式的情況下,可以使頭部的發(fā)光樣式為“0011”。
[0896]此外,如果使頭部的樣式為“ 11110011”,則平均亮度與其他部分相等,能夠抑制用人的眼睛觀(guān)察時(shí)的閃變。由于該頭部的冗余性較高,所以能夠在這里也疊加信息。例如,在頭部的樣式為“11100111”的情況下,可以表示正在發(fā)送裝置間發(fā)送通信的內(nèi)容等。
[0897]另外,為了在接收裝置中容易進(jìn)行信號(hào)的接收,優(yōu)選的是將把數(shù)據(jù)部、地址部和頭部加在一起的大小的發(fā)光樣式的長(zhǎng)度設(shè)定得足夠短,以將發(fā)光樣式用接收裝置攝像到一張攝像圖像中。
[0898]在圖97中,發(fā)送裝置通過(guò)優(yōu)先級(jí)決定信息的發(fā)送順序。
[0899]例如,使發(fā)送次數(shù)與優(yōu)先級(jí)成比例。
[0900]接收裝置在發(fā)送裝置的發(fā)光部沒(méi)有拍攝在接收裝置的攝像部全部中的情況下或有空白的情況下,不能連續(xù)接收信號(hào),所以發(fā)送的頻度越高則容易越快地接收。
[0901]圖98表示存在于附近的多個(gè)發(fā)送裝置同步發(fā)送信息的樣式。
[0902]通過(guò)多個(gè)發(fā)送裝置將共通信息同時(shí)發(fā)送,能夠看作一個(gè)較大的發(fā)送裝置,能夠用接收裝置的攝像部較大地?cái)z像,所以能夠?qū)⑿畔⒏?、從更遠(yuǎn)接收。
[0903]發(fā)送裝置在附近的發(fā)送裝置的發(fā)光部均勻發(fā)光(不發(fā)送信號(hào))的時(shí)間帶中單獨(dú)發(fā)送信息,以便不與存在于附近的發(fā)送裝置的發(fā)光樣式混淆。
[0904]發(fā)送裝置也可以通過(guò)用受光部受光存在于附近的發(fā)送信號(hào)的發(fā)光樣式,學(xué)習(xí)存在于附近的發(fā)送裝置的發(fā)光樣式,決定自身的發(fā)光樣式。此外,發(fā)送裝置也可以通過(guò)用受光部受光存在于附近的發(fā)送信號(hào)的發(fā)光樣式,由其他發(fā)送裝置的命令來(lái)決定自身的發(fā)光樣式。此外,發(fā)送裝置也可以按照集中控制裝置的命令決定發(fā)光樣式。
[0905](發(fā)光部的檢測(cè))
[0906]作為判斷在攝像圖像的哪個(gè)部分?jǐn)z像了發(fā)光部的方法,有如圖99那樣在與曝光行垂直的方向上計(jì)數(shù)發(fā)光部被攝像的行數(shù)、將發(fā)光部最多被攝像的列作為發(fā)光部存在的列的方法。
[0907]發(fā)光部的接近于端部的部分在受光的程度上有波動(dòng),容易弄錯(cuò)發(fā)光部是否被攝像的判斷,所以在發(fā)光部被攝像最多的列中也根據(jù)中央的列的像素的攝像結(jié)果將信號(hào)取出。
[0908]作為判斷在攝像圖像的哪個(gè)部分?jǐn)z像了發(fā)光部的方法,如圖100那樣,有按照曝光行求出將發(fā)光部攝像的部分的中點(diǎn)、推測(cè)在將求出的點(diǎn)連結(jié)的近似線(xiàn)(直線(xiàn)或二次曲線(xiàn))上存在發(fā)光部的方法。
[0909]也可以如圖101那樣,將前面的幀中的發(fā)光部的推測(cè)位置作為事前概率,根據(jù)當(dāng)前的幀的信息將發(fā)光部的推測(cè)位置更新。
[0910]另外,也可以根據(jù)該期間的加速度傳感器或陀螺儀傳感器的值,將當(dāng)前的發(fā)光部的推測(cè)位置更新。
[0911]如果說(shuō)明圖102,則當(dāng)攝像范圍為2212a時(shí),如果將發(fā)光部2212b攝像,則攝像出攝像圖像2212c、2212d、2212e那樣的圖像。
[0912]如果取攝像圖像2212c、2212d、2212e的發(fā)光部分的和,則得到合成圖像2212f,能
夠確定攝像圖像中的發(fā)光部位置。
[0913]接收裝置根據(jù)所確定的發(fā)光部的位置,檢測(cè)發(fā)光部的發(fā)光的開(kāi)啟關(guān)閉。
[0914]另外,在使用圖85所示的調(diào)制方式的情況下,由于發(fā)光概率是0.75,所以當(dāng)取n張圖像的和時(shí),合成圖像2212f中的發(fā)光部看起來(lái)發(fā)光的概率是I?0.25n。這里,例如當(dāng)n=3時(shí),該概率為約0.984。
[0915]另外,根據(jù)陀螺儀傳感器、加速度傳感器或磁傳感器的傳感器值推測(cè)攝像部的姿勢(shì)、進(jìn)行攝像方向的補(bǔ)償后將圖像合成時(shí)精度變高。但是,在合成圖像數(shù)較少的情況下攝像時(shí)間較短,所以即使不進(jìn)行攝像方向的補(bǔ)償,不良影響也較少。
[0916]圖103是表示接收裝置將多個(gè)發(fā)光部攝像的情況的圖。
[0917]在多個(gè)發(fā)光部發(fā)出相同的信號(hào)的情況下,從兩者的發(fā)光樣式取得一個(gè)發(fā)送信號(hào)。在多個(gè)發(fā)光部發(fā)出不同的信號(hào)的情況下,從各自的發(fā)光樣式取得各自的發(fā)送信號(hào)。
[0918]在發(fā)送信號(hào)的相同地址的數(shù)據(jù)值不同的情況下,發(fā)送了不同的信號(hào)。另外,也可以根據(jù)發(fā)送信號(hào)的頭部的樣式來(lái)判斷為發(fā)送了與附近的發(fā)送裝置相同或不同的信號(hào)。
[0919]在發(fā)光部大致相鄰的情況下,也可以看作發(fā)送了相同的信號(hào)。
[0920]在圖104中,表示此時(shí)的發(fā)送信號(hào)的時(shí)間行、和將發(fā)光部攝像的圖像。
[0921](通過(guò)位置樣式進(jìn)行的信號(hào)的傳送)
[0922]在圖105 中,發(fā)光部 2216a、2216c、2216e 均勻地發(fā)光,發(fā)光部 2216b、2216d、2216f通過(guò)發(fā)光樣式將信號(hào)發(fā)信。另外,發(fā)光部2216b、2216d、2216f也可以單單只是發(fā)光,以使得如果接收裝置按照曝光行攝像則可看到棋盤(pán)格圖案。
[0923]在圖105中,發(fā)光部2216a?2216f既可以是相同的發(fā)送裝置的發(fā)光部,也可以是各自不同的發(fā)送裝置。
[0924]發(fā)送裝置通過(guò)發(fā)送信號(hào)的發(fā)光部的位置、和不發(fā)送的發(fā)光部的位置的樣式(位置樣式)來(lái)表現(xiàn)發(fā)送的信號(hào)。
[0925]在圖105中,由于有6個(gè)發(fā)信部,所以能夠發(fā)送2的6次冪=64值的信號(hào)。如果從不同的方向觀(guān)察,則不應(yīng)使用看起來(lái)相同的位置樣式,但通過(guò)由接收裝置的磁傳感器等確定攝像方向,能夠識(shí)別上述那樣的樣式。另外,也可以通過(guò)使哪個(gè)發(fā)光部發(fā)送信號(hào)根據(jù)時(shí)刻變化來(lái)發(fā)送更多的信號(hào)。
[0926]發(fā)送裝置也可以在一部分的時(shí)間帶中進(jìn)行通過(guò)位置樣式的信號(hào)發(fā)送,在別的時(shí)間帶中以發(fā)光樣式發(fā)送信號(hào)。例如,可以在一部分的時(shí)間帶中使全部的發(fā)光部同步將發(fā)送裝置的ID及位置信息以發(fā)光樣式發(fā)送。
[0927]發(fā)光部的配置樣式大致無(wú)限地存在,所以接收裝置難以將全部的位置樣式預(yù)先存儲(chǔ)。
[0928]所以,接收裝置以發(fā)送裝置通過(guò)發(fā)光樣式發(fā)送的發(fā)送裝置的ID及位置信息、由無(wú)線(xiàn)基站得到的接收裝置的推測(cè)位置、由GPS或陀螺儀傳感器、加速度傳感器、磁傳感器推測(cè)的接收裝置的位置信息為鍵字,從服務(wù)器取得存在于附近的位置樣式的列表,基于該列表將位置樣式解析。
[0929]根據(jù)該方式,用位置樣式表現(xiàn)的信號(hào)不需要在全世界中是唯一的,只要相同的位置樣式在附近(半徑幾米到300米左右)不存在就可以,發(fā)光部較少的發(fā)送裝置能夠解決能夠表現(xiàn)的位置樣式的數(shù)量較少的問(wèn)題。
[0930]可以從服務(wù)器取得發(fā)光部的大小、形狀及位置信息,根據(jù)這些信息、攝像的位置樣式的大小及形狀、和攝像部的透鏡特性推測(cè)接收裝置的位置。
[0931](接收裝置)
[0932]作為主要進(jìn)行接收的通信裝置,如圖106那樣,可以考慮便攜電話(huà)或數(shù)字靜像照相機(jī)、數(shù)字?jǐn)z像機(jī)、頭戴顯示器、機(jī)器人(清掃用、照護(hù)用、產(chǎn)業(yè)用等)、監(jiān)視照相機(jī)等。但是,接收裝置并不限定于這些。
[0933]另外,所謂接收裝置,是主要接收信號(hào)的通信裝置,根據(jù)本實(shí)施方式的方式或其他方式,也有進(jìn)行信號(hào)的發(fā)送的情況。
[0934](發(fā)送裝置)
[0935]作為主要進(jìn)行發(fā)送的通信裝置,如圖107那樣,可以考慮照明(家庭用、店鋪用、辦公室用、地下街用、街道用等)、懷中電燈、家電、機(jī)器人、其他電子設(shè)備。但是,發(fā)送裝置并不限定于這些。
[0936]另外,所謂發(fā)送裝置,是主要發(fā)送信號(hào)的通信裝置,根據(jù)本實(shí)施方式的方式或其他方式,也有進(jìn)行信號(hào)的接收的情況。
[0937]發(fā)光部如圖108所示,優(yōu)選的是如使用LED照明或LED背燈的液晶等那樣、發(fā)光/不發(fā)光的開(kāi)關(guān)較高速的結(jié)構(gòu)。但是,發(fā)光部并不限定于這些。
[0938]在發(fā)光部中,除了上述以外,可以考慮熒光燈、白熾電燈、水銀燈或有機(jī)EL顯示器等的照明。
[0939]另外,發(fā)光部被較大地?cái)z像時(shí)傳送效率變高,所以發(fā)送裝置也可以如圖109那樣具備多個(gè)同步發(fā)光的發(fā)光部。此外,由于越是在與攝像元件的曝光行垂直的方向上較大地映照則傳送效率越高,所以發(fā)光部也可以排列為一列而設(shè)置。此外,在將接收裝置自然構(gòu)成的情況下也可以將發(fā)光部與曝光行垂直地排列。此外,在預(yù)想會(huì)從多個(gè)方向攝像的情況下,也可以如圖110那樣將發(fā)光部配置為十字形。此外,在預(yù)想會(huì)從多個(gè)方向攝像的情況下,也可以如圖111那樣,使用圓形的發(fā)光部、或?qū)l(fā)光部配置為圓形。此外,較大地?cái)z像由于傳送效率變高,所以發(fā)送裝置也可以如圖112那樣將散光板覆蓋到發(fā)光部上。
[0940]如圖113那樣,發(fā)送不同的信號(hào)的發(fā)光部離開(kāi)距離配置,以便不會(huì)同時(shí)被攝像。此夕卜,如圖114那樣,發(fā)送不同的信號(hào)的發(fā)光部在中間配置不發(fā)送信號(hào)的發(fā)光部,以便不會(huì)同時(shí)被攝像。
[0941](發(fā)光部的構(gòu)造)
[0942]圖115是表示發(fā)光部的優(yōu)選的構(gòu)造的圖。
[0943]如2311a那樣,通過(guò)使發(fā)光部和其周?chē)牟牧蠟榉瓷渎瘦^低的材料,即使是光照在發(fā)光部周邊的情況,接收裝置也能夠容易地識(shí)別發(fā)光的狀況。此外,如2311b那樣,通過(guò)設(shè)置阻擋外光的傘,光照在發(fā)光部周邊,能夠使接收裝置容易識(shí)別發(fā)光的狀況。此外,如2311c那樣,通過(guò)在靠里的部分設(shè)置發(fā)光部,光照在發(fā)光部周邊,能夠使接收裝置容易識(shí)別發(fā)光的狀況。
[0944](信號(hào)輸送波)
[0945]輸送信號(hào)的光(電磁波)使用接收裝置能夠受光的、圖116所示的近紅外線(xiàn)帶?可視光帶?近紫外線(xiàn)帶的頻率帶的光(電磁波)。
[0946](攝像部)
[0947]在圖117中,接收裝置的攝像部在攝像范圍2310a中檢測(cè)進(jìn)行樣式發(fā)光的發(fā)光部2310b。
[0948]攝像控制部代替使用其他曝光行,反復(fù)使用發(fā)光部的中心位置的曝光行2310c取得攝像圖像2310d。
[0949]攝像圖像2310d為曝光時(shí)間不同的相同場(chǎng)所的圖像。通過(guò)將攝像圖像2310d的發(fā)光部拍攝的像素在與曝光行垂直方向上掃描,能夠觀(guān)察發(fā)光部的發(fā)光樣式。
[0950]通過(guò)該方法,即使是發(fā)光部?jī)H存在于攝像圖像中的一部分中的情況,也能夠?qū)l(fā)光部的亮度變化觀(guān)察更長(zhǎng)的時(shí)間。因此,即使是將較小的發(fā)光部或從較遠(yuǎn)將發(fā)光部攝像的情況,也能夠讀取信號(hào)。
[0951]在沒(méi)有空白的情況下,通過(guò)該方法,只要用攝像裝置的一部分拍攝發(fā)光部,就能夠全部觀(guān)察發(fā)光部的亮度變化。
[0952]在將一個(gè)行曝光的時(shí)間比到開(kāi)始曝光下一行為止的時(shí)間長(zhǎng)的情況下,通過(guò)使用發(fā)光部的中心的多個(gè)曝光行攝像,能夠得到同樣的效果。
[0953]另外,在能夠進(jìn)行以像素單位的控制的情況下,僅使用距發(fā)光部的中心最近的點(diǎn)、或僅使用其附近的多個(gè)點(diǎn)進(jìn)行攝像。此時(shí),通過(guò)將各像素的曝光開(kāi)始時(shí)刻錯(cuò)開(kāi),能夠以更細(xì)小的周期檢測(cè)發(fā)光部的發(fā)光狀態(tài)。
[0954]另外,通過(guò)主要使用2310c的曝光行、偶爾使用別的曝光行攝像、將攝像圖像合成,雖然與通常相比分辨率及幀速率較差,但能夠合成與通常那樣攝像的攝像圖像類(lèi)似的圖像(影像)。通過(guò)將該合成圖像對(duì)用戶(hù)顯示,能夠使用戶(hù)操作接收裝置、或用于手抖動(dòng)的修正。[0955]另外,在手抖動(dòng)的修正中,也可以利用陀螺儀傳感器、加速度傳感器或磁傳感器等的傳感器值,或利用由與將發(fā)光部攝影的攝像裝置不同的攝像裝置攝像的圖像。
[0956]另外,與發(fā)光部的端部相比,接近于中心時(shí),在手抖動(dòng)時(shí)發(fā)光部更不易從曝光行或曝光像素偏離,所以?xún)?yōu)選的是將距發(fā)光部的中心較近的部分作為曝光行或曝光像素。
[0957]另外,由于發(fā)光部的邊緣部的發(fā)光亮度較低,所以?xún)?yōu)選的是盡量將距發(fā)光部的周?chē)^遠(yuǎn)、亮度較高的部分作為曝光行或曝光像素。
[0958](接收裝置的位置的推測(cè))
[0959]在圖118中,發(fā)送裝置將自身被設(shè)置的位置信息、發(fā)光裝置的大小、發(fā)光裝置的形狀和發(fā)送裝置的ID發(fā)送。這里,在位置信息中,包括發(fā)光裝置的中心部分的緯度、經(jīng)度、標(biāo)聞或距地面的聞度等。
[0960]接收裝置根據(jù)從磁傳感器、陀螺儀傳感器和加速度傳感器得到的信息推測(cè)攝像方向。接收裝置根據(jù)從發(fā)送裝置發(fā)送的發(fā)光裝置的大小和形狀、被攝像的圖像中的發(fā)光裝置的大小和形狀、和攝像裝置的信息,推測(cè)從接收裝置到發(fā)光裝置的距離。這里,在攝像裝置的信息中,包括透鏡的焦點(diǎn)距離、透鏡的畸變、攝像元件的大小、透鏡與攝像元件間的距離、及基準(zhǔn)尺寸的物體的攝像圖像中的大小與從攝像裝置到攝像物體的距離的對(duì)照表等。
[0961]此外,接收裝置根據(jù)從發(fā)送裝置發(fā)送的信息、攝像方向、和從接收裝置到發(fā)光裝置的距離,推測(cè)接收裝置的位置信息。
[0962]在圖119中,發(fā)送裝置將自身被設(shè)置的位置信息、發(fā)光部的大小、發(fā)光部的形狀和發(fā)送裝置的ID發(fā)送。這里,在位置信息中,包括發(fā)光部的中心部分的緯度、經(jīng)度、標(biāo)高或距地面的高度等。
[0963]接收裝置根據(jù)從磁傳感器、陀螺儀傳感器和加速度傳感器得到的信息推測(cè)攝像方向。接收裝置根據(jù)從發(fā)送裝置發(fā)送的發(fā)光部的大小和形狀、被攝像的圖像中的發(fā)光部的大小和形狀、和攝像裝置的信息,推測(cè)從接收裝置到發(fā)光裝置的距離。這里,在攝像裝置的信息中,包括透鏡的焦點(diǎn)距離、透鏡的畸變、攝像元件的大小、透鏡與攝像元件間的距離、及基準(zhǔn)尺寸的物體的攝像圖像中的大小與從攝像裝置到攝像物體的距離的對(duì)照表等。
[0964]此外,接收裝置根據(jù)從發(fā)送裝置發(fā)送的信息、攝像方向、和從接收裝置到發(fā)光部的距離,推測(cè)接收裝置的位置信息。接收裝置根據(jù)從磁傳感器、陀螺儀傳感器和加速度傳感器得到的信息,推測(cè)移動(dòng)方向和移動(dòng)距離。接收裝置使用在多個(gè)地點(diǎn)推測(cè)出的位置信息、和根據(jù)移動(dòng)方向和移動(dòng)距離推測(cè)出的該地點(diǎn)間的位置關(guān)系,推測(cè)接收裝置的位置信息。
[0965]例如,如果設(shè)在地點(diǎn)
[0966][數(shù)式I]
[0967]X I
[0968]推測(cè)出的接收裝置的位置信息的概率場(chǎng)為
[0969][數(shù)式2]
[0970]P XJ
[0971]設(shè)在從地點(diǎn)
[0972][數(shù)式3]
[0973]XJ
[0974]向地點(diǎn)[0975][數(shù)式4]
[0976]x2
[0977]移動(dòng)時(shí)推測(cè)出的移動(dòng)方向與移動(dòng)距離的概率場(chǎng)為
[0978][數(shù)式 5]
[0979]MX1X2
[0980]則最終推測(cè)的位置信息的概率場(chǎng)可以計(jì)算為
[0981][數(shù)式6]
[0982]
【權(quán)利要求】
1.一種信息通信方法,從被攝體取得信息,其特征在于,包括: 曝光時(shí)間設(shè)定步驟,設(shè)定圖像傳感器的曝光時(shí)間,以使得在通過(guò)由上述圖像傳感器進(jìn)行的上述被攝體的攝像得到的圖像中,對(duì)應(yīng)于上述被攝體的亮度變化而發(fā)生與上述圖像傳感器中包含的曝光行對(duì)應(yīng)的亮線(xiàn); 攝像步驟,通過(guò)上述圖像傳感器將亮度變化的上述被攝體在設(shè)定的上述曝光時(shí)間中攝像,取得包含上述亮線(xiàn)的圖像; 信息取得步驟,通過(guò)將由在所取得的上述圖像中包含的上述亮線(xiàn)的樣式確定的數(shù)據(jù)解調(diào),取得息。
2.如權(quán)利要求1所述的信息通信方法,其特征在于, 在上述攝像步驟中,將在上述圖像傳感器中包含的多個(gè)曝光行分別以相互不同的定時(shí)依次曝光。
3.如權(quán)利要求1或2所述的信息通信方法,其特征在于, 在上述信息取得步驟中,將由上述亮線(xiàn)的樣式中的、與上述曝光行垂直的方向的樣式確定的上述數(shù)據(jù)解調(diào)。
4.如權(quán)利要求1~3中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述曝光時(shí)間設(shè)定步驟中,將上述曝光時(shí)間設(shè)定得比10毫秒短。
5.如權(quán)利要求1~4中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述攝像步驟中,`將以200Hz以上的頻率亮度變化的上述被攝體攝像。
6.如權(quán)利要求1~5中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述攝像步驟中,取得包含與上述曝光行平行的亮線(xiàn)的上述圖像。
7.如權(quán)利要求1~6中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述信息取得步驟中,按照所取得的上述圖像內(nèi)的、與上述圖像傳感器中包含的各曝光行對(duì)應(yīng)的區(qū)域,將由根據(jù)在該區(qū)域中是否有亮線(xiàn)而確定的表示0或I的上述數(shù)據(jù)解調(diào)。
8.如權(quán)利要求7所述的信息通信方法,其特征在于, 在上述信息取得步驟中,按照上述區(qū)域,根據(jù)該區(qū)域的亮度值是否是閾值以上,確定在該區(qū)域中是否有亮線(xiàn)。
9.如權(quán)利要求1~6中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述攝像步驟中,按照規(guī)定的期間,將以與該規(guī)定的期間對(duì)應(yīng)的一定的頻率亮度變化的上述被攝體攝像; 在上述信息取得步驟中,按照上述規(guī)定的期間,將由根據(jù)與該規(guī)定的期間對(duì)應(yīng)的一定的頻率的亮度變化生成的上述亮線(xiàn)的樣式確定的上述數(shù)據(jù)解調(diào)。
10.如權(quán)利要求1~6中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述攝像步驟中,將以通過(guò)調(diào)整亮度的上升及下降中的一方的變化與下次上述一方的變化之間的時(shí)間來(lái)發(fā)送信號(hào)的方式亮度變化的上述被攝體攝像; 在上述信息取得步驟中,將由上述亮線(xiàn)的樣式確定的、作為與上述時(shí)間建立了對(duì)應(yīng)的代碼的上述數(shù)據(jù)解調(diào)。
11.如權(quán)利要求1~10中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述攝像步驟中,將以對(duì)于上述亮度變化以5毫秒以上的幅度移動(dòng)平均時(shí)的各亮度值包含在預(yù)先設(shè)定的范圍中的方式亮度變化的上述被攝體攝像。
12.如權(quán)利要求1~11中任一項(xiàng)所述的信息通信方法,其特征在于, 上述亮線(xiàn)的樣式根據(jù)上述圖像傳感器的曝光時(shí)間而不同; 在上述信息取得步驟中,將通過(guò)與設(shè)定的上述曝光時(shí)間對(duì)應(yīng)的上述樣式確定的上述數(shù)據(jù)解調(diào)。
13.如權(quán)利要求1~12中任一項(xiàng)所述的信息通信方法,其特征在于, 上述信息通信方法還檢測(cè)具備上述圖像傳感器的攝像裝置的狀態(tài); 在上述信息取得步驟中,取得表示上述被攝體的位置的上述信息,還基于所取得的上述信息和檢測(cè)出的上述狀態(tài),計(jì)算上述攝像裝置的位置。
14.如權(quán)利要求1所述的信息通信方法,其特征在于, 在上述攝像步 驟中,將包括沿著上述曝光行而排列的多個(gè)區(qū)域、按照區(qū)域而亮度變化的上述被攝體攝像。
15.如權(quán)利要求1所述的信息通信方法,其特征在于, 在上述攝像步驟中,將以相互不同的定時(shí)發(fā)出同色異譜的多種光的上述被攝體攝像。
16.如權(quán)利要求1所述的信息通信方法,其特征在于, 上述信息通信方法還推測(cè)具備上述圖像傳感器的攝像裝置存在的場(chǎng)所; 在上述信息取得步驟中,取得上述被攝體的識(shí)別信息作為上述信息,并且從服務(wù)器取得與上述場(chǎng)所及上述識(shí)別信息建立了關(guān)聯(lián)的關(guān)聯(lián)信息。
17.一種信息通信方法,通過(guò)亮度變化發(fā)送信號(hào),其特征在于, 包括: 決定步驟,通過(guò)將發(fā)送對(duì)象的信號(hào)調(diào)制,決定亮度變化的樣式; 第I發(fā)送步驟,通過(guò)發(fā)光體按照所決定的上述樣式而亮度變化,將上述發(fā)送對(duì)象的信號(hào)發(fā)送; 第2發(fā)送步驟,通過(guò)上述發(fā)光體在將上述發(fā)送對(duì)象的信號(hào)發(fā)送后33毫秒以?xún)?nèi)、按照與所決定的上述樣式相同的樣式而亮度變化,將與上述發(fā)送對(duì)象的信號(hào)相同的信號(hào)發(fā)送;在上述決定步驟中,決定上述樣式,以使對(duì)于上述亮度變化以5毫秒以上的幅度移動(dòng)平均時(shí)的各亮度值包含在預(yù)先設(shè)定的范圍中。
18.如權(quán)利要求17所述的信息通信方法,其特征在于, 在上述決定步驟中,按照將由2位表示的信號(hào)分別調(diào)制為通過(guò)由表示相同的值的3位和表示其他值的I位構(gòu)成的4位表示的信號(hào)的方式,將上述發(fā)送對(duì)象的信號(hào)調(diào)制。
19.如權(quán)利要求17所述的信息通信方法,其特征在于, 在上述決定步驟中,通過(guò)將亮度的上升及下降中的一方的變化與下次上述一方的變化之間的時(shí)間根據(jù)上述發(fā)送對(duì)象的信號(hào)調(diào)整,決定上述亮度變化的樣式。
20.如權(quán)利要求17~19中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述第I發(fā)送步驟及上述第2發(fā)送步驟中, 進(jìn)行亮度變化,以使得根據(jù)將亮度變化的上述發(fā)光體攝像的圖像傳感器的曝光時(shí)間,由具備上述圖像傳感器的攝像裝置取得不同的信號(hào)。
21.如權(quán)利要求17~20中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述第I發(fā)送步驟及上述第2發(fā)送步驟中, 通過(guò)多個(gè)發(fā)光體同步地亮度變化,上述多個(gè)發(fā)光體發(fā)送共通的信息;在發(fā)送了上述共通的信息后,通過(guò)按照發(fā)光體而亮度變化,按照該發(fā)光體而發(fā)送不同的信息。
22.如權(quán)利要求17~21中任一項(xiàng)所述的信息通信方法,其特征在于, 上述信息通信方法還包括受理是否進(jìn)行上述發(fā)送對(duì)象的信號(hào)的調(diào)制的指示的指示受理步驟; 在受理了表示進(jìn)行上述調(diào)制的指示的情況下,執(zhí)行上述決定步驟、上述第I發(fā)送步驟及上述第2發(fā)送步驟; 在受理了表示不進(jìn)行上述調(diào)制的指示的情況下,不執(zhí)行上述決定步驟、上述第I發(fā)送步驟及上述第2發(fā)送步驟,上述發(fā)光體點(diǎn)燈或滅燈。
23.如權(quán)利要求17~22中任一項(xiàng)所述的信息通信方法,其特征在于, 上述發(fā)光體包括沿著將該發(fā)光體攝像的圖像傳感器的曝光行而排列的多個(gè)區(qū)域; 在上述第1發(fā)送步驟及上述第2發(fā)送步驟中,按照上述發(fā)光體的區(qū)域而亮度變化。
24.如權(quán)利要求17~23中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述第1發(fā)送步驟及上述第2發(fā)送步驟中,上述發(fā)光體通過(guò)將同色異譜的多種光以相互不同的定時(shí)發(fā)出而亮度變化。
25.如權(quán)利要求17~24中任一項(xiàng)所述的信息通信方法,其特征在于, 在上述第1發(fā)送步驟及上述第2發(fā)送步驟中,作為上述發(fā)送對(duì)象的信號(hào)或上述相同的信號(hào)而發(fā)送上述發(fā)光體的識(shí)別信息。
26.一種信息通信方法,通過(guò)亮度變化而發(fā)送信號(hào),其特征在于, 包括: 決定步驟,通過(guò)將發(fā)送對(duì)象的信號(hào)調(diào)制,決定多個(gè)頻率; 發(fā)送步驟,通過(guò)發(fā)光體按照所決定的上述多個(gè)頻率中的某個(gè)一定的頻率而亮度變化,來(lái)發(fā)送信號(hào); 變更步驟,將在上述亮度變化中使用的頻率以33毫秒以上的周期依次變更為所決定的多個(gè)頻率中的其他頻率; 在上述發(fā)送步驟中,上述發(fā)光體亮度變化,以使得對(duì)于上述亮度變化以5毫秒以上的幅度移動(dòng)平均時(shí)的各亮度值包含在預(yù)先設(shè)定的范圍中。
27.一種被攝體,其特征在于, 在權(quán)利要求1~16中任一項(xiàng)所述的信息通信方法中使用。
28.一種信息通信裝置,其特征在于, 執(zhí)行權(quán)利要求1~26中任一項(xiàng)所述的信息通信方法。
【文檔編號(hào)】H04N5/235GK103650383SQ201380002096
【公開(kāi)日】2014年3月19日 申請(qǐng)日期:2013年5月24日 優(yōu)先權(quán)日:2012年5月24日
【發(fā)明者】大島光昭, 山田和范, 青山秀紀(jì), 淵上郁雄, 秦秀彥, 向井務(wù), 松下陽(yáng)介, 飯?zhí)锘荽? 中西幸司 申請(qǐng)人:松下電器產(chǎn)業(yè)株式會(huì)社