專利名稱：操作支援裝置以及操作支援方法
技術(shù)領(lǐng)域：
本發(fā)明涉及用于支援成為操作支援的對象的用戶(以下稱為“操作支援對象用戶”)對操作畫面進行的操作的操作支援裝置以及操作支援方法。
背景技術(shù)：
近些年，隨著家電產(chǎn)品等設(shè)備的高功能化、復(fù)雜化，老年人等無操作技能的操作支援對象用戶操作這樣的設(shè)備變得困難。
因此，設(shè)想出了這樣一種技術(shù)，即與經(jīng)由網(wǎng)絡(luò)來連接的通信終端之間共享作為用于操作設(shè)備的GUI (圖形用戶界面)來發(fā)揮功能的操作畫面。通過該技術(shù)，操作通信終端的用戶(以下稱為“操作支援用戶”)能夠?qū)υO(shè)備的操作畫面進行遠程操作，能夠支援操作支援對象用戶的操作。
但是，存在如果不多次接受上述的操作支援則操作支援對象用戶不能確實地學會操作方法的情況。此時，因為經(jīng)由網(wǎng)絡(luò)來共享操作畫面的次數(shù)增多，因此通信負荷增大。
因此，提出了這樣一種技術(shù)，即在操作畫面被共享時，通過記錄該操作畫面來生成影像數(shù)據(jù)，并將所生成的影像數(shù)據(jù)保存到存儲部(例如，參照專利文獻1)。根據(jù)專利文獻 1記述的技術(shù)，通過再生過去操作畫面被記錄的影像數(shù)據(jù)，從而能夠顯示用于支援操作對象用戶的操作的影像(以下稱為“操作支援影像”)，操作支援對象用戶能夠再次確認操作內(nèi)容。其結(jié)果，能夠抑制為了接受某一操作的操作支援而多次經(jīng)由網(wǎng)絡(luò)來共享操作畫面，能夠減輕通信負荷。
專利文獻1 (日本)特開2005-208883號公報
然而，對于操作支援對象用戶，自己從過去被記錄的影像數(shù)據(jù)中找出用于支援所期望的操作的影像數(shù)據(jù)很困難。其結(jié)果，再生不需要的影像數(shù)據(jù)，或者執(zhí)行存儲有用于支援所期望的操作的影像數(shù)據(jù)卻與通信終端之間共享操作畫面等無用的處理，使裝置負荷或者通信負荷增大。發(fā)明內(nèi)容
本發(fā)明鑒于上述課題，目的在于提供能夠通過有效地支援操作支援對象用戶來減輕裝置負荷以及通信負荷的操作支援裝置。
為了達成上述目的，本發(fā)明的一個方面所涉及的操作支援裝置，具有畫面共享部， 該畫面共享部，通過將作為圖形用戶界面發(fā)揮功能的操作畫面的數(shù)據(jù)發(fā)送到經(jīng)由網(wǎng)絡(luò)連接的通信終端，從而能夠在與所述通信終端之間共享該操作畫面，所述操作支援裝置具備畫面生成部，按照經(jīng)由輸入部接受的用戶的操作來生成操作畫面；影像記錄部，在被生成的所述操作畫面在與所述通信終端之間被共享時，通過記錄被生成的所述操作畫面來生成影像數(shù)據(jù)，并將所生成的影像數(shù)據(jù)保存到存儲部；顯示控制部，使顯示部顯示被生成的所述操作畫面；以及影像再生部，在被生成的所述操作畫面在與所述通信終端之間不被共享時，從由所述影像記錄部保存到所述存儲部的影像數(shù)據(jù)中，搜索與被生成的所述操作畫面對應(yīng)的影像數(shù)據(jù)，并再生搜索到的影像數(shù)據(jù)，所述顯示控制部，在被生成的所述操作畫面在與所述通信終端之間不被共享時，使所述顯示部同時顯示所述操作畫面和被再生的所述影像數(shù)據(jù)所示的操作支援影像。
根據(jù)此構(gòu)成，在操作畫面在與通信終端之間不被共享時，能夠按照當前的操作畫面來自動地顯示過去操作畫面在與通信終端之間被共享時被記錄的操作支援影像，能夠有效地支援操作支援對象用戶。其結(jié)果，能夠抑制與當前的操作畫面沒有關(guān)系的操作支援影像被顯示，能夠減輕裝置負荷。而且，在與當前的操作畫面對應(yīng)的影像數(shù)據(jù)已被存儲的情況下，能夠抑制操作畫面在與通信終端之間被共享，減輕通信負荷。
并且，優(yōu)選為，所述操作支援裝置還具備操作信息記錄部，該操作信息記錄部將示出對所述操作畫面進行的操作的內(nèi)容的操作信息與所述影像數(shù)據(jù)對應(yīng)起來保存到所述存儲部，所述影像再生部，進一步從所述存儲部讀出與搜索到的影像數(shù)據(jù)對應(yīng)的操作信息，所述顯示控制部，在使所述顯示部顯示所述操作支援影像時，進一步使所述顯示部顯示由所述影像再生部讀出的操作信息。
根據(jù)此構(gòu)成，因為能夠與操作支援影像一同顯示操作信息，因此能夠進一步有效地支援操作支援對象用戶，能夠更加減輕裝置負荷以及通信負荷。
并且，優(yōu)選為，所述輸入部是觸摸屏，該輸入部將示出所述觸摸屏的接觸面中的接觸位置的信息作為所述操作信息來輸出。
根據(jù)此構(gòu)成，能夠?qū)⒂|摸屏的接觸位置作為操作信息來顯示，因此在經(jīng)由觸摸屏來操作操作畫面時，能夠有效地支援操作支援對象用戶，能夠減輕裝置負荷以及通信負荷。
并且，優(yōu)選為，所述顯示控制部，通過以使所述操作信息被輸出的時刻與所述操作畫面被記錄的時刻同步的方式，使預(yù)先規(guī)定的操作圖像重疊在所述操作支援影像被顯示的且與所述操作信息所示的接觸位置相對應(yīng)的區(qū)域，從而使所述顯示部顯示所述操作信息。
根據(jù)此構(gòu)成，能夠基于操作信息所示的接觸位置來使操作圖像重疊于操作支援影像來顯示，因此能夠模擬地再現(xiàn)操作畫面被共享時操作支援用戶等對觸摸屏進行的操作。 因此，操作支援對象用戶，能夠通過按照操作圖像的運動來運動手等，從而執(zhí)行用于實現(xiàn)所期望的功能的操作。也就是說，能夠有效地支援操作支援對象用戶，因此能夠更加減輕裝置負荷以及通信負荷。
并且，優(yōu)選為，所述輸入部是具有多個操作鍵的遠程控制器，該輸入部將用于確定所述多個操作鍵中的被用戶操作的操作鍵的信息作為所述操作信息來輸出。
根據(jù)此構(gòu)成，能夠?qū)⒂糜诖_定操作鍵的信息作為操作信息來顯示，因此在經(jīng)由遠程控制器來操作操作畫面時，能夠有效地支援操作支援對象用戶，能夠更加減輕裝置負荷以及通信負荷。
并且，優(yōu)選為，所述顯示控制部，通過以使所述操作信息被輸出的時刻與所述操作畫面被記錄的時刻同步的方式，使示出由所述操作信息確定的操作鍵的操作圖像顯示，從而使所述顯示部顯示所述操作信息。
根據(jù)此構(gòu)成，因為能夠使示出被操作的操作鍵的操作圖像與操作支援影像同步地顯示，因此操作支援對象用戶能夠通過按被顯示的順序操作操作圖像所示的操作鍵，從而執(zhí)行用于實現(xiàn)所期望的功能的操作。也就是說，能夠有效地支援操作支援對象用戶，因此能夠更加減輕裝置負荷以及通信負荷。5
并且，優(yōu)選為，所述顯示控制部，在由所述影像再生部讀出了多個影像數(shù)據(jù)的情況下，使所述顯示部同時顯示所述操作畫面和所述多個影像數(shù)據(jù)所示的多個操作支援影像。
根據(jù)此構(gòu)成，在能夠?qū)Σ僮鳟嬅孢M行多個操作的情況下，能夠使進行互相不同的操作時被記錄的多個操作支援影像同時被顯示。其結(jié)果，因為能夠以短時間有效地支援操作支援對象用戶，因此能夠更加減輕裝置負荷以及通信負荷。
并且，優(yōu)選為，所述顯示控制部，在由所述影像再生部讀出了多個影像數(shù)據(jù)的情況下，以使所述多個影像數(shù)據(jù)所示的多個操作支援影像依次被顯示的方式，使所述顯示部同時顯示所述操作畫面和所述多個操作支援影像中的任一個操作支援影像。
根據(jù)此構(gòu)成，在能夠?qū)Σ僮鳟嬅孢M行多個操作的情況下，能夠使進行互相不同的操作時被記錄的多個操作支援影像依次被顯示。其結(jié)果，能夠使多個操作支援影像被顯示而不必大幅度地減小操作畫面被顯示的區(qū)域，能夠有效地支援操作支援對象用戶。
并且，優(yōu)選為，所述操作支援裝置還具備輸入部，該輸入部從用戶接受用于變更被顯示在所述顯示部的操作支援影像的再生狀態(tài)的操作，所述影像再生部，按照由所述輸入部所接受的操作來變更所述影像數(shù)據(jù)的再生狀態(tài)。
根據(jù)此構(gòu)成，能夠接受對操作支援影像進行的操作，因此操作支援對象用戶能夠變更操作支援影像的再生狀態(tài)。其結(jié)果，能夠有效地支援操作支援對象用戶，能夠更加減輕裝置負荷以及通信負荷。
并且，優(yōu)選為，所述顯示控制部，通過使所述操作支援影像顯示到所述操作畫面被顯示的區(qū)域內(nèi)的一部分，從而使所述顯示部同時顯示所述操作畫面和所述操作支援影像。
根據(jù)此構(gòu)成，能夠同時顯示操作畫面和操作支援影像從而使操作支援對象用戶容易看到。其結(jié)果，能夠有效地支援操作支援對象用戶，能夠更加減輕裝置負荷以及通信負荷。
并且，優(yōu)選為，所述影像再生部，反復(fù)再生所述影像數(shù)據(jù)。
根據(jù)此構(gòu)成，能夠反復(fù)再生影像數(shù)據(jù)，因此能夠反復(fù)顯示操作畫面被記錄的操作支援影像。因此，操作支援對象用戶，即使在只看到一次操作支援影像就不能執(zhí)行用于實現(xiàn)所期望的功能的操作的情況下，也能夠通過反復(fù)地觀看操作支援影像而執(zhí)行用于實現(xiàn)所期望的功能的操作。也就是說，能夠有效地支援操作支援對象用戶，因此能夠更加減輕裝置負荷以及通信負荷。
并且，優(yōu)選為，所述影像再生部，在所述操作畫面之前被生成的操作畫面是第一操作畫面且所述操作畫面是第二操作畫面的情況下，將從所述第一操作畫面遷移到所述第二操作畫面時被記錄的所述第二操作畫面的影像數(shù)據(jù)，作為與所述操作畫面對應(yīng)的影像數(shù)據(jù)而從所述存儲部讀出。
根據(jù)此構(gòu)成，在從第一操作畫面遷移到第二操作畫面的情況下，能夠使進行同一遷移時被記錄的操作支援影像被顯示。因此，能夠提高適合于支援用于實現(xiàn)所期望的功能的操作的操作支援影像被顯示的可能性。也就是說，能夠有效地支援操作支援對象用戶，因此能夠更加減輕裝置負荷以及通信負荷。
并且，也可以是，所述操作支援裝置，作為集成電路來被構(gòu)成。
并且，本發(fā)明的一個方面所涉及的操作支援方法，通過將作為圖形用戶界面發(fā)揮功能的操作畫面的數(shù)據(jù)發(fā)送到經(jīng)由網(wǎng)絡(luò)來連接的通信終端，從而能夠與所述通信終端之間共享該操作畫面，所述操作支援方法包括以下步驟畫面生成步驟，按照經(jīng)由輸入部接受的用戶的操作來生成操作畫面；影像記錄步驟，在被生成的所述操作畫面在與所述通信終端之間被共享時，通過記錄被生成的所述操作畫面來生成影像數(shù)據(jù)，并將所生成的影像數(shù)據(jù)保存到存儲部；顯示控制步驟，使顯示部顯示被生成的所述操作畫面；以及影像再生步驟， 在被生成的所述操作畫面在與所述通信終端之間不被共享時，從在所述影像記錄步驟中保存到所述存儲部的影像數(shù)據(jù)中，搜索與被生成的所述操作畫面對應(yīng)的影像數(shù)據(jù)，并再生搜索到的影像數(shù)據(jù)，在所述顯示控制步驟中，在被生成的所述操作畫面在與所述通信終端之間不被共享時，使所述顯示部同時顯示所述操作畫面和被再生的所述影像數(shù)據(jù)所示的操作支援影像。
據(jù)此，能夠達到與上述操作支援裝置同樣的效果。
并且，本發(fā)明也能夠作為使計算機執(zhí)行上述操作支援方法中包括的各步驟的程序來實現(xiàn)。并且，不言而喻，這些程序能夠通過CD-ROM等記錄介質(zhì)或互聯(lián)網(wǎng)等傳輸介質(zhì)來分發(fā)。
根據(jù)本發(fā)明，在操作畫面在與通信終端之間不被共享時，按照當前的操作畫面來自動地顯示過去操作畫面在與通信終端之間被共享時被記錄的操作支援影像，能夠有效地支援操作支援對象用戶。其結(jié)果，能夠抑制與當前的操作畫面無關(guān)的操作支援影像被顯示， 能夠減輕裝置負荷。而且，在與當前的操作畫面對應(yīng)的影像數(shù)據(jù)已被存儲的情況下，能夠抑制操作畫面在與通信終端之間被共享，從而能夠減輕通信負荷。


圖1是示出本發(fā)明的實施例所涉及的操作支援系統(tǒng)的構(gòu)成的框圖。
圖2A是示出被顯示在本發(fā)明的實施例所涉及的顯示器的操作畫面的遷移的一個例子的圖。
圖2B是示出被顯示在本發(fā)明的實施例所涉及的顯示器的操作畫面的遷移的一個例子的圖。
圖2C是示出被顯示在本發(fā)明的實施例所涉及的顯示器的操作畫面的遷移的一個例子的圖。
圖2D是示出被顯示在本發(fā)明的實施例所涉及的顯示器的操作畫面的遷移的一個例子的圖。
圖3是示出本發(fā)明的實施例所涉及的操作支援影像文件的構(gòu)成例的圖。
圖4是本發(fā)明的實施例所涉及的操作支援影像管理信息的構(gòu)成例的圖。
圖5是示出本發(fā)明的實施例所涉及的操作支援裝置的處理的流程的流程圖。
圖6是示出本發(fā)明的實施例中操作支援影像被顯示的區(qū)域的一個例子的圖。
圖7是示出本發(fā)明的實施例中操作支援影像被顯示的區(qū)域的另外的一個例子的圖。
圖8是示出被顯示在本發(fā)明的實施例所涉及的顯示器的操作支援影像和操作信息的一個例子的圖。
圖9是示出再生本發(fā)明的實施例所涉及的影像時的處理的流程的流程圖。
圖10是示出在本發(fā)明的實施例所涉及的操作支援系統(tǒng)中用于共享操作畫面的處理的流程的流程圖。
圖11是示出被顯示在本發(fā)明的實施例所涉及的顯示器的操作支援影像和操作信息的另外一個例子的圖。
圖12是示出本發(fā)明的實施例的變形例1所涉及的操作支援裝置的功能構(gòu)成的框圖。
圖13是示出本發(fā)明的實施例的變形例2所涉及的操作支援裝置的功能構(gòu)成的框圖。
具體實施方式
以下，參照附圖來說明本發(fā)明的實施例。
(實施例)
圖1是示出本發(fā)明的實施例所涉及的操作支援系統(tǒng)10的構(gòu)成的框圖。如圖1所示，操作支援系統(tǒng)10具備操作支援對象用戶操作的操作支援裝置100以及與操作支援對象用戶不同的操作支援用戶操作的通信終端150。操作支援裝置100與通信終端150經(jīng)由網(wǎng)絡(luò)來連接，一般而言被設(shè)置在相互分開的場所。
在此，作為操作支援對象用戶設(shè)想的是無操作技能或操作技能低的老年人等用戶。并且，作為操作支援用戶，設(shè)想的是熟悉操作支援裝置100的操作的用戶或者支持工程師等。
操作支援裝置100，通過將作為GUI發(fā)揮功能的操作畫面的圖像數(shù)據(jù)發(fā)送到通信終端150，從而能夠與通信終端150之間共享操作畫面。操作支援裝置100具備的各構(gòu)成要素的詳細情況之后敘述。
通信終端150具備輸入部151和顯示器153。通信終端150，基于從操作支援裝置 100發(fā)送來的操作畫面的圖像數(shù)據(jù)，使顯示器153顯示操作畫面。而且，通信終端150，經(jīng)由輸入部151從操作支援用戶接受操作，并將示出接受的操作的操作信息發(fā)送到操作支援裝置100。其結(jié)果，操作支援用戶，能夠經(jīng)由通信終端150，遠程操作操作支援裝置100。
另外，操作支援裝置100以及通信終端150都是能夠經(jīng)由遠程控制器(以下單稱為“遙控器”)或者觸摸屏等輸入部而從用戶接受操作的設(shè)備。具體而言，操作支援裝置100 以及通信終端150，例如相當于TV (Television 電視機)、HDD (Hard Disk Drive :硬盤)記錄器、家庭服務(wù)器、PC (Personal Computer 個人計算機)等。
另外，遙控器是以紅外線等無線來發(fā)送用于遠程操作成為操作對象的設(shè)備的信號的輸入裝置，一般而言，在距成為操作對象的設(shè)備比較近的位置使用。并且，觸摸屏是輸出示出接觸面上的被觸摸的位置(以下稱為“接觸位置”)的信號的輸入裝置。
在此，說明從用戶接受了操作的情況下的操作畫面的遷移的一個例子。
圖2A 圖2D是示出被顯示在本發(fā)明的實施例所涉及的顯示器103的操作畫面的遷移的一個例子的圖。具體而言，圖2A 2D中示出從用戶接受了用于以自動展示(slide show)方式來顯示照片的操作(以下稱為“自動展示操作”)的情況下的操作畫面的遷移。
首先，如圖2A所示，在操作畫面ID “1”的操作畫面中，選擇操作一覽菜單中的“照片”。接著，如圖2B所示，在操作畫面ID “2”的操作畫面中，選擇示出對要顯示的照片進行分類的方法的“事件”。
而且，如圖2C所示，在操作畫面ID “3”的操作畫面中，從被顯示的多個照片中選擇一部分的照片，并指示開始對所選擇的照片進行“自動展示”。最后，如圖2D所示，在操作畫面ID “4”的操作畫面中，執(zhí)行對在操作畫面ID “3”的操作畫面中所選擇的照片的自動展不。
更加具體地說明圖2A 2D。
首先，如圖2A所示，在起動了示出多個操作的操作一覽菜單的操作畫面211中，通過按下三次遙控器的下按鍵等，從而光標向下方移動(操作畫面212 214)。另外，以后的圖中，光標被作為陰影線部分來顯示，表示由遙控器等來選擇的菜單項目。
在作為目的的菜單項目的“照片”被選擇的操作畫面214中，通過按下決定按鍵等，從而從操作畫面ID “1”的操作畫面214遷移到圖2B所示的操作畫面ID “2”的操作畫面 221。
然后，在遷移后的操作畫面221中，通過按下右按鍵等，從而光標向右方移動(操作畫面22 。而且，在操作畫面222中，通過按下下按鍵等，從而光標向下方移動(操作畫面 223)。
在作為目的的菜單項目的“事件”被選擇的操作畫面223中，通過按下決定按鍵等，從而從操作畫面ID “2”的操作畫面223遷移到圖2C所示的操作畫面ID “3”的操作畫面 231。
接著，在遷移后的操作畫面231中，通過執(zhí)行用于選擇成為自動展示的對象的照片的操作，從而選擇多個照片(操作畫面232)。在操作畫面232中，通過按下輔助菜單按鍵等，從而使用于起動自動展示的菜單顯示(操作畫面23 。在操作畫面233中，通過按下下按鍵等，從而光標移動到“自動展示”(操作畫面234)。
在操作畫面234中，通過按下決定按鍵等，從而開始自動展示。也就是說，從操作畫面ID “3”的操作畫面234遷移到圖2D所示的操作畫面ID “4”的操作畫面Ml。操作畫面241是執(zhí)行了自動展示的狀態(tài)的操作畫面。如操作畫面242所示，例如執(zhí)行具有將鏡頭移向臉的效果的自動展示。
另外，以后，以操作操作支援裝置100的操作支援對象用戶，向操作支援用戶委托圖2A 圖2D所示的“自動展示操作”的操作支援的用例為前提來進行說明。
接著，返回圖1，說明操作支援裝置100具備的各構(gòu)成要素。
如圖1所示，操作支援裝置100具備輸入部101、操作畫面生成部102、顯示器 103、收發(fā)部104、操作畫面共享部105、操作支援影像記錄部106、操作支援影像管理信息記錄部107、存儲部108、操作支援影像再生部110以及顯示控制部111。
輸入部101從操作支援對象用戶接受對被顯示在顯示器103的操作畫面進行的操作。例如，輸入部101，是觸摸屏，將示出該觸摸屏的接觸面上的接觸位置的信息作為操作信息來輸出。
并且，也可以是，例如，輸入部101是具有多個操作鍵的遙控器。此時，例如，輸入部101將用于確定多個操作鍵中的被用戶操作的操作鍵的信息作為操作信息來輸出。
另外，輸入部101，不必一定是觸摸屏或遙控器，例如也可以是鍵盤或者鼠標等。
操作畫面生成部102相當于畫面生成部。操作畫面生成部102基于經(jīng)由輸入部 101、151來接受的用戶的操作來生成操作畫面。9
具體而言，操作畫面生成部102，基于從輸入部101輸出的操作信息，來生成或更新操作畫面。被生成或更新的操作畫面，通過顯示控制部111被顯示到顯示器103。
并且，操作畫面生成部102，基于經(jīng)由收發(fā)部104以及操作畫面共享部105從通信終端150接收的操作信息來生成或更新操作畫面。其結(jié)果，經(jīng)由通信終端150，由操作支援用戶遠程操作操作支援裝置100。
另外，生成操作畫面意味著生成與之前生成的操作畫面的操作畫面ID不同的操作畫面ID的操作畫面(例如，操作畫面211、221等)。并且，更新操作畫面意味著更新已被顯示在顯示器103的操作畫面(例如，操作畫面212、222等)。
顯示器103相當于顯示部，例如液晶顯示器或等離子顯示器等。顯示器103，由顯示控制部111來控制，顯示操作畫面、操作支援影像等。
收發(fā)部104是用于與經(jīng)由網(wǎng)絡(luò)來連接的通信終端150之間進行通信的通信接口。
操作畫面共享部105，通過將操作畫面的數(shù)據(jù)發(fā)送到通信終端150，從而與通信終端150之間共享操作畫面。具體而言，操作畫面共享部105，將由操作畫面生成部102生成的操作畫面的數(shù)據(jù)(例如，與已向通信終端150發(fā)送的操作畫面的圖像數(shù)據(jù)之間的差分數(shù)據(jù)等)，經(jīng)由收發(fā)部104發(fā)送到通信終端150。其結(jié)果，被顯示在操作支援裝置100的顯示器103的操作畫面也被顯示在通信終端150的顯示器153。
而且，操作畫面共享部105，經(jīng)由收發(fā)部104接收示出操作支援用戶對通信終端 150進行的操作的內(nèi)容的操作信息，并輸出到操作畫面生成部102。
另外，為了開始與通信終端150共享操作畫面，例如，由操作支援對象用戶以電話等與操作支援用戶聯(lián)絡(luò)。并且，接受了聯(lián)絡(luò)的操作支援用戶，將通信終端150連接到網(wǎng)絡(luò)， 并起動通信終端150的操作畫面共享功能，與操作支援裝置100連接。并且，在通信終端 150與網(wǎng)絡(luò)連接且操作支援裝置100保持了通信終端150的地址的情況下，操作支援裝置 100也可以發(fā)送用于經(jīng)由網(wǎng)絡(luò)來開始操作畫面的共享的委托。
操作支援影像記錄部106，相當于影像記錄部，在通過操作畫面共享部105而操作畫面在與通信終端150之間被共享時，通過記錄該操作畫面從而生成影像數(shù)據(jù)。而且，操作支援影像記錄部106，將所生成的影像數(shù)據(jù)保存到存儲部108。
具體而言，操作支援影像記錄部106，在操作畫面在與通信終端150之間被共享時，通過記錄由操作畫面生成部102生成的操作畫面來生成影像數(shù)據(jù)。并且，操作支援影像記錄部106，將所生成的影像數(shù)據(jù)作為操作支援影像文件300保存到存儲部108。
操作支援影像管理信息記錄部107，相當于操作信息記錄部，將示出對操作畫面進行的操作的內(nèi)容的操作信息與影像數(shù)據(jù)對應(yīng)起來保存到存儲部108。具體而言，操作支援影像管理信息記錄部107，在操作畫面被記錄時，作為與操作支援影像文件300有關(guān)的管理信息，生成并記錄包含操作信息的操作支援影像管理信息400。
存儲部108，例如是HDD或SSD (Solid State Drive 固態(tài)硬盤)等，是用于存儲操作支援影像文件300以及操作支援影像管理信息400的存儲部。
操作支援影像再生部110，相當于影像再生部，在操作畫面在與通信終端150之間不被共享時，從由操作支援影像記錄部106保存到存儲部108的影像數(shù)據(jù)中，搜索與被生成的操作畫面對應(yīng)的影像數(shù)據(jù)。而且，操作支援影像再生部110，再生搜索到的影像數(shù)據(jù)，并輸出到顯示控制部111。操作支援影像再生部110，進一步，從存儲部108讀出與搜索到的影，并輸出到顯示控制部111。
顯示控制部111，在操作畫面在與通信終端150之間被共享時，使顯示器103顯示操作畫面，在操作畫面在與通信終端150之間不被共享時，使顯示器103同時顯示操作畫面和被再生的影像數(shù)據(jù)所示的操作支援影像。
接著，利用圖3以及圖4詳細地說明被保存到存儲部108的操作支援影像文件300 以及操作支援影像管理信息400。
圖3是示出本發(fā)明的實施例所涉及的操作支援影像文件300的構(gòu)成例的圖。操作支援影像文件300，在開頭部分具有頭部區(qū)域301，在頭部區(qū)域301之后具有數(shù)據(jù)區(qū)域302。
頭部區(qū)域301中保存有示出操作支援影像文件300的版本的版本信息以及用于唯一地識別操作支援影像文件300的識別信息(操作支援影像ID)等關(guān)聯(lián)數(shù)據(jù)。數(shù)據(jù)區(qū)域 302中保存有通過操作畫面被記錄而被生成的影像數(shù)據(jù)。另外，也可以是，數(shù)據(jù)區(qū)域302中， 進一步，保存有聲音數(shù)據(jù)等附加性的數(shù)據(jù)。
在圖3中，在數(shù)據(jù)區(qū)域302中保存有記錄了進行了如圖2A 2D所示的“自動展示操作”時的操作畫面的影像數(shù)據(jù)。附帶地，影像數(shù)據(jù)的記錄格式可以是一般的格式，也可以是獨創(chuàng)的格式。例如，也可以是，記錄格式是MPEG-2或者H. 264等格式。
圖4是本發(fā)明的實施例所涉及的操作支援影像管理信息400的構(gòu)成例的圖。如圖 4所示，操作支援影像管理信息400包含操作支援影像ID401、操作支援者名402、操作支援標題403、操作畫面切換位置信息404以及操作支援信息408。
操作支援影像ID401是用于唯一地識別操作支援影像文件300的識別信息。通過該操作支援影像ID401，操作支援影像文件300與操作支援影像管理信息400相關(guān)聯(lián)。
操作支援者名402，是利用通信終端150進行了操作支援的操作支援用戶的名字。
操作支援標題403是有關(guān)操作支援的內(nèi)容的信息。例如，操作支援標題403是“觀看自動展示”、“預(yù)約錄像”等標題。另外，操作支援標題403，基于操作畫面的遷移，由操作支援裝置100自動地決定。或者，也可以是，操作支援標題403，由支援用戶或者支援對象用戶來輸入。
操作畫面切換位置信息404是示出記錄了操作畫面的影像數(shù)據(jù)的時間上的位置的信息。在從某一操作畫面ID的操作畫面遷移到與該操作畫面ID不同的操作畫面ID的操作畫面時，操作畫面切換位置信息404按照由操作畫面生成部102通知的信息來被決定。 具體而言，操作畫面切換位置信息404，如圖4所示，至少包含一組操作畫面ID405、時間戳信息406以及影像位置信息407的組合。
操作畫面ID405是用于識別操作畫面的識別信息。
時間戳信息406示出該操作畫面ID405的操作畫面被記錄的時間。具體而言，時間戳信息406，示出該操作畫面ID405的操作畫面從開始被記錄到切換為下一個操作畫面 ID的操作畫面為止的時間(例18時20分30秒 18時21分15秒)。
影像位置信息407，示出在操作支援影像文件300內(nèi)記錄了該操作畫面ID405的操作畫面的影像數(shù)據(jù)被保存的位置(例“偏移(offset) 128K字節(jié)、大小511字節(jié)”)。
每當操作畫面ID被切換為不同的操作畫面時，該操作畫面ID405、時間戳信息406 以及影像位置信息407的組合，就會被新追加到操作畫面切換位置信息404。
操作支援信息408包含示出操作支援用戶對操作畫面進行的操作的定時的時間11戳信息409和示出操作的內(nèi)容的操作信息410。具體而言，時間戳信息409示出支援用戶利用遙控器或者觸摸屏等對操作畫面進行了操作的時刻(例18時20分45秒)。并且，操作信息410是用于確定在時間戳信息409所示的時刻被操作的操作鍵的信息或者是示出觸摸屏的接觸位置的坐標位置信息等。
接著，說明按上述內(nèi)容構(gòu)成的操作支援裝置100的各種動作。
圖5是示出本發(fā)明的實施例所涉及的操作支援裝置100的處理的流程的流程圖。
首先，操作畫面生成部102，基于經(jīng)由輸入部101、151等接受的用戶的操作來生成操作畫面(S101)。具體而言，操作畫面生成部102，例如，在操作畫面在與通信終端150之間被共享的情況下，按照經(jīng)由輸入部151接受的操作支援用戶的操作(經(jīng)由收發(fā)部104從通信終端150接收的操作信息)來生成操作畫面。并且，操作畫面生成部102，例如，在操作畫面在與通信終端150之間不被共享的情況下，按照經(jīng)由輸入部101接受的操作支援對象用戶的操作來生成操作畫面。
接著，操作畫面共享部105，判定被生成的操作畫面在與通信終端150之間是否被共享(S102)。例如，操作畫面共享部105，基于被生成的操作畫面的數(shù)據(jù)是否被發(fā)送到通信終端150，來判定操作畫面是否在與通信終端150之間被共享。
在此，操作畫面被共享的情況下(S102的“是”)，操作支援影像記錄部106，通過記錄操作畫面來生成影像數(shù)據(jù)。而且，操作支援影像記錄部106，將包含被生成的影像數(shù)據(jù)的操作支援影像文件300和包含操作信息的操作支援影像管理信息400保存到存儲部 108(S103)。并且，顯示控制部111，使顯示器103顯示操作畫面(S104)，并返回到步驟SlOl 的處理。
另一方面，在操作畫面不被共享的情況下(S102的“否”)，操作支援影像再生部 110，再生被存儲到存儲部108且與操作畫面相對應(yīng)的影像數(shù)據(jù)(S105)。
具體而言，操作支援影像再生部110，從由操作支援影像記錄部106過去保存到存儲部108的操作支援影像文件300中，搜索包含與被生成的操作畫面對應(yīng)的影像數(shù)據(jù)的操作支援影像文件300，并讀出搜索到的操作支援影像文件300。而且，操作支援影像再生部 110，從存儲部108讀出與搜索到的操作支援影像文件300對應(yīng)的操作支援影像管理信息 400。并且，操作支援影像再生部110，再生包含在所讀出的操作支援影像文件300中的、與被生成的操作畫面對應(yīng)的影像數(shù)據(jù)。
接著，顯示控制部111，使顯示器103同時顯示被生成的操作畫面、被再生的影像數(shù)據(jù)所示的操作支援影像以及被讀出的操作支援影像管理信息400中包含的操作信息 (S106)，并返回到步驟SlOl的處理。具體而言，顯示控制部111，例如如圖6 8所示，使顯示器103顯示操作畫面、操作支援影像以及操作信息。
圖6是示出本發(fā)明的實施例中操作支援影像被顯示的區(qū)域的一個例子的圖。在圖 6中，操作支援影像被顯示到在操作畫面501內(nèi)的一部分區(qū)域形成的輔助畫面502。
也就是說，顯示控制部111，通過使操作支援影像重疊顯示在操作畫面被顯示的區(qū)域內(nèi)的一部分，從而使顯示器103同時顯示操作畫面和操作支援影像。據(jù)此，操作支援裝置 100，能夠同時顯示操作畫面和操作支援影像從而使操作支援對象用戶容易看到。
另外，也可以是，在步驟S105中多個影像數(shù)據(jù)被讀出的情況下，如圖7所示，顯示控制部111使顯示器103顯示多個操作支援影像。
圖7是示出本發(fā)明的實施例中操作支援影像被顯示的區(qū)域的另外的一個例子的圖。也可以是，如圖7所示，顯示控制部111使操作支援影像顯示在多個輔助畫面502、503， 而不是僅顯示在一個輔助畫面。也就是說，也可以是，在多個影像數(shù)據(jù)被搜索到的情況下， 顯示控制部111使顯示器103同時顯示操作畫面和被再生的該多個影像數(shù)據(jù)所示的多個操作支援影像。
據(jù)此，操作支援裝置100，在能夠?qū)Σ僮鳟嬅孢M行多個操作的情況下，能夠同時顯示進行互相不同的操作時被記錄的多個操作支援影像。其結(jié)果，操作支援裝置100能夠以短時間有效地支援操作支援對象用戶。
并且，也可以是，在步驟S105中多個影像數(shù)據(jù)被讀出的情況下，顯示控制部111， 以被再生的多個影像數(shù)據(jù)所示的多個操作支援影像依次被顯示的方式，使顯示器103同時顯示操作畫面和多個操作支援影像中的任一個操作支援影像。據(jù)此，操作支援裝置100，在能夠?qū)Σ僮鳟嬅孢M行多個操作的情況下，能夠依次顯示進行互相不同的操作時被記錄的多個操作支援影像。其結(jié)果，操作支援裝置100，能夠顯示多個操作支援影像而不必大幅度地減小操作畫面被顯示的區(qū)域，能夠有效地支援操作支援對象用戶。
圖8是示出被顯示在本發(fā)明的實施例所涉及的顯示器103的操作支援影像和操作信息的一個例子的圖。在圖8中，由操作支援用戶經(jīng)由通信終端150來操作操作支援裝置 100時被記錄的操作支援影像被顯示在輔助畫面502。
并且，基于操作支援影像管理信息400中包含的操作支援信息408，操作圖像701、 702以及操作字符703被顯示在輔助畫面502中。在此，對操作支援信息408包含示出觸摸屏的接觸面的接觸位置的操作信息和示出操作支援用戶名以及操作標題的操作信息的情況進行說明。
操作圖像701是被重疊顯示在操作支援影像被顯示的且與操作信息所示的接觸位置相對應(yīng)的區(qū)域的手的圖像。操作圖像701以使操作位置被檢測的時刻與操作畫面被記錄的時刻同步的方式被顯示。
另外，操作圖像701，只要是能夠示出接觸位置的預(yù)先規(guī)定的圖像即可，并非一定要是手的圖像。例如，操作圖像701也可以是箭頭等圖像。
操作圖像702，是基于操作信息所示的接觸位置，重疊于操作支援影像而被顯示的箭頭的圖像。操作圖像702表示接觸位置的時間上的變化。也就是說，顯示控制部111，使顯示器103顯示示出接觸位置的時間上的變化的操作圖像702。
操作字符703，是示出操作支援影像被記錄時的操作支援用戶名或操作標題等的字符。
這樣，顯示控制部111，在使顯示器103顯示操作支援影像時，使顯示器103也同時顯示由操作支援影像再生部110讀出的操作信息。據(jù)此，操作支援裝置100能夠有效地支援操作支援對象用戶。
并且，操作支援裝置100，能夠使示出觸摸屏的接觸位置的信息被顯示，因此在經(jīng)由觸摸屏來操作操作畫面時，能夠有效地支援操作支援對象用戶。
而且，顯示控制部111，如操作圖像701，以使操作信息被輸出的時刻與操作畫面被記錄的時刻同步的方式，使顯示器103顯示操作圖像701。而且，顯示控制部111，通過使操作圖像701重疊在操作支援影像被顯示的且與操作信息所示的接觸位置相對應(yīng)的區(qū)域，從而使顯示器103顯示操作信息。
其結(jié)果，操作支援裝置100，能夠模擬再現(xiàn)操作支援用戶對觸摸屏進行的操作，能夠有效地支援操作支援對象用戶對操作畫面進行的操作。也就是說，操作支援對象用戶，通過使手與在操作支援影像中被顯示的手的運動同樣地運動，從而能夠?qū)崿F(xiàn)所期望的操作。
接著，利用圖9的流程圖，詳細地說明再生影像數(shù)據(jù)的處理。
圖9是示出再生本發(fā)明的實施例所涉及的影像時的處理(S105)的流程的流程圖。
操作畫面生成部102，在操作畫面的操作畫面ID被切換的定時，向操作支援影像再生部110通知當前的操作畫面ID(以下稱為“第一操作畫面ID”)以及下一個操作畫面 ID (以下稱為“第二操作畫面ID”)。也就是說，操作支援影像再生部110，從操作畫面生成部102接收第一操作畫面ID和第二操作畫面ID(S201)。
接著，操作支援影像再生部110，從在存儲部108中存儲的操作支援影像文件 300中，搜索具有第二操作畫面ID的操作畫面被記錄的影像數(shù)據(jù)的操作支援影像文件 300(S202)。具體而言，操作支援影像再生部110，通過將接受了通知的第二操作畫面ID與操作支援影像管理信息400中包含的操作畫面ID405進行匹配，從而搜索操作支援影像文件 300。
在此，在不存在包含與第二操作畫面ID —致的操作畫面ID405的操作支援影像文件300的情況下(S203的“否”)，結(jié)束處理。
另一方面，在存在包含與第二操作畫面ID —致的操作畫面ID405的操作支援影像文件300的情況下(S203的“是”)，操作支援影像再生部110，從存儲部108讀出該操作支援影像文件300 (S204)。
接著，操作支援影像再生部110，再生與被讀出的操作支援影像文件300中包含的影像數(shù)據(jù)中的第二操作畫面ID對應(yīng)的影像數(shù)據(jù)(S205)。
具體而言，操作支援影像再生部110，參照在存儲部108中存儲的操作支援影像管理信息400，取得與第二操作畫面ID —致的操作畫面ID405的影像位置信息407。并且， 操作支援影像再生部110，基于所取得的影像位置信息407，自動地再生操作支援影像文件 300中包含的影像數(shù)據(jù)中的、與第二操作畫面ID對應(yīng)的影像數(shù)據(jù)。
這樣，操作支援影像再生部110，讀出與被生成的操作畫面對應(yīng)的影像數(shù)據(jù)，并再生所讀出的影像數(shù)據(jù)。
另外，優(yōu)選為，操作支援影像再生部110，反復(fù)再生影像數(shù)據(jù)，直到重新在步驟 SlOl中生成操作畫面為止。也就是說，優(yōu)選為，操作支援影像再生部110，在操作畫面生成部102向操作支援影像再生部110通知下一個操作畫面ID為止的期間，即用戶的在操作中的操作畫面遷移到其他的操作畫面ID為止的期間，反復(fù)再生操作支援影像。
據(jù)此，操作支援對象用戶，即使在只看到一次操作支援影像就不能實現(xiàn)所期望的操作的情況下，也能通過反復(fù)地觀看操作支援影像而能夠?qū)崿F(xiàn)所期望的操作。也就是說，操作支援裝置100能夠提高操作支援對象用戶的利便性。
另外，也可以是，操作支援影像再生部110，在反復(fù)再生操作支援影像的情況下，反復(fù)再生預(yù)先規(guī)定的次數(shù)之后結(jié)束再生。據(jù)此，操作支援影像再生部110，能夠抑制對于操作支援對象用戶沒有幫助的操作支援影像被反復(fù)再生所需要的以上。
并且，在步驟S202中，雖然操作支援影像再生部110僅利用第二操作畫面ID來搜索了操作支援影像文件300，但是也可以是，進一步利用第一操作畫面ID來搜索操作支援影像文件300。
具體而言，也可以是，操作支援影像再生部110，搜索包含從第一操作畫面ID的操作畫面遷移到第二操作畫面ID的操作畫面時被記錄的第二操作畫面ID的操作畫面的影像數(shù)據(jù)的操作支援影像文件300。也就是說，操作支援影像再生部110，將從第一操作畫面遷移到第二操作畫面時被記錄的第二操作畫面的影像數(shù)據(jù)，作為與被生成的操作畫面對應(yīng)的影像數(shù)據(jù)，來從存儲部108中讀出。
據(jù)此，操作支援裝置100，在從第一操作畫面遷移到第二操作畫面的情況下，能夠使進行同一遷移時被記錄的操作支援影像被顯示。因此，操作支援裝置100，能夠提高適合于支援用于實現(xiàn)操作支援對象用戶所期望的功能的操作的操作支援影像被顯示的可能性。 也就是說，操作支援裝置100，能夠有效地支援操作支援對象用戶。
接著，詳細地說明用于共享操作畫面的處理。
圖10是示出在本發(fā)明所涉及的操作支援系統(tǒng)中用于共享操作畫面的處理的流程的流程圖。在圖10中，右側(cè)示出操作支援裝置100的處理的流程，左側(cè)示出通信終端150 的處理的流程。并且，作為圖10的流程圖的前提，設(shè)定操作支援裝置100以及通信終端150 是已被起動的狀態(tài)。
首先，操作支援裝置100，為了按照支援對象用戶的操作開始共享操作畫面，使顯示器103顯示操作畫面(S301)。而且，操作支援裝置100，起動用于向通信終端委托共享操作畫面的委托菜單(S302)。另外，有關(guān)用于向通信終端委托共享操作畫面的委托菜單的詳細情況的說明進行省略。
并且，操作支援裝置100，在用于向通信終端委托共享操作畫面的委托菜單中，從操作支援對象用戶接受用于選擇委托共享操作畫面的通信終端150的操作，按照所接受的操作選擇通信終端150(S303)。并且，操作支援裝置100向所選擇的通信終端150發(fā)送用于共享操作畫面的委托(以下稱為“共享委托”)(S304)。
接著，通信終端150接收從操作支援裝置100發(fā)送來的共享委托(S401)。然后，通信終端150，從操作支援用戶接受針對共享委托的應(yīng)答，并發(fā)送所接受的應(yīng)答640 。具體而言，通信終端150，例如，在顯示器153彈出顯示有關(guān)共享委托的消息和許可確認。并且， 通信終端150，經(jīng)由輸入部151，從操作支援用戶接受是否許可操作支援委托的應(yīng)答。
操作支援裝置100，經(jīng)由收發(fā)部104，接收共享委托的應(yīng)答630 。在此，接收的應(yīng)答是拒絕的情況下(S306的“否”)，返回到操作畫面的顯示。另一方面，在接收的應(yīng)答是許可的情況下(S306的“是”)，操作畫面共享部105，將由操作畫面生成部102生成的操作畫面的圖像數(shù)據(jù)自動地發(fā)送到通信終端150(S307)。
通信終端150，接收操作畫面的圖像數(shù)據(jù)，并顯示在顯示器153(S403)。據(jù)此，操作畫面的共享開始。
通信終端150，經(jīng)由輸入部151，從操作支援用戶接受對操作畫面的操作，并將示出接受的操作的操作信息發(fā)送到操作支援裝置100(S404)。
操作支援裝置100從通信終端150接收操作信息(S308)。操作畫面生成部102， 基于所接收的操作信息來生成或更新操作畫面(S309)。另外，在此被生成或更新的操作畫面，通過顯示控制部111來被顯示在顯示器103。CN 102511029 A說明書13/16 頁
而且，操作支援影像記錄部106，通過記錄被生成或更新的操作畫面來生成影像數(shù)據(jù)，并將操作支援影像文件300保存到存儲部108 (S310)。這些步驟S309 S310的處理相當于圖5所示的SlOl S104的處理。
在此，未從操作支援用戶接受示出結(jié)束操作畫面的共享的切斷請求的情況下 (S405的“否”)，返回接收操作畫面的圖像數(shù)據(jù)的處理(S403)，并繼續(xù)共享操作畫面。另一方面，在從操作支援用戶接受了示出結(jié)束操作畫面的共享的切斷請求的情況下(S405的 “是”)，通信終端150向操作支援裝置100發(fā)送切斷請求(S406)。
并且，操作支援裝置100，在未從通信終端150接收切斷請求的情況下(Sll的 “否”)，返回發(fā)送操作畫面的處理(S307)，繼續(xù)共享操作畫面。另一方面，在從通信終端150 接收了切斷請求的情況下(S311的“是”)，操作支援裝置100進行切斷處理，結(jié)束操作畫面的共享(S312)。
這樣，操作畫面在操作支援裝置100與通信終端150之間被共享。
如上所述，根據(jù)本實施例所涉及的操作支援裝置100，在操作畫面在與通信裝置之間不被共享時，能夠按照當前的操作畫面自動地顯示過去在與通信裝置之間操作畫面被共享時被記錄的操作支援影像。因此，操作支援裝置100，能夠有效地支援操作支援對象用戶， 且能夠提高操作支援對象用戶的利便性。其結(jié)果，操作支援裝置100，抑制與當前的操作畫面無關(guān)的操作支援影像被顯示，能夠減輕裝置負荷。而且，操作支援裝置100，在與當前的操作畫面對應(yīng)的影像數(shù)據(jù)已被存儲的情況下，抑制在與通信終端之間操作畫面被共享，從而能夠減輕通信負荷。
也就是說，只要從操作支援用戶得到一次操作支援，則與操作支援對象用戶在操作中的操作畫面相同的操作畫面被記錄的過去的操作支援影像與操作畫面同時被顯示，因此即使是對于操作不熟練的操作支援對象用戶，也能夠邊看操作支援影像邊執(zhí)行所期望的功能。
以上，基于實施例說明了本發(fā)明的一個方面所涉及的操作支援裝置100，但是本發(fā)明并不限定于這些實施例。只要不超出本發(fā)明的宗旨，將本領(lǐng)域技術(shù)人員所能想到的各種變形實施于這些實施例的實施例，或者組合不同的實施例的構(gòu)成要素來構(gòu)筑的實施例也包括在本發(fā)明的范圍之內(nèi)。
例如，在上述實施例中，如圖8所示，詳細地說明了輸入部101是觸摸屏的情況，但是輸入部101并非一定要是觸摸屏。也可以是，例如，輸入部101是具有多個操作鍵的遙控器。此時，也可以是，輸入部101，例如將用于確定多個操作鍵中的被用戶操作的操作鍵的信息作為操作信息來輸出。據(jù)此，操作支援裝置100能夠使顯示器103顯示用于確定操作鍵的信息，因此在經(jīng)由遠程控制器來操作操作畫面時，能夠有效地支援操作支援對象用戶。
并且，優(yōu)選為，在輸入部101是遙控器的情況下，顯示控制部111，以操作信息被輸出的時刻與操作畫面被記錄的時刻同步的方式，使顯示器103顯示示出由操作信息確定的操作鍵的操作圖像。具體而言，優(yōu)選為，顯示控制部111，如圖11所示，將示出由操作信息確定的操作鍵的操作圖像704，以與操作支援影像同步的方式來在顯示器103顯示。據(jù)此，操作支援對象用戶，能夠通過按被顯示的順序操作操作圖像所示的操作鍵，從而執(zhí)行用于實現(xiàn)所期望的功能的操作。也就是說，操作支援裝置100能夠有效地支援操作支援對象用戶。
并且，也可以是，操作支援影像再生部110，按照由輸入部101接受的操作來變更16影像數(shù)據(jù)的再生狀態(tài)。此時，輸入部101，從操作支援對象用戶接受用于變更被顯示在顯示器103的操作支援影像再生狀態(tài)的操作。具體而言，輸入部101，例如接受暫停、快放、倒帶或者停止等指示再生狀態(tài)的變更的操作。并且，操作支援影像再生部110，按照由輸入部 101接受的操作，暫停、快放、倒帶或者停止操作支援影像的再生，從而變更操作支援影像的再生狀態(tài)。
據(jù)此，操作支援對象用戶，能夠變更操作支援影像的再生狀態(tài)。其結(jié)果，操作支援裝置100，能夠提高操作支援對象用戶的利便性，且能夠有效地支援操作支援對象用戶。
并且，在上述實施例中，操作信息被顯示在顯示器103，但是并非一定要視覺性地來顯示。也就是說，也可以是，通過聲音來向操作支援對象用戶提示操作信息。此時，操作支援裝置100成為例如如圖12所示的構(gòu)成。
圖12是示出本發(fā)明的實施例的變形例1所涉及的操作支援裝置100的功能構(gòu)成的圖。如圖12所示，本變形例所涉及的操作支援裝置100，在上述實施例所涉及的操作支援裝置所具備的各構(gòu)成要素的基礎(chǔ)上還具備聲音輸出部112。
聲音輸出部112，在操作支援影像被顯示在顯示器103時，基于由操作支援影像再生部110讀出的操作信息，輸出操作聲音。例如，聲音輸出部112，將用于確定遙控器的操作鍵的信息作為操作聲音來輸出。
據(jù)此，操作支援對象用戶，即使視線離開被顯示在顯示器103的操作支援影像，也能夠按照操作聲音來執(zhí)行用于實現(xiàn)所期望的功能的操作。因此，操作支援裝置100，能夠有效地支援操作支援對象用戶，且能夠提高操作支援對象用戶的利便性。
并且，在上述實施例中，操作支援裝置100，在操作畫面在與通信終端150之間不被共享時，顯示操作支援影像，但是在操作畫面在與通信終端150之間不被共享時，并非一定要顯示操作支援影像。例如，也可以是，操作支援裝置100，僅在用于顯示操作支援影像的設(shè)定(以下稱為“操作支援設(shè)定”)被有效化的情況下，顯示操作支援影像。此時，例如， 操作支援對象用戶經(jīng)由輸入部101等使操作支援裝置100的操作支援設(shè)定有效化。并且， 例如，操作支援設(shè)定可以由操作支援對象用戶以手動來無效化，也可以由操作支援裝置100 的電源斷開來自動地無效化。
并且，在上述實施例中，在操作畫面被共享時，通過通信終端150向操作支援裝置 100發(fā)送操作信息，從而操作支援用戶能夠經(jīng)由通信終端150來對操作畫面進行操作，但是并非一定要能夠這樣地操作。也就是說，也可以是，通信終端150，在操作畫面在與操作支援裝置100之間被共享時，僅在顯示器153顯示操作畫面。此時，操作支援用戶，例如利用電話等聲音通信來進行操作支援對象用戶的操作支援就可以。即使在這樣的情況下，也因為在操作畫面被共享時操作畫面被記錄，因此操作支援裝置100能夠支援操作支援對象用戶。
并且，在上述實施例中，雖然用于顯示操作支援影像的輔助畫面重疊于操作畫面被顯示的區(qū)域的一部分來形成，但是并非一定要這樣來形成輔助畫面。例如，也可以是在一個顯示面上分別形成操作畫面和輔助畫面。
并且，在上述實施例中，操作支援影像記錄部106，將多個操作畫面ID的操作畫面被記錄的影像數(shù)據(jù)作為一個操作支援影像文件300來保存到存儲部108，但是并非一定要這樣來將影像數(shù)據(jù)保存到存儲部108。例如，也可以是，操作支援影像記錄部106，按照每個操作畫面ID來將操作支援影像文件300保存到存儲部108。
并且，在上述實施例中，操作支援裝置100具備圖1所示的各構(gòu)成要素，但是并非一定要具備圖1所示的所有的構(gòu)成要素。例如，也可以是，如圖13所示，操作支援裝置具備圖1所示的構(gòu)成要素的一部分。
圖13是示出本發(fā)明的實施例的變形例2所涉及的操作支援裝置的功能構(gòu)成的框圖。在圖13中，操作支援裝置100具備操作畫面生成部102、操作畫面共享部105、操作支援影像記錄部106、操作支援影像再生部110以及顯示控制部111。此時，輸入部101、顯示器103以及存儲部108經(jīng)由各種接口與操作支援裝置100連接。并且，操作畫面共享部105 具有收發(fā)部104的功能。
操作支援裝置100即使是圖13所示的構(gòu)成，也能夠在操作畫面在與通信終端之間不被共享時，按照當前的操作畫面來自動地顯示過去操作畫面在與通信終端之間被共享時被記錄的操作支援影像，能夠有效地支援操作支援對象用戶。
并且，也可以是，操作支援裝置100由具備CPU (Central Processing Unit 中央處理單元)，ROM (Read Only Memory 只讀存儲器)，RAM (Random Access Memory 隨機存儲器)和硬盤等的計算機來實現(xiàn)。此時，計算機，例如通過由CPU執(zhí)行保存在ROM或RAM中的計算機程序，從而實現(xiàn)操作支援裝置100具有的功能。
并且，上述實施例中的操作支援裝置100具備的構(gòu)成要素的一部分或全部，由1個系統(tǒng)LSI (Large Scale Integration 大規(guī)模集成電路)來構(gòu)成。例如，也可以是，如圖13 所示，操作支援裝置100由具有操作畫面生成部102、操作畫面共享部105、操作支援影像記錄部106、操作支援影像再生部110以及顯示控制部111的系統(tǒng)LSI120來構(gòu)成。
系統(tǒng)LSI120是在一個芯片上集成多個構(gòu)成部來制造的超多功能LSI，具體而言， 是包括微處理器、ROM、RAM等而構(gòu)成的計算機系統(tǒng)。所述RAM中存儲有計算機程序。通過所述微處理器按照所述計算機程序來動作，從而系統(tǒng)LSI120達成其功能。
另外，在此，雖然設(shè)定為是系統(tǒng)LSI，但是，根據(jù)集成程度的不同，也有稱為IC、 LSI、超級(supeiOLSI、極超級(ultra)LSI的情況。并且，集成電路化的方法并不限定于LSI，也可以在專用電路或通用處理器上實現(xiàn)。也可以利用在制造LSI后能夠編程的 FPGA(Field Programmable Gate Array :現(xiàn)場可編程門陣列)或者可重構(gòu)LSI內(nèi)部的電路單元的連接或設(shè)定的可重構(gòu)處理器。
而且，半導(dǎo)體技術(shù)的發(fā)展或利用派生的其他技術(shù)而出現(xiàn)替換LSI的集成電路化技術(shù)，當然也可以利用該技術(shù)進行功能塊的集成化。也有適用生物技術(shù)等的可能性。
并且，本發(fā)明不僅能夠作為具備具有這樣的特征的處理部的操作支援裝置來實現(xiàn)，而且還能夠作為將操作支援裝置包括的具有特征的處理部作為步驟的操作支援方法來實現(xiàn)。并且，也能夠作為使計算機執(zhí)行操作支援方法中包括的具有特征的各步驟的計算機程序來實現(xiàn)。并且，不言而喻，也可以是，這些計算機程序能夠通過⑶-ROM等計算機可讀取的記錄介質(zhì)或互聯(lián)網(wǎng)等通信網(wǎng)絡(luò)使其流通。
本發(fā)明的一個方面所涉及的操作支援裝置，能夠有效地顯示過去從操作支援用戶接受操作支援時被記錄的、記錄了與操作支援對象用戶正在操作的操作畫面相同的操作畫面的操作支援影像，因此作為操作復(fù)雜化的電視機、HDD記錄器或家庭服務(wù)器有用。
符號說明
10操作支援系統(tǒng)
100操作支援裝置
101,151 輸入部
102操作畫面生成部
103、153 顯示器
104收發(fā)部
105操作畫面共享部
106操作支援影像記錄部
107操作支援影像管理信息記錄部
108存儲部
110操作支援影像再生部
111顯示控制部
120 系統(tǒng) LSI
150通信終端
211、212、213、214、221、222、223、231、232、233、234、241、242、501 操作畫面
300操作支援影像文件
301頭部區(qū)域
302數(shù)據(jù)區(qū)域
400操作支援影像管理信息
401操作支援影像ID
402操作支援者名
403操作支援標題
404操作畫面切換位置信息
405操作畫面ID
406、409時間戳信息
407影像位置信息
408操作支援信息
410操作信息
502、503 輔助畫面
701、702、704 操作圖像
703操作字符19
權(quán)利要求
1.一種操作支援裝置，該操作支援裝置具有畫面共享部，該畫面共享部，通過將作為圖形用戶界面發(fā)揮功能的操作畫面的數(shù)據(jù)發(fā)送到經(jīng)由網(wǎng)絡(luò)連接的通信終端，從而能夠在與所述通信終端之間共享該操作畫面，所述操作支援裝置具備畫面生成部，按照經(jīng)由輸入部接受的用戶的操作來生成操作畫面；影像記錄部，在被生成的所述操作畫面在與所述通信終端之間被共享時，通過記錄被生成的所述操作畫面來生成影像數(shù)據(jù)，并將所生成的影像數(shù)據(jù)保存到存儲部；顯示控制部，使顯示部顯示被生成的所述操作畫面；以及影像再生部，在被生成的所述操作畫面在與所述通信終端之間不被共享時，從由所述影像記錄部保存到所述存儲部的影像數(shù)據(jù)中，搜索與被生成的所述操作畫面對應(yīng)的影像數(shù)據(jù)，并再生搜索到的影像數(shù)據(jù)，所述顯示控制部，在被生成的所述操作畫面在與所述通信終端之間不被共享時，使所述顯示部同時顯示所述操作畫面和被再生的所述影像數(shù)據(jù)所示的操作支援影像。
2.如權(quán)利要求1所述的操作支援裝置，所述操作支援裝置還具備操作信息記錄部，該操作信息記錄部將示出對所述操作畫面進行的操作的內(nèi)容的操作信息與所述影像數(shù)據(jù)對應(yīng)起來保存到所述存儲部，所述影像再生部，進一步從所述存儲部讀出與搜索到的影像數(shù)據(jù)對應(yīng)的操作信息，所述顯示控制部，在使所述顯示部顯示所述操作支援影像時，進一步使所述顯示部顯示由所述影像再生部讀出的操作信息。
3.如權(quán)利要求2所述的操作支援裝置，所述輸入部是觸摸屏，該輸入部將示出所述觸摸屏的接觸面中的接觸位置的信息作為所述操作信息來輸出。
4.如權(quán)利要求3所述的操作支援裝置，所述顯示控制部，通過以使所述操作信息被輸出的時刻與所述操作畫面被記錄的時刻同步的方式，使預(yù)先規(guī)定的操作圖像重疊在所述操作支援影像被顯示的且與所述操作信息所示的接觸位置相對應(yīng)的區(qū)域，從而使所述顯示部顯示所述操作信息。
5.如權(quán)利要求2所述的操作支援裝置，所述輸入部是具有多個操作鍵的遠程控制器，該輸入部將用于確定所述多個操作鍵中的被用戶操作的操作鍵的信息作為所述操作信息來輸出。
6.如權(quán)利要求5所述的操作支援裝置，所述顯示控制部，通過以使所述操作信息被輸出的時刻與所述操作畫面被記錄的時刻同步的方式，使示出由所述操作信息確定的操作鍵的操作圖像顯示，從而使所述顯示部顯示所述操作信息。
7.如權(quán)利要求1所述的操作支援裝置，所述顯示控制部，在由所述影像再生部讀出了多個影像數(shù)據(jù)的情況下，使所述顯示部同時顯示所述操作畫面和所述多個影像數(shù)據(jù)所示的多個操作支援影像。
8.如權(quán)利要求1所述的操作支援裝置，所述顯示控制部，在由所述影像再生部讀出了多個影像數(shù)據(jù)的情況下，以使所述多個影像數(shù)據(jù)所示的多個操作支援影像依次被顯示的方式，使所述顯示部同時顯示所述操作畫面和所述多個操作支援影像中的任一個操作支援影像。
9.如權(quán)利要求1所述的操作支援裝置，所述操作支援裝置還具備輸入部，該輸入部從用戶接受用于變更被顯示在所述顯示部的操作支援影像的再生狀態(tài)的操作，所述影像再生部，按照由所述輸入部所接受的操作來變更所述影像數(shù)據(jù)的再生狀態(tài)。
10.如權(quán)利要求1所述的操作支援裝置，所述顯示控制部，通過使所述操作支援影像顯示到所述操作畫面被顯示的區(qū)域內(nèi)的一部分，從而使所述顯示部同時顯示所述操作畫面和所述操作支援影像。
11.如權(quán)利要求1所述的操作支援裝置， 所述影像再生部，反復(fù)再生所述影像數(shù)據(jù)。
12.如權(quán)利要求1所述的操作支援裝置，所述影像再生部，在所述操作畫面之前被生成的操作畫面是第一操作畫面且所述操作畫面是第二操作畫面的情況下，將從所述第一操作畫面遷移到所述第二操作畫面時被記錄的所述第二操作畫面的影像數(shù)據(jù)，作為與所述操作畫面對應(yīng)的影像數(shù)據(jù)而從所述存儲部讀出ο
13.如權(quán)利要求1所述的操作支援裝置， 所述操作支援裝置，作為集成電路來被構(gòu)成。
14.一種操作支援方法，通過將作為圖形用戶界面發(fā)揮功能的操作畫面的數(shù)據(jù)發(fā)送到經(jīng)由網(wǎng)絡(luò)來連接的通信終端，從而能夠與所述通信終端之間共享該操作畫面，所述操作支援方法包括以下步驟畫面生成步驟，按照經(jīng)由輸入部接受的用戶的操作來生成操作畫面； 影像記錄步驟，在被生成的所述操作畫面在與所述通信終端之間被共享時，通過記錄被生成的所述操作畫面來生成影像數(shù)據(jù)，并將所生成的影像數(shù)據(jù)保存到存儲部； 顯示控制步驟，使顯示部顯示被生成的所述操作畫面；以及影像再生步驟，在被生成的所述操作畫面在與所述通信終端之間不被共享時，從在所述影像記錄步驟中保存到所述存儲部的影像數(shù)據(jù)中，搜索與被生成的所述操作畫面對應(yīng)的影像數(shù)據(jù)，并再生搜索到的影像數(shù)據(jù)，在所述顯示控制步驟中，在被生成的所述操作畫面在與所述通信終端之間不被共享時，使所述顯示部同時顯示所述操作畫面和被再生的所述影像數(shù)據(jù)所示的操作支援影像。
15.一種程序，用于使計算機執(zhí)行權(quán)利要求14所述的操作支援方法。
全文摘要
操作支援裝置(100)，具備操作畫面生成部(102)，按照用戶的操作來生成操作畫面；操作支援影像記錄部(106)，在操作畫面在與通信終端(150)之間被共享時，通過記錄操作畫面來生成影像數(shù)據(jù)，并將所生成的影像數(shù)據(jù)保存到存儲部(108)；顯示控制部(111)，使顯示器(103)顯示操作畫面；以及操作支援影像再生部(110)，在操作畫面在與通信終端(150)之間不被共享時，從存儲部(108)讀出與操作畫面對應(yīng)的影像數(shù)據(jù)，并再生讀出的影像數(shù)據(jù)，顯示控制部(111)，在操作畫面在與通信終端(150)之間不被共享時，使顯示器(103)同時顯示操作畫面和由操作支援再生部(110)再生的影像數(shù)據(jù)所示的操作支援影像。
文檔編號G06F3/048GK102511029SQ20118000384
公開日2012年6月20日 申請日期2011年6月14日 優(yōu)先權(quán)日2010年6月18日
發(fā)明者田邊直久 申請人:松下電器產(chǎn)業(yè)株式會社