信息處理裝置、投影裝置、信息處理方法以及投影方法
【專利摘要】本發(fā)明提供一種信息處理裝置、投影裝置、信息處理方法以及投影方法。該圖像處理裝置與投影儀連接并且將圖像數(shù)據(jù)發(fā)送到投影儀。該圖像處理裝置包括用于捕捉顯示屏幕的捕捉單元、用于存儲捕捉的顯示屏幕的圖像數(shù)據(jù)的存儲單元、用于通過剪切在所捕捉的顯示屏幕的圖像數(shù)據(jù)和先前捕捉的顯示屏幕的圖像數(shù)據(jù)之間的差分來生成差分圖像數(shù)據(jù)的差分圖像生成器、用于選擇差分圖像數(shù)據(jù)或顯示屏幕的圖像數(shù)據(jù)作為要發(fā)送到投影儀的圖像數(shù)據(jù)的傳送方法確定單元以及用于將圖像數(shù)據(jù)傳送到投影儀的圖像傳送單元。
【專利說明】信息處理裝置、投影裝置、信息處理方法以及投影方法
【技術領域】
[0001]本發(fā)明涉及圖像處理裝置、圖像處理方法、圖像投影裝置以及圖像投影系統(tǒng)。
【背景技術】
[0002]傳統(tǒng)上，在個人計算機(PC)與投影機經(jīng)由網(wǎng)絡連接的環(huán)境下，周期地捕捉PC的桌面屏幕、將其作為圖像數(shù)據(jù)發(fā)送到投影儀并且通過使用投影儀投影圖像數(shù)據(jù)的技術是廣為人知的。另外，通過只將已變化區(qū)域的圖像數(shù)據(jù)(差分圖像數(shù)據(jù))發(fā)送到投影儀來減少網(wǎng)絡負載的技術也是廣為人知的。通過減少網(wǎng)絡負載，在給定時段投影儀能接收的圖像數(shù)據(jù)量(幀數(shù))增加，這導致了提高投影幀率。
[0003]通常，在制作經(jīng)由網(wǎng)絡從PC將桌面屏幕發(fā)送到投影儀的軟件的情況下，在PC中安裝虛擬顯示驅動并且使得操作系統(tǒng)(OS)通知用戶桌面屏幕的變化的方法是廣為人知的。但是由于需要或用戶友好軟件，此方法不能用于在PC中沒有安裝虛擬顯示驅動的安裝較少版本的情況下。
[0004]與此相反，捕捉整個桌面屏幕、將其與先前捕捉的桌面屏幕的圖像數(shù)據(jù)逐像素比較、只剪切包括所有變化的像素(以下稱為“差分像素”)的區(qū)域、生成差分圖像數(shù)據(jù)并將其發(fā)送到投影儀的技術是廣為人知的。在這種方法中，投影儀通過在先前投影的圖像數(shù)據(jù)上疊加所接收的差分圖像數(shù)據(jù)來僅更新差分區(qū)域。

【發(fā)明內容】

[0005]本發(fā)明提供了新穎的圖像處理裝置，其與投影儀連接并且將圖像數(shù)據(jù)發(fā)送到投影儀。
[0006]更具體地，本發(fā)明提供了一種圖像處理裝置，該圖像處理裝置包括用于捕捉顯示屏幕的捕捉單元、用于存儲所捕捉的顯示屏幕的圖像數(shù)據(jù)的存儲單元、用于通過剪切在所捕捉的顯示屏幕的圖像數(shù)據(jù)和先前捕捉的顯示屏幕的圖像數(shù)據(jù)之間的差分來生成差分圖像數(shù)據(jù)的差分圖像生成器、用于選擇差分圖像數(shù)據(jù)或顯示屏幕的圖像數(shù)據(jù)作為要發(fā)送到投影儀的圖像數(shù)據(jù)的傳送方法確定單元以及用于將圖像數(shù)據(jù)傳送到投影儀的圖像傳送單元。所述傳送方法確定單元基于差分圖像數(shù)據(jù)量或將差分圖像數(shù)據(jù)傳送到所述投影儀所需的時間來確定傳送方法。
[0007]圖9是示出了通過投影儀接收的差分圖像數(shù)據(jù)、通過投影儀先前投影的在存儲單元存儲的圖像數(shù)據(jù)以及合成前兩個圖像的疊加圖像的示意圖。即，圖9A是示出了通過投影儀接收的先前投影的圖像數(shù)據(jù)的示意圖，圖9B是示出了從PC發(fā)送的差分圖像數(shù)據(jù)的示意圖，而圖9C是示出了在通過投影儀先前投影的圖像數(shù)據(jù)上疊加從PC發(fā)送的差分圖像數(shù)據(jù)的投影圖像數(shù)據(jù)的示意圖。
[0008]在將差分圖像數(shù)據(jù)發(fā)送到投影儀并將其投影的傳統(tǒng)技術中，如果差分圖像數(shù)據(jù)微小，則由于其并不占用太多時間來提取差分圖像數(shù)據(jù)因此提高了幀速率并且減少了網(wǎng)絡業(yè)務。但是如果差分圖像數(shù)據(jù)巨大，不僅網(wǎng)絡業(yè)務與以原樣發(fā)送PC桌面屏幕的圖像數(shù)據(jù)相比減少，而且由于其占用了太多的時間來提取差分圖像數(shù)據(jù)，反而造成幀率變差，并且這構成了技術問題。
[0009]特別的，如果在PC桌面屏幕上顯示動態(tài)圖像，則由于生成大量差分和差分圖像數(shù)據(jù)量保持巨大，因此幀率容易變差。
[0010]作為將圖像數(shù)據(jù)傳送到投影儀的另一系統(tǒng)，已經(jīng)提出一種圖像傳送系統(tǒng)(即JP-2005-257948-A)。在這個圖像傳送系統(tǒng)中，將發(fā)送到投影儀的層與不發(fā)送到投影儀的層分離。圖像傳送系統(tǒng)捕捉發(fā)送到投影儀的層，并且將捕捉的層發(fā)送到投影儀。同時投影儀接收從PC發(fā)送的層并且在屏幕上投影所接收的層。S卩，PC分離了在投影儀上不顯示的層并通過不使投影儀投影不需要的桌面屏幕來減少網(wǎng)絡業(yè)務。
[0011]然而，在上述圖像傳送系統(tǒng)中，如果差分圖像數(shù)據(jù)量巨大，則即使網(wǎng)絡業(yè)務沒有如此減少，幀率仍然變差，并且這占用時間來提取差分圖像數(shù)據(jù)。
【專利附圖】

【附圖說明】
[0012]當通過結合附圖考慮時，參照以下【具體實施方式】，同樣內容變得更好理解，將容易地獲取對本公開更加全面的理解和許多由此獲得的優(yōu)點。
[0013]圖1是示出了如本發(fā)明實施例的圖像處理系統(tǒng)的示意圖。
[0014]圖2是示出了如本發(fā)明實施例的個人計算機(PC)的硬件配置的方框圖。
[0015]圖3是示出了如本發(fā)明實施例的投影儀的硬件配置的方框圖。
[0016]圖4A和圖4B是示出了如本發(fā)明實施例的PC和投影儀的功能配置的方框圖。
[0017]圖5是示出了在如本發(fā)明實施例的PC中發(fā)送圖像數(shù)據(jù)的處理的流程圖。
[0018]圖6是示出了通過在如本發(fā)明實施例的PC中的傳送方法確定單元執(zhí)行處理的流程圖。
[0019]圖7是示出了通過如本發(fā)明實施例的投影儀執(zhí)行處理的流程圖。
[0020]圖8是示出了當在如本發(fā)明實施例的PC中生成用于提取差分像素的差分圖像數(shù)據(jù)時的每個圖像數(shù)據(jù)的示意圖。
[0021]圖9是示出了現(xiàn)有技術中先前投影的圖像數(shù)據(jù)、通過投影儀接收的差分圖像數(shù)據(jù)以及疊加的投影圖像數(shù)據(jù)的示意圖。
【具體實施方式】
[0022]在描述圖中示出的優(yōu)選實施例中，為了清楚的目的采用具體術語。然而，本專利說明書的公開并不是為了限制于如此選擇的具體術語，而是應理解每個具體要素包括所有具有相同功能、以相似方式運行以及達到相似效果的技術等同體。
[0023]圖1是示出了 PC 10和投影儀20經(jīng)由網(wǎng)絡NT連接的圖像處理系統(tǒng)的示意圖。在此實施例中，多個PC 10 (1)、(2)和(3)和多個投影儀20 (1)、(2)和(3)經(jīng)由網(wǎng)絡NT連接。
[0024]圖2是示出了 PC 10的硬件配置的方框圖。在此實施例中，PC 10具有與通用信息處理終端相同的配置。也就是說，在此實施例的PC 10中，中央處理器(CPU)、隨機存取存儲器(RAM)、只讀存儲器(ROM)、硬盤驅動器(HDD)和接口( I/F)經(jīng)由總線相互連接。并且液晶顯示器(IXD)和輸入設備與I/F連接。CPU是處理單元并且控制整個PC 10的運行。RAM是能讀取和寫入數(shù)據(jù)的高速易失性存儲設備并且當CPU處理數(shù)據(jù)時作為工作區(qū)域使用。ROM是只讀非易失性存儲設備并且存儲如固件的程序。HDD是能讀取和寫入數(shù)據(jù)的非易失性存儲設備并且存儲操作系統(tǒng)(OS)、各種控制程序和應用程序等。I/F將各種硬件和網(wǎng)絡等連接到總線并且控制它們。LCD是用戶能檢查PC 10的狀態(tài)的可視用戶界面。輸入設備是用戶能使用以將信息輸入到PC 10中的如鍵盤和鼠標的用戶接口。
[0025]圖3是示出了投影儀20的硬件配置的方框圖。投影儀20包括CPU、存儲器控制器、主存儲器以及主機-PCI橋。存儲器控制器經(jīng)由主機總線與CPU、主存儲器、主機-PCI橋連接。CPU控制整個投影儀20。主控制器控制來自主存儲器的讀取數(shù)據(jù)并且將數(shù)據(jù)寫入到主存儲器等。主存儲器是用于存儲程序和數(shù)據(jù)、執(zhí)行程序和處理數(shù)據(jù)的系統(tǒng)存儲器并且作為視頻存儲器使用。主機-PCI橋連接外圍設備和PCI設備。主機-PCI橋經(jīng)由HDD I/F與存儲器卡連接。并且主機-PCI橋經(jīng)由PCI總線與PCI設備連接。并且主機-PCI橋經(jīng)由PCI總線和PCI槽與通信卡、無線通信卡和視頻卡等連接。存儲器卡作為OS的引導設備使用。通信卡和無線通信卡用于與如LAN的網(wǎng)絡和通信線路連接。視頻卡用于投影圖像并且向顯示輸出連接器輸出視頻信號。在此實施例中，預先在主存儲器中的存儲設備存儲器區(qū)域等中安裝在投影儀20上執(zhí)行的控制程序。
[0026]圖4A和圖4B是示出了 PC 10和投影儀20的功能配置的方框圖。PC 10包括用于獲取在PC 10上的桌面屏幕的圖像數(shù)據(jù)(其可以是整個圖像數(shù)據(jù)或在指定要顯示的部分圖像情況下部分圖像的圖像數(shù)據(jù))的捕捉單元101、用于確定以桌面屏幕的圖像數(shù)據(jù)或以差分圖像數(shù)據(jù)傳送的傳送方法確定單元102、用于控制存儲設備103a的存儲單元103、差分圖像生成器104和圖像傳送單元105，其中存儲設備103a存儲桌面屏幕的圖像數(shù)據(jù)，差分數(shù)據(jù)生成器104從先前桌面屏幕的圖像數(shù)據(jù)剪切差分并且生成差分圖像數(shù)據(jù)，圖像傳送單元105將圖像數(shù)據(jù)傳送到投影儀20。包括這些功能塊的單元是基于在計算機可讀存儲介質中存儲的程序的PC 10中的功能執(zhí)行單元。
[0027]此處，傳送方法確定單元102包括計數(shù)器106，用于在差分圖像數(shù)據(jù)量或差分圖像數(shù)據(jù)的傳送時間高于預定值的情況下，計數(shù)傳送差分圖像數(shù)據(jù)的次數(shù)；以及仲裁時間測量單元107，用于測量在將差分圖像數(shù)據(jù)的傳送變化到桌面屏幕的圖像數(shù)據(jù)的傳送之后流逝的時間并且利用內部時鐘等。
[0028]投影儀20包括從PC 10接收圖像數(shù)據(jù)的圖像接收器201、在先前投影的投影圖像數(shù)據(jù)上疊加接收到的圖像數(shù)據(jù)的圖像疊加單元202、投影圖像數(shù)據(jù)的圖像投影單元203、存儲所投影的圖像數(shù)據(jù)的存儲設備204a以及控制存儲設備204a的存儲單元204。
[0029]接著，將在下面描述在如上述配置的PC 10中圖像數(shù)據(jù)的傳送處理。圖5是示出了在PC 10中發(fā)送圖像數(shù)據(jù)的處理的流程圖。在PC 10中開始處理后，捕捉單元101獲取在PC 10中桌面屏幕的圖像數(shù)據(jù)(S101)。經(jīng)由存儲單元103在存儲設備103a中存儲所獲取的桌面屏幕的圖像數(shù)據(jù)(S102)。隨后，傳送方法確定單元102參考差分圖像數(shù)據(jù)的量或將差分圖像數(shù)據(jù)傳送到投影儀需要的時間來確定將桌面屏幕的圖像數(shù)據(jù)傳送到投影儀20還是將差分圖像數(shù)據(jù)傳送到投影儀20并且執(zhí)行切換(S103)。
[0030]在執(zhí)行S103中的切換之后，如果要傳送桌面屏幕的圖像數(shù)據(jù)(S104中的“否”)，則圖像傳送單元105將獲取的桌面屏幕的圖像數(shù)據(jù)以原樣傳送給投影儀20 (S105)。
[0031]在執(zhí)行S103中的切換之后，如果要傳送差分圖像數(shù)據(jù)(S104中的“是”)，則差分數(shù)據(jù)生成器104經(jīng)由存儲單元103從存儲設備103a獲取先前桌面屏幕的圖像數(shù)據(jù)以包括所有提取的差分像素(S106)，將先前桌面屏幕的圖像數(shù)據(jù)與當前桌面屏幕的圖像數(shù)據(jù)逐個像素比較，提取差分像素(S107)，并生成差分圖像數(shù)據(jù)。圖像傳送單元105將生成的差分圖像數(shù)據(jù)傳送到投影儀20 (SlOS)0重復從SlOl到S108的步驟直到投影儀20完成投影(S109中的“是”)。
[0032]接著，下面將描述在PC 10中通過傳送方法確定單元102執(zhí)行的處理。圖6是示出了通過在PC中的傳送方法確定單元102執(zhí)行處理的流程圖。在開始處理中，計數(shù)器計數(shù)差分圖像數(shù)據(jù)量超過例如多于100K字節(jié)的預定值的次數(shù)N，并且首先將計數(shù)器值設定為O (S201)。傳送差分圖像數(shù)據(jù)(S203)直到N變?yōu)槔?5的預定值(S202中的“否”)。在這種情況下，如果要傳送的差分圖像數(shù)據(jù)量超過例如超過100K字節(jié)的預定值(S204中的“是”)，則遞增N(S205)。如果在S204中要傳送的差分圖像數(shù)據(jù)量小于100K字節(jié)(S204中的“否”)，則計數(shù)器值每次復位并且將N初始化為O (S206)。
[0033]如果確定N達到例如15的預定值(S202中的“是”)，則存在向傳送桌面屏幕的圖像數(shù)據(jù)的切換，并且傳送桌面屏幕的圖像數(shù)據(jù)(S208)。如果已完成投影(S209中的“是”)，則處理結束。如果尚未完成投影(S209中的“否”)，則保持傳送桌面屏幕的圖像數(shù)據(jù)(從S208到S210)直到達到例如60秒的預定時間(S210中的“否”)。
[0034]如果在S210已流逝60秒(S210中的“是”)，則將N初始化為0(S206)。在這種情況下，如果還沒有完成投影(S207中的“否”)，則處理返回到S202，并且存在再次傳送差分圖像數(shù)據(jù)的切換并且傳送差分圖像數(shù)據(jù)。重復從S202到S210的步驟直到完成投影。
[0035]如上述，在此實施例中，如果差分圖像數(shù)據(jù)量超過100K字節(jié)重復15次，則傳送方法確定單元102變化到傳送桌面屏幕的圖像數(shù)據(jù)，并且除非其已經(jīng)完成投影，否則在開始傳送桌面屏幕的圖像數(shù)據(jù)之后60秒再次變化到傳送差分圖像數(shù)據(jù)。
[0036]這些參數(shù)，例如差分圖像數(shù)據(jù)的預定量(閾值:在本實施例中100K字節(jié))、重復數(shù)
(15)、在開始傳送桌面屏幕的圖像數(shù)據(jù)之后再次開始傳送差分圖像數(shù)據(jù)的預定(流逝)時間(60秒)，能經(jīng)由例如鍵盤的輸入設備(圖中未示出)被任意設置。另外，這些閾值能根據(jù)使用環(huán)境調整。
[0037]并且，假設30ms用于生成差分圖像數(shù)據(jù)，30ms用于將150-字節(jié)差分圖像數(shù)據(jù)傳送到投影儀20，20ms用于將100K-字節(jié)差分圖像數(shù)據(jù)傳送到投影儀20，IOms用于將50K-字節(jié)差分圖像數(shù)據(jù)傳送到投影儀20以及50ms用于將桌面屏幕的圖像數(shù)據(jù)傳送到投影儀20，生成要傳送的圖像數(shù)據(jù)并且完成傳送到投影儀20的時間成為如下面表I所示。
[0038]表I
[0039]
【權利要求】
1.一種信息處理裝置，所述信息處理裝置與投影裝置連接并且將圖像數(shù)據(jù)發(fā)送到所述投影裝置，包括: 捕捉單元，用于捕捉顯示屏幕； 存儲單元，用于存儲所捕捉的顯示屏幕的圖像數(shù)據(jù)； 差分圖像生成器，用于通過剪切在所捕捉的顯示屏幕的圖像數(shù)據(jù)和先前捕捉的顯示屏幕的圖像數(shù)據(jù)之間的差分來生成差分圖像數(shù)據(jù)； 傳送方法確定單元，用于選擇差分圖像數(shù)據(jù)或顯示屏幕的圖像數(shù)據(jù)作為要發(fā)送到所述投影裝置的發(fā)送圖像數(shù)據(jù)；以及 圖像傳送單元，用于將所述發(fā)送圖像數(shù)據(jù)傳送到所述投影裝置， 其中，所述傳送方法確定單元基于差分圖像數(shù)據(jù)量或將差分圖像數(shù)據(jù)傳送到所述投影裝置所需的時間來選擇傳送方法。
2.根據(jù)權利要求1所述的信息處理裝置，其中，所述傳送方法確定單元包括計數(shù)器，如果差分圖像數(shù)據(jù)量或差分圖像數(shù)據(jù)的傳送時間多于預定值，則所述計數(shù)器計數(shù)傳送差分圖像數(shù)據(jù)的次數(shù)，并且在所述計數(shù)器達到預定計數(shù)值的情況下，從傳送差分圖像數(shù)據(jù)改變?yōu)閭魉惋@示屏幕的圖像數(shù)據(jù)。
3.根據(jù)權利要求2所述的信息處理裝置，其中，所述傳送方法確定單元包括時間測量單元，用于測量在將差分圖像數(shù)據(jù)的傳送改變?yōu)樽烂嫫聊坏膱D像數(shù)據(jù)的傳送之后流逝的時間，并且在所述時間測量單元達到預定時間的情況下，從傳送差分圖像數(shù)據(jù)改變?yōu)閭魉惋@示屏幕的圖像數(shù)據(jù)。
4.根據(jù)權利要求3所述的信息處理裝置，還包括輸入設備，用于設置差分圖像數(shù)據(jù)的預定量、預定計數(shù)值、傳送·差分圖像數(shù)據(jù)的預定時間以及從傳送差分圖像數(shù)據(jù)改變?yōu)閭魉惋@示屏幕的圖像數(shù)據(jù)之后流逝的預定時間。
5.根據(jù)權利要求2所述的信息處理裝置，其中，在傳送的差分圖像數(shù)據(jù)量小于預定值的情況下，將所述傳送方法確定單元中的所述計數(shù)器復位。
6.一種投影裝置，所述投影裝置投影從信息處理裝置傳送的圖像數(shù)據(jù)，包括: 圖像接收器，用于從所述信息處理裝置接收圖像數(shù)據(jù)； 存儲單元，用于存儲所投影的圖像數(shù)據(jù)； 圖像疊加單元，如果接收到通過剪切所捕捉的顯示屏幕的圖像數(shù)據(jù)和先前捕捉的顯示屏幕的圖像數(shù)據(jù)之間的差分而生成的差分圖像數(shù)據(jù)，則所述圖像疊加單元從先前投影的圖像數(shù)據(jù)和差分圖像數(shù)據(jù)生成投影圖像數(shù)據(jù)；以及 圖像投影單元，用于投影通過所述圖像疊加單元生成的投影圖像數(shù)據(jù)。
7.—種控制信息處理裝置的方法，所述信息處理裝置與投影裝置連接并且將圖像數(shù)據(jù)發(fā)送到所述投影裝置，包括如下步驟: 捕捉顯不屏眷； 存儲所捕捉的顯示屏幕的圖像數(shù)據(jù)； 通過剪切在所捕捉的顯示屏幕的圖像數(shù)據(jù)和先前捕捉的顯示屏幕的圖像數(shù)據(jù)之間的差分來生成差分圖像數(shù)據(jù)； 選擇差分圖像數(shù)據(jù)或顯示屏幕的圖像數(shù)據(jù)作為要發(fā)送到所述投影裝置的圖像數(shù)據(jù)；以及將圖像數(shù)據(jù)傳送到所述投影裝置， 其中，基于差分圖像數(shù)據(jù)量或將差分圖像數(shù)據(jù)傳送到所述投影裝置所需的時間執(zhí)行所述選擇步驟。
8.—種控制投影裝置的方法，所述投影裝置投影從信息處理裝置傳送的圖像數(shù)據(jù)，包括如下步驟: 從所述信息處理裝置接收圖像數(shù)據(jù)； 存儲所投影的圖像數(shù)據(jù)； 如果接收到通過剪切所捕捉的顯示屏幕的圖像數(shù)據(jù)和先前捕捉的顯示屏幕的圖像數(shù)據(jù)之間的差分而生成的差分圖像數(shù)據(jù)，則從先前投影的圖像數(shù)據(jù)和差分圖像數(shù)據(jù)生成投影圖像數(shù)據(jù)；以及 投影在投影圖像數(shù)據(jù)生成步驟中生成的投影圖像數(shù)據(jù)。
【文檔編號】G06F3/14GK103593046SQ201310341955
【公開日】2014年2月19日 申請日期:2013年8月7日 優(yōu)先權日:2012年8月13日
【發(fā)明者】向笠真哉 申請人:株式會社理光