專利名稱：：圖像處理裝置、圖像處理方法和存儲相關(guān)程序的存儲介質(zhì)的制作方法
技術(shù)領(lǐng)域：
：本發(fā)明涉及從圖像提取字符信息和圖形信息并對所提取的信息進行組織的技術(shù)。
背景技術(shù)：
：由于存儲紙質(zhì)文檔需要大量的空間，因此近年來使用掃描儀或其它讀取裝置讀取文檔、將所讀取的文檔數(shù)字化并且在計算機中將其歸檔的技術(shù)得到越來越多的重視。當(dāng)使用這些技術(shù)將文檔數(shù)字化和歸檔時，把所讀取的文檔存儲為圖像會使文檔中的字符串也被存儲為圖像，這防礙了關(guān)鍵字檢索，并且當(dāng)檢索所需文檔時，必須執(zhí)行逐個檢查表示這些文檔的各幅圖像的復(fù)雜過程。鑒于這個原因，當(dāng)將文檔數(shù)字化和歸檔時，希望準確地識別出顯示圖形的區(qū)域和顯示字符串的區(qū)域，并且希望將表示字符串的圖像內(nèi)的字符串轉(zhuǎn)換成文本以便于文檔檢索。在日本特開平1-266689A中公開了能夠準確識別文檔中的字符串區(qū)和圖形區(qū)的技術(shù)的例子，而且采用這種技術(shù)能夠準確識別文檔中的字符串從而將其轉(zhuǎn)換成文本。轉(zhuǎn)換成文本并將文檔內(nèi)字符串區(qū)域中的字符串歸檔使得可以進行關(guān)鍵字檢索并有利于數(shù)字化文檔的再使用。然而，有時不僅希望再使用數(shù)字化文檔來檢索書寫內(nèi)容，還希望用于檢索文檔中包含的圖形和照片等。由于通過與字符串相匹配來檢索所需信息，所以使用上述的將書寫內(nèi)容轉(zhuǎn)換成文本并將其歸檔的方法不可能檢索文檔內(nèi)的圖形和照片等，并且因此不可能檢索所需信息?？紤]到上述情況而制造出本發(fā)明，并且本發(fā)明提供了一種有利于檢索數(shù)字化文檔的圖形區(qū)的技術(shù)。
發(fā)明內(nèi)容為了解決上文所討論的問題，本發(fā)明提供了一種圖像處理裝置，其包括讀取單元，其讀取文檔并生成表示所讀取文檔的圖像的圖像文件；圖形區(qū)提取單元，其在所述圖像文件所表示的圖像中提取圖形區(qū)；文字區(qū)提取單元，其在所述圖像文件所表示的圖像中提取文字區(qū)；字符串提取單元，其提取該圖形區(qū)提取單元所提取的圖形區(qū)中的字符串；文本提取單元，其從所述文字區(qū)提取單元所提取的文字區(qū)中提取包括與該字符串提取單元所提取的字符串相同的字符串的文本；和文檔數(shù)據(jù)生成單元，其生成表示文檔的文檔數(shù)據(jù)，該文檔包含所述圖形區(qū)提取單元所提取的圖形區(qū)和所述文本提取單元所提取的文本。根據(jù)這種圖像處理裝置，生成表示所讀取文檔的圖像文件，并提取所述圖像文件所表示的圖像中的圖形區(qū)和所述圖像文件所表示的所述圖像中的文字區(qū)。從文字區(qū)提取包括與所提取的圖形區(qū)中的字符串相同的字符串的文本；并且生成表示包括所提取的圖形區(qū)和所提取的文本的文檔的文檔數(shù)據(jù)。由于生成了表示包括圖形區(qū)和該圖形區(qū)中的文本的文檔的文檔數(shù)據(jù)，所以在檢索文檔數(shù)據(jù)以獲得與圖形區(qū)相關(guān)的字符串時，會返回包括圖形區(qū)的文檔數(shù)據(jù)作為檢索結(jié)果。根據(jù)本發(fā)明的一個實施例，有利于檢索數(shù)字化文檔中的圖形區(qū)。基于下圖詳細描述本發(fā)明的實施例，其中圖1表示根據(jù)本發(fā)明一個實施例的通信系統(tǒng)的結(jié)構(gòu)；圖2是表示根據(jù)本發(fā)明一個實施例的圖像處理裝置的主要部件的結(jié)構(gòu)的方框圖；圖3表示存儲在根據(jù)該實施例的圖像處理裝置中的關(guān)聯(lián)表的格式；圖4是表示在CPU102生成結(jié)構(gòu)化文檔時執(zhí)行的處理的流程圖；圖5是表示在CPU102生成結(jié)構(gòu)化文檔時執(zhí)行的處理的流程圖；圖6表示圖像輸入單元所讀取的文檔；圖7表示從圖像文件提取的區(qū)域；圖8表示圖像處理裝置所生成的結(jié)構(gòu)化文檔；圖9表示圖像處理裝置所提供的頁面；圖10表示結(jié)構(gòu)化文檔所表示的頁面；圖11表示圖像輸入單元所讀取的文檔；圖12表示圖像處理裝置所生成的結(jié)構(gòu)化文檔。具體實施例方式<實施例結(jié)構(gòu)>圖1表示包括根據(jù)本發(fā)明一個實施例的圖像處理裝置100的通信系統(tǒng)的示例。PC(個人計算機)200是個人計算機裝置，并且與LAN(局域網(wǎng))300相連。PC200存儲有WWW(萬維網(wǎng))瀏覽器軟件，當(dāng)運行該軟件時，從與LAN300相連的圖像處理裝置100獲取各種文件，所獲取的文件中的內(nèi)容可以被解譯并顯示頁面。圖2是表示位于根據(jù)本發(fā)明一個實施例的圖像處理裝置100的硬件結(jié)構(gòu)內(nèi)的、根據(jù)本發(fā)明的主要組件的結(jié)構(gòu)的方框圖。如圖2所示，圖像處理裝置100的組件與總線101相連，并通過該總線101在組件間進行數(shù)據(jù)傳輸。通信單元107通過通信線路(未示出)與LAN300相連，并用作與PC200和連接到LAN300上的其它外部裝置之間進行通信的通信界面。通信單元107在CPU102的控制下，將從LAN300發(fā)送的數(shù)據(jù)提供給CPU102，并通過總線101將CPU102所提供的數(shù)據(jù)發(fā)送到LAN300。圖像輸入單元108具有將文檔讀取為圖像的圖像掃描儀，并在CPU102的控制下，讀取放在圖像掃描儀上的文檔并將表示所讀取文檔的圖像文件存儲在存儲單元105中。U/I(用戶界面)單元106具有多個用于操作圖像處理裝置100的鍵(未示出)，并根據(jù)用戶的按鍵向CPU102提供指令。例如，U/I單元106可具有讀取鍵，當(dāng)按下該讀取鍵時，向CPU102提供讀取指令，指示讀取放在圖像輸入單元108上的文檔。此外，U/I單元106具有液晶顯示器(未示出)，所述液晶顯示器在CPU102的控制下，在其自身上顯示文本、圖形畫面、菜單畫面等。存儲單元105具有能存儲數(shù)據(jù)的裝置(諸如硬盤裝置)，并存儲以下這些程序服務(wù)器程序，其使圖像處理裝置100用作WWW服務(wù)器裝置；控制程序，其控制圖像處理裝置100的各個單元；和CGI(公共網(wǎng)關(guān)接口)程序，其根據(jù)來自外部裝置的指令進行工作。存儲單元105還存儲各種類型的文件，例如由圖像輸入單元108生成的圖像文件和用HTML(超文本標(biāo)記語言)寫成的文件。如圖3所示，存儲單元105還存儲格式關(guān)聯(lián)表TB1。所述關(guān)聯(lián)表TB1是使表示所讀取文檔中的圖形區(qū)的文件與和所述圖形區(qū)相關(guān)的字符串關(guān)聯(lián)起來的表，并且該表包括表示文檔中的圖形區(qū)的圖像文件的文件名、表示所述圖形區(qū)標(biāo)題的字符串、描述所述圖形區(qū)的字符串和表示所述圖形特征的字符串。ROM103包含例如稱為IPL(初始程序裝入程序)的程序。一旦由電源(圖中未示出)進行供電，CPU102就從ROM103讀取IPL并執(zhí)行它。當(dāng)執(zhí)行IPL時，CPU102通過把RAM104用作工作區(qū)來讀取存儲在存儲單元105中的服務(wù)器程序和控制程序、運行這些程序、并控制圖像處理裝置100的各個單元。當(dāng)CPU102運行服務(wù)器程序時，圖像處理裝置100用作WWW服務(wù)器，并執(zhí)行按照HTTP協(xié)議的通信。此外，CPU102運行控制程序來執(zhí)行圖4和圖5所示的流程圖中所示的處理、從圖像輸入單元108讀取文檔并生成顯示所讀取文檔概要的結(jié)構(gòu)化文檔。該結(jié)構(gòu)化文檔是文本數(shù)據(jù)并且用例如XHTML(擴展超文本標(biāo)記語言)寫成。此外，結(jié)構(gòu)化文檔語言不限于XHTML，而可以是XML(擴展標(biāo)記語言)、HTML、SGML(標(biāo)準通用標(biāo)記語言)或可表示結(jié)構(gòu)化文檔的任何其它語言。如上所述，從CPU執(zhí)行程序來實現(xiàn)各種功能的意義上來說，圖像處理裝置100的結(jié)構(gòu)和普通計算機的硬件結(jié)構(gòu)相同。<實施例的操作>下面描述本實施例的操作。首先，參考圖4中的流程圖描述圖像處理裝置100生成結(jié)構(gòu)化文檔的操作，隨后描述圖像處理裝置100使用所生成的結(jié)構(gòu)化文檔為PC200提供檢索服務(wù)的另一操作。應(yīng)注意在以下的操作描述中，假設(shè)向圖像處理裝置100提供了電力并且CPU102已正在執(zhí)行控制程序。并且，在這些操作描述中，假設(shè)圖像處理裝置100讀取如圖6所示的文檔。<生成結(jié)構(gòu)化文檔時的操作>當(dāng)圖像處理裝置100的用戶按下U/I單元106所提供的讀取鍵時，將用于讀取放在圖像輸入單元108上的文檔的讀取指令從U/I單元106輸出到CPU102。當(dāng)提供了上述讀取指令時，CPU102使圖像輸入單元108讀取放在該圖像輸入單元上的文檔(圖4，步驟SA1)。當(dāng)圖像輸入單元108完成文檔的讀取時，其在存儲單元105中生成表示所讀取文檔的圖像文件；對于所述圖像文件提供文件名，該文件名唯一識別所生成的文件(例如“image001.jpg”)；并發(fā)送終止消息，該消息向CPU102報告完成了文檔讀取。當(dāng)CPU102接收到上述終止消息時，其分析存儲單元105中所生成的圖像文件、提取顯示文本的區(qū)域和顯示圖形的區(qū)域、并為各個提取區(qū)域生成表示所提取區(qū)域的圖像的數(shù)據(jù)(步驟SA2)。例如，當(dāng)圖像輸入單元108讀取了圖6所示的文檔時，如圖7所示，提取文字區(qū)EA1到EA3作為顯示文本的區(qū)域，提取圖形區(qū)EB1到EB3作為顯示圖形的區(qū)域。然后，生成以下文件表示文本區(qū)EA1的文本區(qū)圖像數(shù)據(jù)DA1(文件名da1.jpg)；表示文本區(qū)EA2的文本區(qū)圖像數(shù)據(jù)DA2(文件名da2.jpg)；表示文本區(qū)EA3的文本區(qū)圖像數(shù)據(jù)DA3(文件名da3.jpg)；表示圖形區(qū)EB1的圖形區(qū)圖像數(shù)據(jù)DB1(文件名db1.jpg)；表示圖形區(qū)EB2的圖形區(qū)圖像數(shù)據(jù)DB2(文件名db2.jpg)；和表示圖形區(qū)EB3的圖形區(qū)圖像數(shù)據(jù)DB3(文件名db3.jpg)。在這些生成文件中，表示圖形區(qū)的圖像數(shù)據(jù)的文件名存儲在關(guān)聯(lián)表TB1的圖形區(qū)字段中。此外，除了包括諸如曲線圖和表的圖表的區(qū)域外，還提取了包括照片、圖片等的區(qū)域作為顯示圖形的區(qū)域。換句話說，在本描述中，圖形不僅包括曲線圖和表，還包括了廣泛的概念，包括照片、圖片等。接著，CPU102分析表示文本區(qū)的文本區(qū)圖像數(shù)據(jù)DA1到DA3；提取文本區(qū)中的字符串；并生成表示所提取的字符串的文本數(shù)據(jù)DT1(文件名dt1.txt)到DT3(文件名dt3.txt)(步驟SA3)。當(dāng)CPU102完成文本數(shù)據(jù)的生成時，其分析表示圖形區(qū)的圖形區(qū)圖像數(shù)據(jù)DB1到DB3并識別由圖形區(qū)圖像數(shù)據(jù)所表示的圖像(步驟SA4)。例如，對于圖6所示的文檔來說，圖形區(qū)圖像數(shù)據(jù)DB1和圖形區(qū)圖像數(shù)據(jù)DB2所表示的圖像被識別為條線圖，而圖形區(qū)圖像數(shù)據(jù)DB3所表示的圖像被識別為照片。接著，CPU102按順序從存儲單元105讀取所生成的圖形區(qū)圖像數(shù)據(jù)(步驟SA5)，并且基于步驟SA4中的識別結(jié)果判定所讀取的圖形區(qū)圖像數(shù)據(jù)所表示的圖像是否是顯示曲線圖的圖像(步驟SA6)。例如，當(dāng)CPU102讀取圖形區(qū)圖像數(shù)據(jù)DB1時，由于該數(shù)據(jù)在步驟SA4中被識別為條線圖，所以在步驟SA6中將圖形區(qū)圖像數(shù)據(jù)DB1所表示的圖像判定為曲線圖(步驟SA6是)。當(dāng)在步驟SA6中判定為“是”時，CPU102分析圖形區(qū)圖像數(shù)據(jù)，并且判定在該圖形區(qū)圖像數(shù)據(jù)所表示的圖像內(nèi)是否存在表示曲線圖標(biāo)題的字符串(步驟SA7)。具體而言，CPU102在圖形區(qū)圖像數(shù)據(jù)所表示的圖像中提取字符串，如果在所提取的字符串中存在包含字符串“圖”或“表”的文本，則判定該字符串是圖形區(qū)所表示的圖像的標(biāo)題。例如，如圖7所示，在圖形區(qū)圖像數(shù)據(jù)DB1的情況下，該數(shù)據(jù)所表示的圖形區(qū)EB1包含字符串“圖11996-2000移動產(chǎn)品的趨勢”，所以CPU102判定該字符串是圖形區(qū)圖像數(shù)據(jù)EB1所表示的圖像的標(biāo)題(步驟SA7是)。當(dāng)在步驟SA7中判斷為“是”時，CPU102將表示標(biāo)題的字符串關(guān)聯(lián)為圖形區(qū)圖像數(shù)據(jù)DB1中的表示標(biāo)題的字符串。具體而言，如圖3所示，CPU102將字符串“圖11996-2000移動產(chǎn)品的趨勢”存儲在關(guān)聯(lián)表TB1中的存儲有圖形區(qū)圖像數(shù)據(jù)DB1的文件名為“db1.jpg”的一行中的標(biāo)題字段中(步驟SA8)，。接著，CPU102檢索如下文本數(shù)據(jù)，該文本數(shù)據(jù)包括與標(biāo)題中所含的字符串相同的字符串(步驟SA9)。例如，文本數(shù)據(jù)DT1包括與標(biāo)題中所含的“圖1”相同的字符串，從而提取文本數(shù)據(jù)DT1，作為包括與所述標(biāo)題相同的字符串的文本數(shù)據(jù)。當(dāng)CPU102提取包含與標(biāo)題相同的字符串(步驟SA10是)的文本數(shù)據(jù)DT1時，其判斷所提取的文本數(shù)據(jù)是否是與圖形區(qū)圖像數(shù)據(jù)DB1關(guān)聯(lián)的段落，并使圖形區(qū)圖像數(shù)據(jù)DB1與文本數(shù)據(jù)DT1關(guān)聯(lián)起來。具體而言，如圖3所示，CPU102將所提取的文本數(shù)據(jù)DT1的文件名存儲在存儲有圖形區(qū)圖像數(shù)據(jù)DB1的文件名為“db1.jpg”的一行中的段落字段中(步驟SA11)。接著，CPU102提取圖形區(qū)圖像數(shù)據(jù)所表示的曲線圖的特征并生成表示所提取特征的字符串。例如，在圖形區(qū)圖像數(shù)據(jù)DB1所表示的曲線圖的情況下，該曲線圖表示上升趨勢，所以生成了字符串“上升趨勢”。基于諸如曲線圖標(biāo)題、軸向、軸單位等的因素生成表示曲線圖特征的字符串。接著，CPU102使所生成的字符串與圖形區(qū)圖像數(shù)據(jù)產(chǎn)生關(guān)聯(lián)。具體而言，如圖3所示，CPU102將所生成的字符串“上升趨勢”存儲在關(guān)聯(lián)表TB1中的存儲有圖形區(qū)圖像數(shù)據(jù)DB1的文件名為“db1.jpg”的一行中的特征字段中(步驟SA12)。當(dāng)CPU102完成步驟SA12中的處理時，其判斷是否所有圖形區(qū)圖像數(shù)據(jù)的標(biāo)題、段落和特征均關(guān)聯(lián)(步驟SA13)。由于CPU102此時尚未完成圖形區(qū)圖像數(shù)據(jù)DB2與圖形區(qū)圖像數(shù)據(jù)DB3的關(guān)聯(lián)，所以返回到步驟SA5并繼續(xù)上述處理(步驟SA13否)。接著，CPU102讀取圖形區(qū)圖像數(shù)據(jù)DB2(步驟SA5)，并基于步驟SA4的識別結(jié)果判斷所讀取的圖形區(qū)圖像數(shù)據(jù)DB2所表示的圖像是否為表示曲線圖的圖像(步驟SA6)。由于在步驟SA4中圖形區(qū)圖像數(shù)據(jù)DB2被識別為曲線圖，所以在步驟SA6中，圖形區(qū)圖像數(shù)據(jù)DB2所表示的圖像被判定為曲線圖(步驟SA6是)。當(dāng)在步驟SA6中判定為“是”時，CPU102分析圖形區(qū)圖像數(shù)據(jù)，并且判斷在圖形區(qū)圖像數(shù)據(jù)所表示的圖像內(nèi)是否存在表示曲線圖標(biāo)題的字符串(步驟SA7)。在圖形區(qū)圖像數(shù)據(jù)DB2的情況下，該數(shù)據(jù)所表示的圖形區(qū)EB2不包含字符串“圖”或“表”，所以CPU102判定在圖形區(qū)圖像數(shù)據(jù)DB2所表示的圖像中不存在表示曲線圖標(biāo)題的字符串(步驟SA7否)。當(dāng)在步驟SA7中判定為“否”時，CPU102接著提取在圖形區(qū)圖像數(shù)據(jù)DB2所表示的圖像區(qū)域中所包含的字符串(步驟SA14)，并檢索包括與所提取的字符串相同的字符串的文本數(shù)據(jù)(步驟SA15)。在圖形區(qū)圖像數(shù)據(jù)DB2的情況下，從該數(shù)據(jù)所表示的圖形區(qū)EB2提取字符串“公司A”、“公司B”、“公司C”、“臺數(shù)”和“年(每半年)”。由于文本數(shù)據(jù)DT2包括與所提取的字符串“公司A”相同的字符串，所以發(fā)現(xiàn)文本數(shù)據(jù)DT2是與圖形區(qū)圖像數(shù)據(jù)DB2關(guān)聯(lián)的段落。當(dāng)CPU102判定文本數(shù)據(jù)DT2是與圖形區(qū)圖像數(shù)據(jù)DB2關(guān)聯(lián)的段落時，CPU102將對應(yīng)的文本數(shù)據(jù)DT2的文件名“dt2.txt”存儲在關(guān)聯(lián)表TB1中的存儲有圖形區(qū)圖像數(shù)據(jù)DB2的文件名為“db2.jpg”的一行中的段落字段中，如圖3所示。接著，CPU102提取圖形區(qū)圖像數(shù)據(jù)DB2所表示的曲線圖的特征，并且生成表示所提取的特征的字符串。在圖形區(qū)圖像數(shù)據(jù)DB2所表示的曲線圖的情況下，該曲線圖表示上升趨勢，所以CPU102生成字符串“上升趨勢”并將生成的字符串“上升趨勢”存儲在關(guān)聯(lián)表TB1中的存儲有圖形區(qū)圖像數(shù)據(jù)DB2的文件名為“db2.jpg”的一行中的特征字段中(步驟SA12)，如圖3所示。當(dāng)CPU102完成了步驟SA12中的處理時，其判斷是否所有圖形區(qū)圖像數(shù)據(jù)的標(biāo)題、段落和特征均關(guān)聯(lián)(步驟SA13)。由于CPU102在此時尚未完成對于圖形區(qū)圖像數(shù)據(jù)DB3的關(guān)聯(lián)，所以其返回到步驟SA5并繼續(xù)處理(步驟SA13否)接著，CPU102讀取圖形區(qū)圖像數(shù)據(jù)DB3(步驟SA5)，并且基于步驟SA4的識別結(jié)果判定所讀取的圖形區(qū)圖像數(shù)據(jù)DB3所表示的圖像是否為顯示曲線圖的圖像(步驟SA6)。由于在步驟SA4中圖形區(qū)圖像數(shù)據(jù)DB3被識別為照片，所以在步驟SA6中，圖形區(qū)圖像數(shù)據(jù)DB3所表示的圖像被判定為照片(步驟SA6否)。當(dāng)在步驟SA6中判定為“否”時，CPU102分析圖形區(qū)圖像數(shù)據(jù)，并判定在圖形區(qū)圖像數(shù)據(jù)所表示的圖像內(nèi)是否存在表示圖像標(biāo)題的字符串(步驟SA17)。在圖形區(qū)圖像數(shù)據(jù)DB3的情況下，該數(shù)據(jù)所表示的圖形區(qū)EB3包含字符串“圖3”，所以CPU102判定該字符串是圖形區(qū)圖像數(shù)據(jù)EB3所表示的圖像的標(biāo)題(步驟SA17是)。當(dāng)在步驟SA17中判定為“是”時，CPU102使表示標(biāo)題的字符串關(guān)聯(lián)為表示圖形區(qū)圖像數(shù)據(jù)DB3的標(biāo)題的字符串。CPU102將字符串“圖3”存儲在關(guān)聯(lián)表TB1中的存儲有圖形區(qū)圖像數(shù)據(jù)DB3的文件名為“db3.jpg”的一行中的標(biāo)題字段中，如圖3所示(步驟SA18)。接著，CPU102檢索文本數(shù)據(jù)，該文本數(shù)據(jù)包括與標(biāo)題中包含的字符串相同的字符串(步驟SA19)。文本數(shù)據(jù)DT3包括與標(biāo)題中包含的“圖3”相同的字符串，所以文本數(shù)據(jù)DT3被提取為包括與標(biāo)題相同的字符串的文本數(shù)據(jù)。當(dāng)CPU102提取包含與標(biāo)題相同的字符串的文本數(shù)據(jù)DT3時(步驟SA20是)，其判定所提取的文本數(shù)據(jù)是否為與圖形區(qū)圖像數(shù)據(jù)DB3關(guān)聯(lián)的段落，并且如圖3所示，將所提取的文本數(shù)據(jù)DT3的文件名存儲在關(guān)聯(lián)表TB1中的存儲有圖形區(qū)圖像數(shù)據(jù)DB3的文件名為“db3.jpg”的一行中的段落字段中(步驟SA21)。當(dāng)CPU102在步驟SA21中完成處理時，其判定是否所有圖形區(qū)圖像數(shù)據(jù)的標(biāo)題、段落和特征均關(guān)聯(lián)(步驟SA13)。由于CPU102此時完成了所有圖形區(qū)圖像數(shù)據(jù)DB1到DB3的標(biāo)題、段落和特征的關(guān)聯(lián)，所以在步驟SA13判定為“是”。當(dāng)在步驟SA13中判定為“是”時，CPU102開始生成結(jié)構(gòu)化文檔，該文檔顯示了圖像輸入單元108所讀取的文檔的概要。首先，CPU102將表示了對所讀取文檔進行表示的圖像文件的存儲位置的URL(統(tǒng)一資源定位符)寫入該結(jié)構(gòu)化文檔中(圖5步驟SA22)。接著，CPU102讀取存儲在關(guān)聯(lián)表TB1中的圖形區(qū)圖像數(shù)據(jù)的文件名“db1.jpg”(圖5步驟SA23)，并將作為屬性值的文件名“db1.jpg”與標(biāo)記符“img”一起寫入，所述標(biāo)記符使圖像得以顯示(步驟SA24)，如圖8所示。接著，CPU102讀取圖形區(qū)圖像數(shù)據(jù)DB1的標(biāo)題“圖11996-2000移動產(chǎn)品的趨勢”，該標(biāo)題與圖形區(qū)圖像數(shù)據(jù)DB1的文件名關(guān)聯(lián)并存儲在關(guān)聯(lián)表TB1中(步驟SA25)，并且將所提取的標(biāo)題與標(biāo)記符“tabletitle”一起寫入，如圖8所示(步驟SA26)。接著，CPU102讀取文本數(shù)據(jù)的文件名“dt1.txt”，該文件名與圖形區(qū)圖像數(shù)據(jù)DB1的文件名關(guān)聯(lián)并存儲在關(guān)聯(lián)表TB1的段落字段中(步驟SA27)，并將所讀取文件名的文件中所寫的字符串與標(biāo)記符“pre”一起寫入，這使字符串得以顯示，如圖8所示(步驟SA28)。接著，CPU102讀取字符串“上升趨勢”，其與圖形區(qū)圖像數(shù)據(jù)DB1的文件名關(guān)聯(lián)并存儲在關(guān)聯(lián)表TB1的特征字段中(步驟SA29)，并將所讀取的字符串與標(biāo)記符“tableComment”一起寫入，如圖8所示(步驟SA30)。當(dāng)CPU102完成步驟SA29中的處理時，CPU102判定其是否已讀取了存儲在關(guān)聯(lián)表TB1中的所有圖形區(qū)圖像數(shù)據(jù)的文件名(步驟SA31)。由于CPU102尚未讀取完圖形區(qū)圖像數(shù)據(jù)DB2和圖形區(qū)圖像數(shù)據(jù)DB3，所以其返回到步驟SA23并繼續(xù)該處理。然后，CPU102按照與圖形區(qū)圖像數(shù)據(jù)DB1相同的方式，通過步驟SA23到步驟SA31中的處理生成如圖8所示的結(jié)構(gòu)化文檔。當(dāng)CPU102在步驟SA31中判定其已讀取了關(guān)聯(lián)表TB1中所存儲的所有圖形區(qū)圖像數(shù)據(jù)的文件名時(步驟SA31是)，完成結(jié)構(gòu)化文檔的生成，將唯一識別所生成的結(jié)構(gòu)化文檔的文件名“bunnsyo001”附在結(jié)構(gòu)化文檔上，并且將所生成的結(jié)構(gòu)化文檔存儲在存儲單元105中。<向PC200提供結(jié)構(gòu)化文檔時的操作>下文描述當(dāng)圖像處理裝置100向PC200提供所生成的結(jié)構(gòu)化文檔時的操作。應(yīng)注意在以下描述中，假設(shè)在PC200中已經(jīng)運行著WWW瀏覽器。當(dāng)PC200的用戶操作PC200，從存儲在圖像處理裝置100中的多個HTML文件中輸入表示頁面的一HTML文件的URL(如圖9中所示)，并執(zhí)行操作來顯示此頁面時，PC200向圖像處理裝置100發(fā)送包括輸入URL的HTTP請求消息。當(dāng)圖像處理裝置100的通信單元107接收到所述HTTP請求消息時，CPU102從存儲單元105中讀取由該消息中包含的URL所指定的HTML文件。然后，CPU102生成包含所讀取的HTML文件的HTTP響應(yīng)消息并將該消息發(fā)送到PC200。當(dāng)PC200接收到該消息時，由PC200上運行的WWW瀏覽器解譯該消息中包含的HTML文件，并可以在PC200的顯示屏上顯示如圖9所示的頁面P01，在該頁面上可輸入用于檢索的檢索關(guān)鍵字。然后，當(dāng)PC200的用戶在頁面P01的文本框中輸入例如字符串“mobile”，并隨后點擊頁面P01上的“檢索”按鈕時，PC200從接收到的HTML文件中提取存儲在圖像處理裝置100中的CGI程序的URL，并將包含所提取的URL和文本框中輸入的字符串的HTTP請求消息發(fā)送到圖像處理裝置100。當(dāng)CPU102接收到該消息時，其提取所接收的消息中的字符串“mobile”和CGI程序的URL。然后，CPU102從存儲單元105中讀取由所提取的URL指定的CGI程序，并通過將所提取的字符串用作CGI程序的參數(shù)來運行該CGI程序。當(dāng)CPU102運行該CGI程序時，其使用作為參數(shù)的數(shù)據(jù)(即鍵入頁面P01中的字符串)作為檢索關(guān)鍵字，并且從存儲在存儲單元105中的結(jié)構(gòu)化文檔中檢索包含與檢索關(guān)鍵字相同的字符串的結(jié)構(gòu)化文檔。當(dāng)CPU102找到例如由上述操作生成的文件名為“bunnsyo001”的結(jié)構(gòu)化文檔，以作為包含與用作檢索關(guān)鍵字的字符串相同的字符串的結(jié)構(gòu)化文檔時，CPU102生成HTML文件；寫入表示結(jié)構(gòu)化文檔存儲位置的URL作為超鏈接；生成包含該HTML文件的HTTP響應(yīng)消息；并將生成的HTTP響應(yīng)消息發(fā)送到PC200。當(dāng)PC200接收到該消息時，由WWW瀏覽器解譯該消息中包含的HTML文件，并且在PC200的顯示屏上顯示包含用作檢索關(guān)鍵字的字符串的結(jié)構(gòu)化文檔的URL。然后，當(dāng)PC200的用戶點擊該URL時，PC200從HTML文件中提取作為超鏈接寫入該HTML文件中的結(jié)構(gòu)化文檔的URL，并且將包括所提取的URL的HTTP請求消息發(fā)送到圖像處理裝置100。當(dāng)圖像處理裝置100的通信單元107接收到HTTP請求消息時，CPU102從存儲單元105中讀取由該消息中包含的URL所指定的結(jié)構(gòu)化文檔。然后，CPU102生成包含所讀取結(jié)構(gòu)化文檔的HTTP響應(yīng)消息，并將該消息發(fā)送到PC200。當(dāng)PC200接收到該消息時，由PC200上運行的WWW瀏覽器解譯該消息中包含的結(jié)構(gòu)化文檔，并且例如在PC200的顯示屏上顯示出顯示所述結(jié)構(gòu)化文檔的頁面P02，如圖10所示。隨后，當(dāng)PC200的用戶點擊頁面P02的上部所顯示的圖像文件的文件名時，將包括該圖像文件的URL的HTTP請求消息從PC200發(fā)送到圖像處理裝置100。當(dāng)圖像處理裝置100的通信單元107接收到所述HTTP請求消息時，CPU102從存儲單元105中讀取由該消息中包含的URL所指定的圖像文件。隨后，CPU102生成包括所讀取圖像文件的HTTP響應(yīng)消息并將該消息發(fā)送到PC200。當(dāng)PC200接收到該消息時，由WWW瀏覽器解譯該消息中包含的所述圖像文件，并且在PC200的顯示屏上顯示圖6所示的文檔的圖像。如上所述，根據(jù)本實施例，當(dāng)讀取文檔時，生成表示所讀取文檔的圖像文件，并且還生成結(jié)構(gòu)化文檔，該文檔包含與所讀取文檔內(nèi)的圖形區(qū)相關(guān)的信息。由于僅將與圖形區(qū)相關(guān)的字符串而不是所讀取文檔中的所有字符串寫入結(jié)構(gòu)化文檔中，所以檢索結(jié)構(gòu)化文檔中的字符串使得可以間接檢索圖形區(qū)中的圖像。<變型例>盡管在上文中給出了本發(fā)明實施例的描述，但是本發(fā)明還可以通過許多其它方式來實施，且并不限于上文所述實施例。例如，可利用下文所描述的方式對上文的實施例作一些變化來實現(xiàn)本發(fā)明。根據(jù)上文的實施例，在圖形區(qū)表示照片或圖片的情況下，也可以生成表示圖形區(qū)特征的字符串，并且將其與曲線圖一起寫入結(jié)構(gòu)化文檔中。例如，如果圖形區(qū)顯示一張人的照片，則可以識別出人數(shù)并將其寫入“tableComment”標(biāo)記符中，或者，如果圖形區(qū)顯示風(fēng)景圖，則可識別出上述風(fēng)景，并將表示風(fēng)景特征的諸如“山”或“海”的字符串寫入“tableComment”標(biāo)記符中。被識別為上文實施例中的曲線圖的圖形不限于條線圖，而可以是其它類型的曲線圖，諸如餅形圖表或線狀圖。根據(jù)上文實施例，生成所讀取文檔的結(jié)構(gòu)化文檔，但也可以對于各個圖形區(qū)的圖像數(shù)據(jù)生成結(jié)構(gòu)化文檔。另外，如果生成各個圖形區(qū)的圖像數(shù)據(jù)的結(jié)構(gòu)化文檔，則可以將與圖形區(qū)中的圖像相關(guān)的其它圖形區(qū)的標(biāo)題和其它圖形區(qū)的圖像數(shù)據(jù)的URL寫入結(jié)構(gòu)化文檔中。例如，如果圖像處理裝置100讀取圖11所示的文檔，則提取字符串“圖11996-2000移動產(chǎn)品的趨勢”、字符串“圖2”和字符串“圖32001-2002移動產(chǎn)品的趨勢”，作為標(biāo)題。當(dāng)生成各個圖形區(qū)的圖像數(shù)據(jù)的結(jié)構(gòu)化文檔時，CPU102從關(guān)聯(lián)表TB1讀取與這些標(biāo)題的字符串類似的標(biāo)題，并且讀取與所讀取標(biāo)題關(guān)聯(lián)的圖形區(qū)圖像數(shù)據(jù)的文件名。在圖11所示的文檔的情況下，文檔上部中的曲線圖標(biāo)題“圖11996-2000移動產(chǎn)品的趨勢”與文檔下部中的曲線圖標(biāo)題“圖32001-2002移動產(chǎn)品的趨勢”的比較顯示字符串“移動產(chǎn)品的趨勢”相匹配，并存在相似性。當(dāng)生成與文檔上部中的曲線圖相關(guān)的結(jié)構(gòu)化文檔時，CPU102從關(guān)聯(lián)表TB1中讀取標(biāo)題“圖32001-2002移動產(chǎn)品的趨勢”和與這個標(biāo)題關(guān)聯(lián)的圖形區(qū)圖像數(shù)據(jù)的文件名，并將其與例如標(biāo)記符“related_figure”一起寫入圖12中所示的結(jié)構(gòu)化文檔中。根據(jù)該實施例，可容易檢測到文檔中的相關(guān)繪圖。如果圖像處理裝置100在圖形區(qū)中沒有發(fā)現(xiàn)任何字符串“圖”或“表”，則其識別出圖形區(qū)中的字符串，并且將所識別的字符串與包含相同字符串的文本數(shù)據(jù)產(chǎn)生關(guān)聯(lián)，以使上述文本數(shù)據(jù)作為與圖形區(qū)相關(guān)的段落，但是，如果包括多個與所識別的字符串相同的字符串的文本數(shù)據(jù)，則圖像處理裝置100可以將文檔中接近圖形區(qū)的段落關(guān)聯(lián)起來，以作為與圖形區(qū)相關(guān)的段落。還可以將包含與所識別的字符串相同的字符串最多的文本數(shù)據(jù)產(chǎn)生關(guān)聯(lián)，以作為與圖形區(qū)相關(guān)的段落。另外，如果在圖形區(qū)中沒有發(fā)現(xiàn)諸如“圖”或“表”的字符串，則可以識別出圖形區(qū)中的圖像，并且使包含表示圖形區(qū)中的圖像特征的文字的文本數(shù)據(jù)產(chǎn)生關(guān)聯(lián)，以作為與圖形區(qū)相關(guān)的段落。圖像處理裝置100的用戶可以通過操作U/I單元106把表示個人感興趣的條目的關(guān)鍵字預(yù)先存儲在存儲單元105中，之后，圖像處理裝置100可生成用于與存儲在存儲單元105中的關(guān)鍵字相關(guān)的圖形和書寫的結(jié)構(gòu)化文檔。例如，如果圖像處理裝置100的用戶對“公司A”感興趣，并且在存儲單元105中存儲字符串“公司A”，則圖像處理裝置100讀取圖6所示的文檔；識別圖形區(qū)中的字符串；使圖形區(qū)圖像數(shù)據(jù)DB1和DB2的文件名(其包括字符串“公司A”)關(guān)聯(lián)，并將它們存儲在關(guān)聯(lián)表TB1中。圖像處理裝置100提取與圖形區(qū)圖像數(shù)據(jù)DB1和DB2相關(guān)的標(biāo)題、段落和特征，并生成結(jié)構(gòu)化文檔。根據(jù)該實施例，僅僅從所讀取文檔提取與指定關(guān)鍵字相關(guān)的圖形和書寫內(nèi)容，并生成結(jié)構(gòu)化文檔。因此，通過指定檢索關(guān)鍵字就可能省去檢索結(jié)構(gòu)化文檔的工作。當(dāng)根據(jù)上文實施例無法顯示圖形區(qū)的標(biāo)題(標(biāo)記符“tabletitle”之間的字符串)和圖形特征(標(biāo)記符“tableComment”檢的字符串)時，可以生成結(jié)構(gòu)化文檔以顯示這些內(nèi)容。圖像處理裝置100可具有諸如打印機的打印單元，并根據(jù)用戶輸入的指令打印結(jié)構(gòu)化文檔。圖像處理裝置100可以打印由文檔檢索所提取的結(jié)構(gòu)化文檔。根據(jù)上文實施例的圖像處理裝置100可接收表示通過LAN300發(fā)送的文檔的圖像文件，并對于所接收的圖像文件，生成與這些圖像文件相關(guān)的結(jié)構(gòu)化文檔。如上所述，本發(fā)明提供了一種圖像處理裝置，其包括讀取單元，其讀取文檔并生成表示所讀取文檔的圖像的圖像文件；圖形區(qū)提取單元，其在所述圖像文件所表示的圖像中提取圖形區(qū)；文字區(qū)提取單元，其在所述圖像文件所表示的圖像中提取文字區(qū)；字符串提取單元，其提取所述圖形區(qū)提取單元所提取的圖形區(qū)中的字符串；文本提取單元，其從所述文字區(qū)提取單元所提取的所述文字區(qū)中提取包括與所述字符串提取單元所提取的字符串相同的字符串的文本；和文檔數(shù)據(jù)生成單元，其生成表示文檔的文檔數(shù)據(jù)，該文檔包含所述圖形區(qū)提取單元所提取的圖形區(qū)和所述文本提取單元所提取的文本。根據(jù)該圖像處理裝置，生成表示所讀取文檔的圖像文件，并提取所述圖像文件所表示的圖像中的圖形區(qū)和所述圖像文件所表示的圖像中的文字區(qū)。從所述文字區(qū)中提取包含與所提取的圖形區(qū)中的字符串相同的字符串的文本，并生成表示包括所提取的圖形區(qū)和所提取的文本的文檔的文檔數(shù)據(jù)。由于生成了表示包括圖形區(qū)和圖形區(qū)中的文本的文檔的文檔數(shù)據(jù)，所以檢索文本數(shù)據(jù)，以尋找與圖形區(qū)相關(guān)的字符串會返回包括所述圖形區(qū)的文檔數(shù)據(jù)以作為檢索結(jié)果。上文對本發(fā)明實施例的描述是出于說明和描述的目的。而并不旨在窮舉或?qū)⒈景l(fā)明限于所公開的精確形式。顯然，本領(lǐng)域的技術(shù)人員能夠進行許多修改和變化。選擇并描述這些實施例以最好地解釋本發(fā)明的原理及其實際應(yīng)用，因而使所屬領(lǐng)域的其它技術(shù)人員能理解本發(fā)明的各種實施例及其各種修改，以適應(yīng)特定的預(yù)期使用。本發(fā)明的范圍由下文的權(quán)利要求及其等價物來限定。權(quán)利要求1.一種圖像處理裝置，其包括讀取單元，其讀取文檔并生成表示所讀取文檔的圖像的圖像文件；圖形區(qū)提取單元，其在所述圖像文件所表示的圖像中提取圖形區(qū)；文字區(qū)提取單元，其在所述圖像文件所表示的圖像中提取文字區(qū)；字符串提取單元，其提取所述圖形區(qū)提取單元所提取的圖形區(qū)中存在的字符串；文本提取單元，其從所述文字區(qū)提取單元所提取的文字區(qū)中提取包含與所述字符串提取單元提取的字符串相同的字符串的文本；以及文檔數(shù)據(jù)生成單元，其生成表示包含所述圖形區(qū)提取單元所提取的圖形區(qū)和所述文本提取單元所提取的文本的文檔的文檔數(shù)據(jù)。2.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中所述文檔數(shù)據(jù)生成單元生成表示包含所述圖形區(qū)提取單元所提取的圖形區(qū)、所述字符串提取單元所提取的字符串以及所述文本提取單元所提取的文本的文檔的文檔數(shù)據(jù)。3.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中所述文檔數(shù)據(jù)生成單元生成包含表示所述圖像文件的存儲位置的信息的文檔數(shù)據(jù)。4.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中所述文檔數(shù)據(jù)生成單元從所述文本提取單元所提取的文本中提取與所指定的字符串相同的字符串，并生成表示包含所提取字符串的文檔的文檔數(shù)據(jù)。5.根據(jù)權(quán)利要求1所述的圖像處理裝置，其中所述圖形區(qū)提取單元提取多個圖形區(qū)；所述圖像處理裝置進一步包括相關(guān)信息提取單元，其對于所述圖形區(qū)提取單元所提取的多個圖形區(qū)中的每一個，提取與所述圖形區(qū)相關(guān)的其它圖形區(qū)的相關(guān)信息；并且所述文檔數(shù)據(jù)生成單元生成包含所述相關(guān)信息提取單元所提取的信息的文檔數(shù)據(jù)。6.根據(jù)權(quán)利要求1所述的圖像處理裝置，其進一步包括特征提取單元，其提取所述圖形區(qū)提取單元所提取的圖形區(qū)的特征，其中，所述文檔數(shù)據(jù)生成單元生成包含表示所述特征提取單元所提取的特征的字符串的文檔數(shù)據(jù)。7.一種圖像處理方法，其包括讀取文檔并生成表示所讀取文檔的圖像的圖像文件；在所述圖像文件所表示的圖像中提取圖形區(qū)；在所述圖像文件所表示的圖像中提取文字區(qū)；提取所述圖形區(qū)中存在的字符串；從所述文字區(qū)提取包含與在提取所述字符串的處理中所提取的字符串相同的字符串的文本；并且生成表示包含所述圖形區(qū)和所述文本的文檔的文檔數(shù)據(jù)。8.根據(jù)權(quán)利要求7所述的圖像處理方法，其中，在生成所述文檔數(shù)據(jù)的處理中，生成表示包含所述圖形區(qū)、所述字符串和所述文本的文檔的文檔數(shù)據(jù)。9.根據(jù)權(quán)利要求7所述的圖像處理方法，其中，在生成所述文檔數(shù)據(jù)的處理中，生成包含表示所述圖像文件的存儲位置的信息的文檔數(shù)據(jù)。10.根據(jù)權(quán)利要求7所述的圖像處理方法，其中，在生成所述文檔數(shù)據(jù)的處理中，從所述文本中提取與所指定的字符串相同的字符串，并生成表示包含所提取字符串的文檔的文檔數(shù)據(jù)。11.根據(jù)權(quán)利要求7所述的圖像處理方法，其中，在提取所述圖形區(qū)的處理中，提取多個圖形區(qū)；所述圖像處理方法進一步包括如下處理對于所述多個圖形區(qū)中的每一個，提取與所述圖形區(qū)相關(guān)的其它圖形區(qū)的相關(guān)信息；并且在生成所述文檔數(shù)據(jù)的處理中，生成包含所述信息的文檔數(shù)據(jù)。12.根據(jù)權(quán)利要求7所述的圖像處理方法，進一步包括提取所述圖形區(qū)的特征，其中，在生成所述文檔數(shù)據(jù)的處理中，生成包含表示所述特征的字符串的文檔數(shù)據(jù)。13.根據(jù)權(quán)利要求1所述的圖像處理裝置，還包括格式關(guān)聯(lián)表，其將表示所述圖形區(qū)的文件和與所述圖形區(qū)相關(guān)的字符串關(guān)聯(lián)起來，其中所述格式關(guān)聯(lián)表包含表示所述圖形區(qū)的文件的文件名，以及表示所述圖形區(qū)的標(biāo)題的字符串、描述所述圖形區(qū)的字符串和表示所述圖形區(qū)的特征的字符串中的至少一個。14.一種圖像處理裝置，其包括讀取單元，其讀取文檔；圖形區(qū)提取單元，其從所述讀取單元所讀取的文檔中提取圖形區(qū)；文字區(qū)提取單元，其從所述讀取單元所讀取的文檔中提取文字區(qū)；字符串提取單元，其提取所述圖形區(qū)中存在的字符串；文本提取單元，其從所述文字區(qū)提取包含與所述字符串提取單元所提取的字符串相同的字符串的文本；和格式關(guān)聯(lián)單元，其將所述文本的信息與所述圖形區(qū)關(guān)聯(lián)起來。15.根據(jù)權(quán)利要求14所述的圖像處理裝置，進一步包括文檔數(shù)據(jù)生成單元，其生成表示包含所述圖形區(qū)提取單元所提取的圖形區(qū)和所述文本提取單元所提取的文本的文檔的文檔數(shù)據(jù)。16.根據(jù)權(quán)利要求14所述的圖像處理裝置，其中所述格式關(guān)聯(lián)單元具有一個將表示所述圖形區(qū)的文件和與所述圖形區(qū)相關(guān)的字符串關(guān)聯(lián)起來的表。17.根據(jù)權(quán)利要求16所述的圖像處理裝置，其中所述表包含表示所述圖形區(qū)的文件的文件名，以及表示所述圖形區(qū)的標(biāo)題的字符串、描述所述圖形區(qū)的字符串和表示所述圖形區(qū)的特征的字符串中的至少一個。18.一種圖像處理裝置，其包括讀取單元，其讀取文檔；圖形區(qū)提取單元，其從所述讀取單元所讀取的文檔中提取圖形區(qū)；文字區(qū)提取單元，其從所述讀取單元所讀取的文檔中提取文字區(qū)；字符串提取單元，其提取所述圖形區(qū)中存在的字符串；和關(guān)聯(lián)單元，其基于所述字符串提取單元所提取的字符串將所述文字區(qū)的信息與所述圖形區(qū)關(guān)聯(lián)起來。19.一種計算機可讀存儲介質(zhì)，所述存儲介質(zhì)存儲可由計算機執(zhí)行從而執(zhí)行圖像處理功能的指令程序，所述功能包括讀取文檔；生成表示所讀取文檔的圖像的圖像文件；提取所述圖像中的圖形區(qū)；提取所述圖像中的文字區(qū)；提取所述圖像區(qū)中存在的字符串；從所述文字區(qū)中提取包含與在提取所述字符串的處理中所提取的字符串相同的字符串的文本；以及使所述文字區(qū)中的文本與所述圖形區(qū)中存在的字符串關(guān)聯(lián)起來。全文摘要一種圖像處理裝置具有讀取單元；圖形區(qū)提取單元；文字區(qū)提取單元；字符串提取單元；和關(guān)聯(lián)單元。所述讀取單元讀取文檔。所述圖形區(qū)提取單元從所述讀取單元所讀取的文檔中提取圖形區(qū)。所述文字區(qū)提取單元從所述讀取單元所讀取的文檔中提取文字區(qū)。所述字符串提取單元提取所述圖形區(qū)中存在的字符串。所述關(guān)聯(lián)單元基于所述字符串提取單元所提取的字符串將文字區(qū)的信息與圖形區(qū)關(guān)聯(lián)起來。文檔編號G06K9/00GK1677435SQ200510056319公開日2005年10月5日申請日期2005年3月17日優(yōu)先權(quán)日2004年4月1日發(fā)明者田川昌俊,田宗道弘,劉紹明,增市博,田代潔,石川恭輔,伊藤篤,佐藤直子申請人:富士施樂株式會社