傳送終端和傳送方法
【專利摘要】本發(fā)明涉及傳送終端和傳送方法，其針對在網絡擁擠致使傳送容量下降的通信環(huán)境下，電視會議終端發(fā)生圖像數(shù)據收信延遲，嚴重時還發(fā)生圖像數(shù)據中斷，甚至發(fā)生聲音數(shù)據中斷的問題，提供一種傳送終端，該傳送終端在這樣的環(huán)境下，不僅能夠中斷通信對方的傳送終端發(fā)送的除聲音數(shù)據以外的內容數(shù)據，而且還中斷該傳送終端自己的除聲音數(shù)據以外的內容數(shù)據的發(fā)送，從而有助于緩解網絡擁擠，確保聲音數(shù)據的傳送。而且，此時的傳送終端不要求通信對方的傳送終端中斷發(fā)送除聲音數(shù)據以外的內容數(shù)據，因此不需要為此特意向對方傳送終端提出中斷發(fā)送除聲音數(shù)據以外的內容數(shù)據的要求。
【專利說明】傳送終端和傳送方法
【技術領域】
[0001]本發(fā)明涉及傳送終端之間通過包括聲音數(shù)據在內的內容數(shù)據的收發(fā)信來實現(xiàn)通信的傳送終端和傳送方法。
【背景技術】
[0002]近年來，為了節(jié)約出差經費和時間，用于舉行遠距離電視會議的電視會議系統(tǒng)得到普及。該電視會議系統(tǒng)通過在多個電視會議終端之間直接收發(fā)圖像數(shù)據以及聲音數(shù)據來進行通信。
[0003]此外，目前，一種在多個電視會議終端之間設置用于中繼圖像數(shù)據和聲音數(shù)據的中繼裝置的電視會議系統(tǒng)也正在逐漸普及。設有該中繼裝置的電視會議系統(tǒng)采用視頻編碼技術，能夠在暫時性的通信網絡故障發(fā)生時或傳送終端處理能力不夠時，盡可能地將通信故障抑止到最小程度。該視頻編碼技術中使用一種被稱之為H.264 / SVC (Scalable VideoCoding，可伸縮視頻編碼)的視頻編碼技術規(guī)格(參見專利文獻1:JP特表2010-506461號公報)。
[0004]然而，在網絡擁擠等造成傳送容量下降的通信環(huán)境下，電視會議終端中圖像數(shù)據的收信有可能被推遲，進而，不僅圖像數(shù)據中斷，就連數(shù)據量較圖像數(shù)據少的聲音數(shù)據也可能中斷。

【發(fā)明內容】

[0005]針對上述問題，本發(fā)明提供一種傳送終端，其通過與對方傳送終端之間收發(fā)包含聲音數(shù)據在內的內容數(shù)據來實現(xiàn)與所述對方傳送終端之間的通信，其特征在于具備以下各部:收信部，用于接收所述內容數(shù)據之中由所述對方傳送終端發(fā)送的第一內容數(shù)據；送信部，用于發(fā)送所述內容數(shù)據之中從該傳送終端送往所述對方傳送終端的第二內容數(shù)據；以及，延遲檢測部，用于檢測所述收信部收到所述第一內容信息時的延遲時間，當所述延遲檢測部檢測到的延遲時間超過規(guī)定值時，所述送信部中斷所述第二內容數(shù)據中除聲音數(shù)據以外的數(shù)據送信。
[0006]根據以上所述，本發(fā)明的效果在于，在網絡擁擠等原因造成傳送容量下降的通信環(huán)境下，傳送終端不僅中斷通信對方的傳送終端發(fā)送的除聲音數(shù)據以外的內容數(shù)據，而且還中斷該傳送終端自己的除聲音數(shù)據以外的內容數(shù)據的發(fā)送，從而有助于緩解網絡擁擠，確保聲音數(shù)據的傳送。
【專利附圖】

【附圖說明】
[0007]圖1是作為本發(fā)明實施方式前提的傳送系統(tǒng)的示意圖。
[0008]圖2是在傳送系統(tǒng)中圖像數(shù)據、聲音數(shù)據、以及各種管理信息的通信狀態(tài)示意圖。
[0009]圖3A、圖3B、圖3C是用于說明圖像數(shù)據畫質概念的示意圖。
[0010]圖4是終端外觀圖。[0011]圖5是硬件結構模塊圖。
[0012]圖6是管理系統(tǒng)、中繼裝置以及程序供給系統(tǒng)的功能模塊圖。
[0013]圖7是構成傳送系統(tǒng)的各終端、裝置以及系統(tǒng)的功能模塊圖。
[0014]圖8是畫面管理表的示意圖。
[0015]圖9是最終篩選部的功能模塊圖。
[0016]圖10是初步篩選部的功能模塊圖。
[0017]圖11是改變圖像狀態(tài)管理表的示意圖。
[0018]圖12是中繼裝置管理表的示意圖。
[0019]圖13是終端認證管理表的示意圖。
[0020]圖14是終端管理表的示意圖。
[0021]圖15是收信名單管理表的示意圖。
[0022]圖16是時域管理表的示意圖。
[0023]圖17是地址優(yōu)先度管理表的示意圖。
[0024]圖18是傳送速度優(yōu)先度管理表的示意圖。
[0025]圖19是圖像狀態(tài)管理表的示意圖。
[0026]圖20是管理表示各個中繼裝置運行狀態(tài)的狀態(tài)信息的處理時序圖。
[0027]圖21是在傳送終端之間準備開始通話的準備階段中的處理時序圖。
[0028]圖22是篩選中繼裝置的處理時序圖。
[0029]圖23是篩選中繼裝置的處理流程圖。
[0030]圖24是實行中繼裝置篩選時的優(yōu)先度點數(shù)計算狀態(tài)示意圖。
[0031]圖25A和圖25B是本發(fā)明實施方式的傳送終端選擇中繼裝置的處理時序圖。
[0032]圖26是在傳送終端中選擇中繼裝置的處理流程圖。
[0033]圖27是在傳送終端之間收發(fā)圖像數(shù)據和聲音數(shù)據的處理時序圖。
[0034]圖28是一例顯示器顯示的畫面的示意圖。
[0035]圖29是改變顯示器上顯示的畫面的處理流程。
[0036]圖30是顯示內容發(fā)生變化后的畫面管理表的示意圖。
[0037]圖31是顯示器上顯示的改變后的畫面的示意圖。
[0038]圖32是短信制作、發(fā)送以及顯示的處理時序圖。
[0039]圖33是短信制作處理流程圖。
[0040]圖34是顯不短彳目的流程圖。
[0041]圖35是顯示器上顯示的第一顯示形態(tài)畫面得示意圖。
[0042]圖36是顯示器上顯示的第二顯示形態(tài)的畫面的示意圖。
[0043]圖37是顯示器上顯示的第三顯示形態(tài)的畫面的示意圖。
[0044]圖38本發(fā)明第一實施方式涉及的通信延遲解消處理流程圖。
[0045]圖39本發(fā)明第二實施方式涉及的通信延遲解消處理流程圖。
[0046]標記說明:1傳送系統(tǒng)，10傳送終端(終端)，11傳送終端的收發(fā)信部(作為一例收信部,或者作為一例送信部),14攝像部，18延遲檢測部,30中繼裝置,50傳送管理系統(tǒng),60延遲時間管理部，70路由器，90程序提供系統(tǒng)，100保守系統(tǒng)，120顯示器，1000,3000,5000存儲部，1001圖像管理數(shù)據庫，3001改變圖像狀態(tài)管理數(shù)據庫，5001中繼裝置管理數(shù)據庫，5002終端認證管理數(shù)據庫，5003終端管理數(shù)據庫，5004收信名單管理數(shù)據庫，5005時域管理數(shù)據庫，5006優(yōu)先度管理數(shù)據庫，5007圖像狀態(tài)管理數(shù)據庫。
【具體實施方式】
[0047]以下，首先利用圖1~圖37來說明作為本發(fā)明實施方式前提的技術方案。該技術方案雖然是本發(fā)明的前提，但并不是公知技術。
[0048]【作為本發(fā)明實施方式前提的技術方案】
[0049]《整體結構》
[0050]圖1是作為本發(fā)明實施方式前提的傳送系統(tǒng)的示意圖，圖2是傳送系統(tǒng)中圖像數(shù)據、聲音數(shù)據、以及各種管理信息的通信狀態(tài)示意圖。圖3A、圖3B、圖3C是用于說明圖像數(shù)據畫質概念的示意圖。
[0051]在此針對用戶利用電視會議終端等傳送終端與對方用戶通信舉行電視會議的情況進行說明。說明中采用“電視會議” 一詞，但在一般情況下也稱之為“視頻會議”，兩者意義相同。
[0052]首先，圖1所示的傳送系統(tǒng)1包括多個傳送終端(10aa、10ab、…)、各個傳送終端(10aa、10ab、…)用的顯示器(120aa、120ab、...)、多個中繼裝置(30a、30b、30c、30d)、傳送管理系統(tǒng)50、程序提供系統(tǒng)90、以及保守系統(tǒng)100。
[0053]多個終端10之間傳送內容數(shù)據，如圖像數(shù)據以及聲音數(shù)據。
[0054]在以下的說明中，將傳送終端簡稱為終端，將傳送管理系統(tǒng)簡稱為管理系統(tǒng)。在表不多個終端(10aa、10ab、…)中的任意一個終端時，稱之為終端10,在表不多個顯不器(120aa、120ab、…)中任意一個顯不器時，稱之為顯不器120,在表不多個中繼裝置(30a、30b、30c、30d)中任意一個中繼裝置時，稱之為中繼裝置30。進而，將要求開始電視會議的終端稱為要求終端，而將接受要求及接收中繼數(shù)據的終端稱為收信終端。
[0055]如圖2所示，在傳送系統(tǒng)1中，要求終端10A與收信終端10B之間建立經由管理系統(tǒng)50且用于各種管理信息通信的管理信息用時域sei。同時，要求終端10A與收信終端10B之間還建立經由中繼裝置30、分別用于高分辨率圖像數(shù)據、中分辨率圖像數(shù)據、低分辨率圖像數(shù)據、以及聲音圖像數(shù)據的4個時域。在此將這4個時域統(tǒng)稱為圖像.聲音數(shù)據用時域
sedo
[0056]在此說明圖像數(shù)據中的圖像分辨率。圖3A~圖3C是用于說明作為圖像數(shù)據的畫質的概念示意圖。圖3A顯示以橫向160像素、縱向120像素構成的基礎圖像即低分辨率圖像，圖3B顯示以橫向320像素、縱向240像素構成的中分辨率圖像，圖3C顯示以橫向640像素、縱向480像素構成的高分辨率圖像。在通過狹窄帶域時，只有用來形成基礎圖像的低分辨率圖像數(shù)據構成的低畫質圖像數(shù)據受到中繼，而通過較寬的帶域時，形成基礎圖像的低分辨率圖像數(shù)據以及中分辨率的圖像數(shù)據構成的中等畫質圖像數(shù)據受到中繼，進而在通過寬帶域時，形成基礎圖像的低分辨率圖像數(shù)據、中分辨率的圖像數(shù)據、以及高分辨率圖像數(shù)據構成的高質量圖像數(shù)據均受到中繼。與圖像數(shù)據相比，聲音數(shù)據的數(shù)據量較小，為此，經過通信網絡2中的帶域時，無論是狹窄帶域、還是較寬帶域、或是非常寬的帶域，聲音數(shù)據均受到中繼。
[0057]圖1所示的中繼`裝置30在多個終端10之間中繼內容數(shù)據。管理系統(tǒng)50統(tǒng)一管理終端10的登錄認證、終端10的傳送(通信)狀態(tài)的管理、收信名單的管理、以及中繼裝置30的通信狀況等。圖像數(shù)據的圖像既可是動畫也可以是靜畫，還可以同時包括動畫和靜畫雙方圖像。
[0058]多個路由器(70a、70b、70c、70d、70ab、70cd)用于選擇圖像數(shù)據和聲音數(shù)據的最佳傳送路徑。在以下的說明中，用路由器70表示路由器(70a、70b、70c、70d、70ab、70cd)中
任意一個路由器。
[0059]程序提供系統(tǒng)90中具備下述HD (Hard Disk，硬磁盤)204，其中保存用于讓終端10實現(xiàn)各項功能，或者說使終端10起各種作用的終端用程序，并能夠向終端10發(fā)送該終端用程序。該終端用程序用于實現(xiàn)終端10的各項功能。此外，程序提供系統(tǒng)90的HD204中還保存用于實現(xiàn)中繼裝置30的各項功能，或者說讓中繼裝置10起到各項作用的中繼裝置用程序，并向中繼裝置30發(fā)送該中繼裝置用程序。進而，程序提供系統(tǒng)90的HD204中還保存用于實現(xiàn)管理系統(tǒng)50各種功能，或者說讓管理系統(tǒng)50起各項作用的傳送管理用程序，并且向管理系統(tǒng)50發(fā)送該程序。
[0060]保守系統(tǒng)100是用于對管理終端10、中繼裝置30、管理系統(tǒng)50、以及程序提供系統(tǒng)90中至少一個系統(tǒng)進行維修、管理、保守的計算機。例如，當保守系統(tǒng)100設置在國內，而終端10、中繼裝置30、管理系統(tǒng)50、或者程序提供系統(tǒng)90設置在國外時，保守系統(tǒng)100經由通信網絡2，對終端10、中繼裝置30、管理系統(tǒng)50、以及程序提供系統(tǒng)90中任意一個系統(tǒng)或裝 置進行遠程維修、管理、保守等保守業(yè)務。另外，保守系統(tǒng)100不經由網絡，對終端10、中繼裝置30、管理系統(tǒng)50、以及程序提供系統(tǒng)90中任意一個系統(tǒng)實行機型編號、制造編號、銷售站、保修檢點、或者故障歷史的管理等的保守服務。
[0061]終端(10aa、10ab、10ac、…)、中繼裝置30a、以及路由器70a通過LAN2a連接進行通信。終端(10ba、10bb、10bc、…)、中繼裝置30b、以及路由器70b通過LAN2b連接進行通信。LAN2a和LAN2b由包含路由器70ab在內的專用線2ab連接進行通信，并被設置在預定區(qū)域A內。例如區(qū)域A為日本，LAN2a設置在東京事業(yè)所內，LAN2b設置在大阪事業(yè)所內。
[0062]另一方面，終端(10ca、10cb、10cc、…)、中繼裝置30c、以及路由器70c通過LAN2c連接進行通信。終端(10da、10db、10dc、…)、中繼裝置30d、以及路由器70d通過LAN2d連接進行通信。LAN2c和LAN2d由包含路由器70f在內的專用線2cd連接，可以通信，并被設置在預定區(qū)域B內。例如區(qū)域B為美國，LAN2c設置在紐約事業(yè)所內，LAN2b設置在華盛頓DC事業(yè)所內。區(qū)域A和區(qū)域B之間通過路由器70ab、70cd經由因特網2i連接進行通信。
[0063]管理系統(tǒng)50以及程序提供系統(tǒng)90通過因特網2i與終端10以及中繼裝置30連接進行通信。管理系統(tǒng)50以及程序提供系統(tǒng)90既可設置在區(qū)域A或區(qū)域B，也可設置在除此以外的其他區(qū)域。
[0064]以LAN2a、LAN2b、專用線2ab、因特網21、專用線2cd、LAN2c、以及LAN2d構成通信網絡2。該通信網絡2中不但可以有線通信，有些部分還可以實行WiFi (WirelessFidelity)或藍牙(Bluetooth,注冊商標)等無線通信。
[0065]圖1中的各個終端10、中繼裝置30、管理系統(tǒng)50、各路由器70、程序提供系統(tǒng)90、以及保守系統(tǒng)100的下面顯示的4個數(shù)字簡易表示一般的IPv4中的IP地址。例如，終端10aa的IP地址為“1.2.1.3”。除了 IPv4以外，還可以使用IPv6，在此為了方便，用IPv4進行說明。[0066]終端10之間的通信不僅可以在多個地點(事業(yè)所)之間，或同一地點的不同辦公室之間，還可以在室內或室內外或室外之間進行。在室外時，可以用手機通信網絡等無線通信。
[0067]《硬件結構》
[0068]以下說明硬件結構。圖4是終端10的外觀圖。在以下的說明中，設終端10的長度方向平行于X軸，在水平面內Υ軸垂直于X軸，ζ軸同時垂直于X軸和Υ軸(平行于鉛直方向)。
[0069]如圖4所示，終端10具有筐體1100、臂1200、以及照相機框架1300。其中，筐體1100的后壁1110上設有未圖示的吸氣面，該吸氣面上有多個吸氣孔，筐體1100的前壁1120的表面上設有排氣面1121，該排氣面1121上有多個排氣孔。隨著筐體1100中內藏冷卻扇的驅動，外部空氣經由終端10后方的未圖示吸氣面吸入，而后經由排氣面1121從終端10的前方排出。筐體1100右側壁面1130中設有集音孔1131，用于收集下述內藏型麥克風114發(fā)出的聲音、物音、以及各種雜音。
[0070]在筐體1100的右側壁面1130—方設置操作面板1150。該操作面板1150上設有將在以下敘述的操作鍵108 (108a~108e)、電源開關109、以及報警燈119，同時還設有多個聲音輸出孔構成的聲音輸出面1151,用于通過將在以下敘述的內藏型揚聲器115輸出的輸出聲音。筐體1100的左側壁面一方設置收納部1160,該收納部1160被形成為凹部,用于收納臂1200以及照相機框架1300。筐體1100的右側壁面1130上設置多個接口(1132a~1132c)，該接口用于以導線電連接將在以下敘述的外設I / F118。另外在筐體1100的左側壁面1140上設置未圖示接口 ，該接口用于以顯示器120用的導線120c電連接顯示器I /F118。
[0071]在以下的敘述中，用操作鍵108表示操作鍵108a~108e中的任意操作鍵，并用接口 1132表示接口 1132a~1132c中的任意接口。
[0072]用鉸鏈1210將臂1200安裝在筐體1100上，該臂1200可相對于筐體1100在轉動角度Θ1的范圍135°以內上下轉動。圖4顯示轉動角度Θ1為90°時的狀態(tài)。
[0073]照相機筐體1300中設有下述內藏型照相機112，可拍攝用戶、文件資料或室內等景色。該照相機筐體1300上設有鉸鏈1310，通過該鉸鏈1300照相機筐體1300被安裝到臂1200上。照相機框體1300相對于臂1200可在水平轉動角度Θ 2的范圍±180°內以及垂直轉動角度Θ 3的范圍±45°內作上下左右轉動。圖4所示狀態(tài)下0 2為0°。
[0074]中繼裝置30、傳送管理系統(tǒng)50、程序提供系統(tǒng)90、以及保守系統(tǒng)100的外觀均與普通服務器及電腦的外觀相同，在此省略外觀說明。
[0075]圖5是本發(fā)明實施方式的終端10的硬件結構。如圖5所示，本實施方式的終端10包括:中央處理器(CPU, Central Processing Unit) 101,用于控制終端10整體動作；只讀存儲器(ROM，Read Only Memory) 102，其中保存用于CPU101啟動的初始程序安裝器(IPL，Initia 1 Program Loader)等程序；隨機存取存儲器(RAM, Random Access Memory) 103,用于作為CPU101的工作區(qū)域；閃存104，用于存儲終端程序以及圖像和聲音等各種數(shù)據；固態(tài)驅動器(SSD，Solid State Driver) 105，按照CPU101的指令控制閃存104中各種數(shù)據的讀取以及寫入；介質驅動器107，用于控制閃存等存儲介質106的數(shù)據讀取或寫入(存儲)；操作鍵108，用于終端10的收信終端等時的選擇操作；電源開關109，用于終端10的電源的接通與切斷之間的轉換；以及網絡接口(I / F，Interface) 111，用于利用通信網絡2進行數(shù)據傳送。
[0076]此外，終端10還包括:內藏型照相機112，用于根據CPU101的控制來拍攝被攝體并獲得圖像數(shù)據；拍攝元件I / F113，用于控制該照相機112的驅動；內藏型麥克風114，用于輸入聲音；內藏型揚聲器115,用于輸出聲音；聲音輸入輸出I / F116,用于根據CPU101的控制來處理麥克風114以及揚聲器115之間的聲音信號的輸入輸出；顯不器I / F117,用于根據CPU101的控制來向外設顯示器120傳送圖像數(shù)據；外設I / F118，用于連接各種外設；報警燈119，用于通知終端10發(fā)生的各種功能異常；以及，總線110，為如圖2所示的電連接上述各個結構元件的地址總線或數(shù)據總線等。
[0077]顯示器120是用液晶或有機電致發(fā)光形成的顯示部，用于顯示被攝體圖像或操作用圖標等，其通過導線120c連接顯示器I / F117。導線120c既可以是模擬RGB (VGA)信號用導線，也可以是分量視頻用的導線，還可以用高清晰度多媒體(HDMI, High-Def initionMultimedia Interface)接口或數(shù)字視頻接口 (DVI,Digital Video interactive)信號用的導線。
[0078]照相機112包括透鏡以及固體攝像元件，該固體攝像元件用互補金屬氧化半導體(CMOS)或電荷耦合器件(CCD)等元件，將光轉換為電荷，使被攝體圖像(映像)電子化。
[0079]外設I / F118可以分別通過圖4所示的插入框體1100上的連接口 1132中的USB (Universal Serial Bus)導線等，電連接外設照相機、外設麥克風、以及外設揚聲器等外部設備。在連接外設照相機時，按照CPU101的控制，相對于內藏型照相機，優(yōu)先驅動外設照相機。與此相同，在連接外設麥克風或外設揚聲器時，按照CPU101的控制，相對于內藏型麥克風114或內藏型揚聲器115,優(yōu)先驅動外設麥克風或揚聲器。
[0080]存儲介質106可在終端10上裝卸。而且，該存儲介質106如果是能夠根據CPU101的控制來進行數(shù)據讀取或寫入的非易失性存儲器，則不僅可以使用閃存104，還可以使用電可擦可編程 ROM(EEPROM, Electrically Erasable and Programmable ROM)等。
[0081]終端10設有照相機112、麥克風114以及揚聲器115，但是終端10的構成并不受此限制，只要至少設置照相機112、麥克風114以及揚聲器115的其中一種外設便可。在這種情況下，通過在外設I / F上設置外設來取代未設置的設備，起到照相機112、麥克風114以及揚聲器115的作用。
[0082]進而，上述終端用程序為可安裝格式或可實行格式的文件，可以存放到上述存儲介質106等計算機可讀存儲介質中出售。該終端用程序既可存放在閃存104中，也可保存在 R0M102 中。
[0083]圖6是管理系統(tǒng)50的硬件結構圖。管理系統(tǒng)50包括:CPU201，用于控制整個管理系統(tǒng)50的動作；R0M202，用于保存IPL等CPU201驅動用程序；RAM203，為CPU201的工作區(qū)域；HD204，用于保存?zhèn)魉凸芾碛贸绦虻雀鞣N數(shù)據；硬磁盤驅動器(HDD，Hard DiskDrive) 205，用于按照CPU201的指令來控制HD204中各種數(shù)據的讀取或寫入；介質驅動器207，按照CPU101的指令來控制閃存等存儲介質206中各種數(shù)據的讀取以及寫入；顯示器208，用于表示光標、菜單、窗口、文字或圖像等各種信息；網絡I / F209，用于利用通信網絡2的數(shù)據傳送；鍵盤211，具有多個鍵，用于輸入文字、數(shù)據、各種指示等；鼠標212，用于進行各種指示的選擇或實行、處理對象的選擇、光標移動等；CD-R0M驅動器214，用于控制可裝卸的存儲介質如光盤驅動器即CD-R0M213中的各種數(shù)據的讀取或寫入；以及，總線210，為如圖3所示的電連接上述各結構元件的地址總線或數(shù)據總線等。
[0084]上述傳送管理用程序為可安裝格式或可執(zhí)行格式的文件，可以存放到上述存儲介質206或CD-R0M213等計算機可讀存儲介質中出售。該傳送管理用程序既可存放在HD204中，也可保存在R0M202中。
[0085]中繼裝置30的硬件結構與上述管理系統(tǒng)50的硬件結構相同，為此省略說明。但是，HD204中保存用于控制中繼裝置30的中繼裝置用程序。在此，中繼裝置用程序也是可安裝格式或可實行格式的文件，可以存放到上述存儲介質206或CD-R0M213等計算機可讀存儲介質中出售。除了 HD204，該中繼裝置用程序也可保存在R0M202中。
[0086]程序提供系統(tǒng)90的硬件結構也與上述管理系統(tǒng)50的硬件結構相同，在此省略說明。但是，HD204中保存用于控制程序提供系統(tǒng)90的程序提供系統(tǒng)用程序。在此，程序提供系統(tǒng)用程序也是可安裝格式或可實行格式的文件，還可以存放到上述存儲介質206或CD-R0M213等計算機可讀存儲介質中出售。除了 HD204以外，該程序提供系統(tǒng)用程序，也可保存在R0M202中。
[0087]關于上述可裝卸存儲介質，例如還可構成為，如存放到⑶_R(Compace Disk Recordable,可錄光盤)、DVD(Digital Versatile Disk,數(shù)字多功能盤)、藍光盤等計算機可讀的存儲介質中來提供。
[0088]《功能結構》
[0089]下面說明本實施方式的功能結構。圖7是構成本實施方式的傳送系統(tǒng)1的各終端、裝置以及系統(tǒng)的功能模塊圖。在圖7中，終端10、中繼裝置30以及管理系統(tǒng)50之間通過通信網絡2連接，進行數(shù)據通信。另外，圖1所示的程序提供系統(tǒng)90以及保守系統(tǒng)100與電視會議的通信沒有直接關系，因此圖7中省略表示。
[0090]<終端功能結構>
[0091]終端10包括收發(fā)信部11、操作輸入接受部12、登錄要求部13、攝像部14、聲音輸入部15a、聲音輸出部15b、最終篩選部16、顯示控制部17、延遲檢測部18、存儲及讀取處理部19、抽取部20、聲音判斷部21、以及更改部22。CPU101執(zhí)行從閃存104上載并展開到RAM103上的終端用程序，上述各功能部是通過圖5所示的結構元件中的任意元件執(zhí)行CPU101的指令動作而得以實現(xiàn)的功能或具有該功能的裝置。終端10還具備以圖5所示的RAM103以及以圖5所示的閃存104構成的存儲部1000。
[0092]畫面管理表
[0093]存儲部1000中具有圖8所示的畫面管理表，該畫面管理表構成畫面管理數(shù)據庫(DB，DataBase) 1001。畫面管理表中相關地保存畫面編號以及終端ID，該畫面編號(為一例畫面確認信息，用于確認顯不在顯不器120上的畫面)是用于分別確認顯不器120上顯示的多個畫面，終端ID (為一例終端10的識別信息)用于識別發(fā)送該多個畫面上顯示的圖像的圖像數(shù)據的送信終端即終端10。圖8中的編號“1”?“8”是用于確認顯示器120上顯示的畫面的畫面編號。
[0094]畫面管理表中還相關地保存用于確認顯示器120上未顯示的假想畫面的畫面編號和用于識別分配給這些未顯示畫面的圖像的圖像數(shù)據的送信終端即終端10的終端ID。圖8中的“補1”?“補3”以及此后的編號是用于確認顯示器120上未顯示畫面的畫面編號。
[0095]終端的各功能部
[0096]以下利用圖5和圖7詳細說明終端10的各功能部。在以下的說明中還包含該終端10與圖5所示的結構元件中實現(xiàn)終端10各項功能的主要結構元件之間的關系。
[0097]圖7所示的終端10的收發(fā)信部11通過執(zhí)行圖5所示CPU101的指令并借助于網絡I / Fill實現(xiàn)其功能，該收發(fā)信部11經由通信網絡2與其他終端、裝置或系統(tǒng)之間進行各種數(shù)據或信息的通信。在與收信終端開始通信之前，該收發(fā)信部11通過管理系統(tǒng)50接受表示作為收信候補的各終端的狀態(tài)的狀態(tài)信息。該狀態(tài)信息不僅表示各終端10的運行狀態(tài)(在線狀態(tài)還是離線狀態(tài))，而且還進一步表示詳細狀態(tài)，例如除了表示在線狀態(tài)以外，還進一步表示是否可以通話、是否正在通話、是否離開座位等。進而該狀態(tài)信息中不僅表示各終端10的運行狀態(tài)，而且還表示，如連接線與終端10之間斷開、輸出聲音但不輸出圖像、或不輸出聲音(MUTE)等其他各種狀態(tài)。以下說明一例狀態(tài)信息所表示的運行狀態(tài)。
[0098]操作輸入接受部12通過執(zhí)行圖5所示CPU101的指令并借助于操作鍵108和電源開關109來實現(xiàn)其功能。該操作輸入接受部12接受用戶的各種輸入。例如，當用戶輸入圖5所示的電源開關109接通時，圖7所示的操作輸入接受部12便根據收到電源接通要求，接通電源。
[0099]登錄要求部13通過執(zhí)行圖5所示的CPU101的指令來實現(xiàn)其功能。在收到上述電源接通要求后，收發(fā)信部11經由通信網絡2，自動向管理系統(tǒng)50發(fā)送表示要求登錄的登錄要求信息、以及要求終端的當前的IP地址。而且，當用戶輸入電源開關109從接通狀態(tài)轉為斷開時，收發(fā)信部11向管理系統(tǒng)50發(fā)送表示電源切斷的狀態(tài)信息，而后，操作輸入接受部12使電源完全斷開。這樣，管理系統(tǒng)50便能夠掌握終端10電源從接通改變?yōu)閿嚅_的狀況。
[0100]攝像部14通過執(zhí)行圖5所示CPU101的指令并借助于照相機112和攝像元件I /F113來實現(xiàn)其功能。攝像部14拍攝被攝體后，輸出拍攝的圖像數(shù)據。
[0101]聲音輸入部15a通過執(zhí)行圖5所不CPU的指令并借助于聲音輸入I / F116實現(xiàn)其功能。在用麥克風114將用戶的聲音轉換為聲音信號后，輸入有關該聲音信號的聲音數(shù)據。聲音輸出部15b執(zhí)行圖5所示CPU101發(fā)出的指令并通過聲音輸入輸出I / F116實現(xiàn)其功能，向揚聲器115輸出有關聲音數(shù)據的聲音信號后，用揚聲器115輸出聲音。
[0102]最終篩選部16實行最終篩選處理，從多個中繼裝置30中最終選定一個中繼裝置30，通過執(zhí)行圖5所示CPU101發(fā)送的指令，該最終篩選部16實現(xiàn)圖9所示的計測部16a、計算部16b以及最終選擇部16c的功能。
[0103]其中，計測部16a用于在收發(fā)信部11每次收到下述事先送信信息時計測該事先送信信息的收信日期及時刻。每當計測部16a計測收信日期及時刻時，計算部16b根據該收信日期及時刻與該事先送信信息內包含的送信日期及時刻之間的差值，計算事先送信信息從發(fā)送到收到所要的時間(T)。由最終選擇部16c選定一臺能夠以計算部16b算出的所要時間中的最短所要時間來中繼事先送信信息的中繼裝置。
[0104]顯示控制部17通過執(zhí)行圖5所示CPU101發(fā)送的指令并借助于顯示器I / F117實現(xiàn)其功能，用于控制下述收到的具有不同分辨率的圖像數(shù)據的結合，并將結合后的圖像數(shù)據送往顯示器120。[0105]而且，顯示控制部17能夠將從管理系統(tǒng)50收到的收信名單的信息以及各種短信送往顯示器120，并在顯示器120上顯示收信名單以及各種短信。
[0106]進而,顯示控制部17能夠在顯示器120上顯示多個畫面,這些畫面分別顯示多個對方終端10發(fā)送的圖像數(shù)據所表示的圖像。在顯示圖像或短信時，顯示控制部17根據與圖像數(shù)據或短信一起發(fā)送的終端ID，用圖像管理表(參見圖8)的畫面編號確定顯示器120中的畫面，并將圖像或短信顯示到畫面編號所對應的畫面上。但對于畫面管理表中表示顯示器120上未顯示畫面的“補1”等畫面編號，顯示控制部17將短信顯示到顯示器120中不同于上述多個畫面的其他畫面上。
[0107]延遲檢測部18通過執(zhí)行圖5所示的CPU101的指令實現(xiàn)其功能。延遲檢測部18檢測從其他終端10經由中繼裝置30送至的圖像數(shù)據或聲音數(shù)據的延遲時間(單位:ms)。具體為，延遲檢測部18從預定的巾貞率30fps (frames per second)中減去當前時刻收到的圖像數(shù)據的幀率來算出延遲時間。
[0108]存儲及讀取處理部19通過執(zhí)行圖5所示CPU101發(fā)送的指令或者執(zhí)行圖5所示CPU101發(fā)送的指令并借助于SSD105實現(xiàn)其功能，用于將各種數(shù)據保存到存儲部1000中，或者從存儲部1000中讀取各種數(shù)據。該存儲部1000中保存用于識別終端10的終端ID以及密碼等數(shù)據。在與收信終端通信期間，該存儲及讀取處理部19還將每次收到的圖像數(shù)據和聲音數(shù)據重寫到存儲部1100上。其中，用重寫之前的圖像數(shù)據在顯示器120上顯示圖像，并用重寫之前的聲音數(shù)據從麥克風115輸出聲音。
[0109]抽取部20通過執(zhí)行圖5所示CPU101發(fā)送的指令實現(xiàn)其功能。該抽取部20收到與短信數(shù)據一起由收發(fā)信部11發(fā)送的該短信數(shù)據的送信終端即終端10的終端ID時，基于該收到的終端10的終端ID，檢索畫面管理表(參見圖8)，抽取對應的畫面編號。
[0110]聲音判斷部21通過執(zhí)行圖5所示CPU101發(fā)送的指令實現(xiàn)其功能，用于檢測收到的各聲音數(shù)據對應的聲音區(qū)間，判斷是否存在具有有聲區(qū)間的聲音數(shù)據?？梢岳霉夹g實行該聲音區(qū)間的檢測(參見非專利文獻:新美，聲音認識，共立出版社，68?72頁，1979)。
[0111]更改部22通過執(zhí)行圖5所示CPU101發(fā)送的指令實現(xiàn)其功能。用于在判斷存在具有上述有聲區(qū)間的聲音數(shù)據時，更改畫面管理表(參見圖8)的內容，重新將與上述具有有聲區(qū)間的聲音數(shù)據一起送至的終端10的終端ID和終端10的制造商或經銷商預先設定的畫面編號進行相關處理。根據更改后的畫面管理表內容，顯示控制部17在顯示器120中的多個畫面上分別顯示對應的畫面。
[0112]終端ID以及將要在以下敘述的中繼裝置ID均采用能夠毫無疑問地識別的語言、文字、標記、以及各種符號等識別信息表示。終端ID和中繼裝置ID還可以用上述語言、文字、標記以及各種符號中至少兩個以上的組合構成的識別信息。
[0113]〈中繼裝置的功能結構〉
[0114]以下說明中繼裝置30的功能。中繼裝置30包括收發(fā)信部31、狀態(tài)檢測部32、圖像狀態(tài)確認部33、改變圖像質量管理部34、圖像質量更改部35、以及存儲及讀取處理部39。這些功能部通過圖6所示的結構元件中的任意元件執(zhí)行CPU201的指令動作，來實現(xiàn)其功能，在此，CPU201執(zhí)行被展開到RAM203上的保存在HD204中的中繼裝置用程序。中繼裝置30還包括以圖6所示的RAM203，以及/或者圖6所示的HD204構成的存儲部3000。[0115]改變圖像狀態(tài)管理表
[0116]存儲部3000中保存以圖11所示的改變圖像狀態(tài)管理表構成的改變圖像狀態(tài)管理數(shù)據庫3001。改變圖像狀態(tài)管理表中，接收經過中繼裝置30中繼后的圖像數(shù)據的收信終端即終端10的IP地址與圖像狀態(tài)相關地保存。該圖像狀態(tài)信息中表示收信終端改變中繼裝置30中繼的圖像數(shù)據的畫質、或者中斷圖像數(shù)據的中繼。
[0117]中繼裝置的各項功能部
[0118]以下詳細說明中繼裝置30的各功能部。在以下關于中繼裝置30的各功能部的說明中，還包括各功能部與圖6所示的構成元件中用于實現(xiàn)中繼裝置30各功能的主要元件與中繼裝置30之間的關系。
[0119]圖7所示的中繼裝置30的收發(fā)信部31通過執(zhí)行圖6所示CPU201發(fā)送的指令并借助于網絡I / F209實現(xiàn)其功能。該收發(fā)信部31經由通信網絡2與其它終端、裝置或系統(tǒng)之間進行各種數(shù)據或信息的通信。
[0120]狀態(tài)檢測部32通過執(zhí)行圖6所示的CPU201的指令實現(xiàn)其功能。狀態(tài)檢測部32檢測具備該狀態(tài)檢測部32的中繼裝置30的運行狀態(tài)。運行狀態(tài)包括“在線”、“離線”、“正
在通信”、或“暫停通信”。
[0121]圖像狀態(tài)確認部33通過執(zhí)行圖6所示CPU201發(fā)送的指令實現(xiàn)其功能。圖像狀態(tài)確認部33用收信終端的IP地址作為檢索鍵，檢索改變圖像狀態(tài)管理表(參見圖11)，并通過抽取對應的圖像狀態(tài)信息，來確認將要中繼的圖像數(shù)據的畫質或者將要中斷中繼的圖像數(shù)據。
[0122]改變圖像質量管理部34通過執(zhí)行圖6所示的CPU201的指令實現(xiàn)其功能，用來基于來自管理系統(tǒng)50的下述質量信息，更改改變圖像狀態(tài)管理數(shù)據庫3001的內容。例如，在終端ID為“Olaa”的要求終端即終端10aa、與終端ID為“Oldb”的收信終端即終端10db之間舉行電視會議并收發(fā)高畫質圖像數(shù)據。在電視會議的舉行期間中，因另一電視會議的要求終端即終端bb與收信終端即終端10ca之間經由通信網絡2召開電視會議，造成收信終端即終端10db中發(fā)生圖像數(shù)據收信延遲，此時，需要中繼裝置30將正在中繼的圖像數(shù)據的畫質從高畫質降低到中畫質。在這種情況下，根據表示中畫質的質量信息來改變改變畫質管理數(shù)據庫3001的內容，將中繼裝置30中繼的圖像數(shù)據的質量從高畫質降低到中畫質。
[0123]圖像質量更改部35通過執(zhí)行圖6所示CPU201發(fā)送的指令實現(xiàn)其功能，用來基于上述經過更改的改變圖像狀態(tài)管理數(shù)據庫3001的內容，改變送信終端10發(fā)送的圖像數(shù)據的畫質、或者中斷圖像數(shù)據的中繼。
[0124]存儲及讀取部39通過執(zhí)行圖6所示CPU201發(fā)送的指令并借助于HDD205實現(xiàn)其功能，用實行存儲部3000中各種數(shù)據的保存處理或讀取處理。
[0125]<管理系統(tǒng)的功能結構>
[0126]管理系統(tǒng)50包括收發(fā)信部51、終端認證部52、狀態(tài)管理部53、終端抽取部54、終端狀態(tài)取得部55、初步篩選部56、時域管理部57、圖像狀態(tài)決定部58、存儲及讀取處理部59、延遲時間管理部60以及短信制作部61。CPU201執(zhí)行被從HD204的保存中展開到R0M202上的管理系統(tǒng)用程序，通過圖6所示各結構元件中的任意元件執(zhí)行CPU的指令動作，來實現(xiàn)這些功能部的功能。管理系統(tǒng)50包括以圖6所示的HD204構成的存儲部5000。
[0127]中繼裝置管理表[0128]存儲部5000中具有圖12所示的以中繼裝置管理表構成的中繼裝置管理數(shù)據庫5001。該中繼裝置管理表中，每個中繼裝置30的中繼裝置ID與各自的運行狀態(tài)、管理系統(tǒng)50收到的表示運行狀態(tài)的狀態(tài)信息的收信日期及時間、中繼裝置30的IP地址、以及中繼裝置30中的最大數(shù)據傳送速度(單位:Mbps)相關地保存。例如，在圖12所示的中繼裝置管理表中，中繼裝置ID為“ 111a”的中繼裝置30a的運行狀態(tài)為“在線”，管理系統(tǒng)50收到狀態(tài)信息的收信日期及時間為“2009.11.10.13:00”，該中繼裝置30a的IP地址為“1.2.1.2”，該中繼裝置30a中的最大數(shù)據傳送速度為“100Mbps”。
[0129]終端認證管理表
[0130]存儲部5000中還具有如圖13所示的以終端認證管理表構成的終端認證管理數(shù)據庫5002。該終端認證管理表中將所有受管理系統(tǒng)50管理的終端10的終端ID分別與各自的密碼相關地保存。例如，圖13所示的終端認證管理表中終端10aa的終端ID為“Olaa”，密碼為“aaaa”。
[0131]終端管理表
[0132]存儲部5000中還具有如圖14所示的以終端管理表構成的終端管理數(shù)據庫5003。該終端管理表中將每個終端10的終端ID與該終端10作為收信終端時的終端名稱、各個終端10的運行狀態(tài)、管理系統(tǒng)50收到的下述登錄要求信息的收信日期及時間、以及終端10的IP地址相關地保存。例如，如圖14所示的終端管理表中，終端ID為“Olaa”的終端10aa的終端名稱為“日本東京事業(yè)所AA終端”，運行狀態(tài)為“在線(可以通信)”，管理系統(tǒng)50收到登錄要求信息的收信時間為“2009.11.10.13:40”，該終端10aa的IP地址為“1.2.1.3”。
[0133]收信名單管理表
[0134]存儲部5000中還具有如圖15所示的以收信名單管理表構成的收信管理數(shù)據庫5004。在該收信名單管理表中，將提出開始電視會議通信要求的要求終端的終端ID與所有作為收信候補終端登記的收信終端的終端ID相關地保存。例如，圖15所示的收信名單管理表中，可以接受終端ID為“Olaa”的要求終端即終端10aa要求開始電視會議通信的收信候補終端有以下多個終端:終端ID為“Olab”的終端10ab、終端ID為“Olba”的終端10ba以及終端ID為“Olbb”的終端10bb等終端?？梢愿率招琶麊喂芾肀?，根據從任意要求終端送往管理系統(tǒng)50的要求，增加或刪除收信終端的候補。
[0135]時域管理表
[0136]存儲部5000中還具有如圖16所示的以時域管理表構成的時域管理數(shù)據庫5005。該時域管理表中將每個選擇中繼裝置30時使用的選擇用時域ID與中繼圖像數(shù)據以及聲音數(shù)據的中繼裝置30的中繼裝置ID、要求終端的終端ID、收信終端的終端ID、收信終端收到圖像數(shù)據時的收信延遲時間(單位:ms)、以及管理系統(tǒng)50收到由收信終端發(fā)送的表示該延遲時間的延遲信息的收信日期及時間相關地保存。例如圖16所示的時域管理表中顯示，在以時域ID為“sel”的時域中，選擇的中繼裝置30a的中繼裝置ID為“111a”，該中繼裝置30a在終端ID為“Olaa”的要求終端10aa、與終端ID為“Oldb”的收信終端10db之間中繼圖像數(shù)據以及聲音數(shù)據，收信終端10db在“2009.11.10.14:00”收到圖像數(shù)據，該圖像數(shù)據收到時的延遲時間為200 (ms)。如果是在兩個終端之間舉行電視會議，則除了上述收信終端以外還可以根據要求終端發(fā)送的延遲信息來管理延遲信息的收信日期及時間。但是，在三個以上的終端之間舉行電視會議的情況下，則需要根據接收圖像數(shù)據以及聲音數(shù)據的收信終端發(fā)送的延遲信息來管理延遲信息的收信日期及時間。
[0137]地址優(yōu)先度管理表
[0138]存儲部5000中保存以圖17所示的地址優(yōu)先度管理表構成的地址優(yōu)先度管理數(shù)據庫5006。該地址優(yōu)先度管理表中，將任意的終端10以及中繼裝置30的點地址的異同與地址優(yōu)先度相關地保存，即普通IPv4中的IP地址中的四組點地址(Dot Address)部分中的“同”越多，地址優(yōu)先度的點數(shù)越高。例如，在圖17所示的地址優(yōu)先度管理表中，對于從點地址上位到下位之間有三個值相同的IP地址，其地址優(yōu)先度的點數(shù)為“5”。而對于點地址從上位到下位之間有兩個值相同的IP地址，其地址優(yōu)先度的點數(shù)為“3”。此時，最下位的點地址的值是否相同與優(yōu)先度無關。進而，對于點地址的最上位的值相同，而自最上位起第二個值不同的IP地址，其地址優(yōu)先度的點數(shù)為“1”。此時，自最上位起第三個點地址以及最下位的點地址的值是否相同與優(yōu)先度無關。對于點地址最上位的值不同的IP地址，其地址優(yōu)先度的點數(shù)為“0”。此時，自最上位起第二、第三、以及最下位的點地址的值是否相同與優(yōu)先度無關。
[0139]傳送速度優(yōu)選度管理表
[0140]存儲部5000中的優(yōu)先度管理數(shù)據庫5006還具有如圖18所示的傳送速度優(yōu)先度管理表。該傳送速度優(yōu)先度管理表中，將最大數(shù)據輸送速度與輸送優(yōu)先度相關地保存，即中繼裝置30中最大數(shù)據傳送速度的值越大，其傳送速度優(yōu)先度的點數(shù)越高。例如，在圖18所示的傳送速度優(yōu)先度管理表中，當中繼裝置30中最大數(shù)據傳送速度為1000Mbps以上時，傳送速度的優(yōu)先度點數(shù)為“5”。而當中繼裝置30中最大數(shù)據傳送速度為100Mbps以上且小于1000Mbps時，則傳送速度的優(yōu)先度點數(shù)為“3”。而當中繼裝置30中最大數(shù)據傳送速度為10Mbps以上且小于100Mbps時，傳送速度的優(yōu)先度點數(shù)為“1”。中繼裝置30中最大數(shù)據傳送速度為小于10Mbps時，傳送速度的優(yōu)先度點數(shù)為“0”。
[0141]圖像狀杰管理表
[0142]存儲部5000中還具有以圖19所示的圖像狀態(tài)管理表構成的圖像狀態(tài)管理數(shù)據庫5007。該圖像狀態(tài)管理表中將終端10收到圖像數(shù)據的延遲時間(單位:ms)與圖像狀態(tài)信息相關地保存。具體為，要求終端或收信終端收到圖像數(shù)據的延遲時間(單位:ms)越長，中繼裝置30中繼的圖像數(shù)據的畫質(圖像質量)就越被降低。如果延遲時間十分長(如500ms以上)，則將圖像數(shù)據的收信延遲時間與表示中斷圖像數(shù)據中繼的信息相關地保存，以使得中繼裝置30中斷圖像數(shù)據的中繼。
[0143]<管理系統(tǒng)的各項功能結構>
[0144]以下詳細說明管理系統(tǒng)50的各個功能部。在以下關于管理系統(tǒng)50的各個功能部的說明中，還包括各個功能部與圖6所示的各個構成元件中用于實現(xiàn)管理系統(tǒng)50的各功能部的主要構成元件之間的關系。
[0145]收發(fā)信部51通過執(zhí)行圖6所示CPU201發(fā)送的指令并借助于網絡I / F209實現(xiàn)其功能，用于經由通信網絡2與其他終端、裝置或系統(tǒng)之間進行各種數(shù)據或信息的通信。
[0146]終端認證部52通過執(zhí)行圖6所示CPU201發(fā)送的指令實現(xiàn)其功能，用來以收發(fā)信部51收到的登錄要求信息中包含的終端ID以及密碼作為檢索鍵，來檢索存儲部5000中的終端認證管理數(shù)據庫5002，進行終端認證，判斷終端認證管理表中是否保存相同的終端ID以及密碼。[0147]狀態(tài)管理部53通過執(zhí)行圖6所示CPU201發(fā)送的指令實現(xiàn)其功能，用于將該要求終端的終端ID、運行狀態(tài)、管理系統(tǒng)50收到登錄要求信息的日期及時間、以及該要求終端的IP地址相關后保存，用以管理要求登錄的要求終端的運行狀態(tài)。當終端10的用戶將終端10的電源開關109從接通轉換到切斷時，狀態(tài)設定部53a根據該終端10發(fā)送的表示電源切斷的狀態(tài)信號，將終端管理表(參見圖14)中的該終端的運行狀態(tài)從在線改為離線。
[0148]終端抽取部54通過執(zhí)行圖6所示CPU201發(fā)送的指令實現(xiàn)其功能。該終端抽取部54以要求登錄的要求終端的終端ID為檢索鍵，檢索收信名單管理表(參見圖15)，讀取能夠與要求終端通信的收信終端的候補的終端ID，抽取終端ID。終端抽取部54還以要求登錄的要求終端的終端ID為檢索鍵，檢索收信名單管理表(參見圖15)，抽取以上述要求終端作為收信終端候補登錄終端ID時的其他要求終端的終端ID。
[0149]終端狀態(tài)取得部55通過執(zhí)行圖6所示CPU201發(fā)送的指令實現(xiàn)其功能。該終端狀態(tài)取得部55以上述終端抽取部54抽取的收信終端候補的終端ID為檢索鍵，檢索終端管理表(參見圖14)，讀取每個上述終端抽取部54抽取的終端ID所對應的終端的運行狀態(tài)。這樣，終端狀態(tài)取得部55取得能夠與要求登錄的要求終端進行通信的收信終端候補的運行狀態(tài)。終端狀態(tài)取得部55還以上述終端抽取部54抽取的終端ID為檢索鍵，檢索終端管理數(shù)據庫5003，取得要求登錄的要求終端的運行狀態(tài)。
[0150]初步篩選部56通過執(zhí)行圖6所示CPU201發(fā)送的指令實現(xiàn)其功能。用于在中繼裝置30的最終選定之前進行初步選擇處理，以幫助實行選定處理，從多個中繼裝置30中最終選定一個中繼裝置30。為此，初步篩選部56根據圖5所示的CPU201發(fā)送的指令來實現(xiàn)圖10所示的選擇用時域ID生成部56a、終端IP地址抽取部56b、初步選擇部56c以及優(yōu)先度決定部56d的功能。
[0151]其中，選擇用時域ID生成部56a生成用于中繼裝置30時域選擇的時域ID。終端IP地址抽取部56b根據要求終端發(fā)送的開始要求信息中包含的要求終端的終端ID以及收信終端的終端ID，來檢索終端管理表(參見圖14)，抽取分別與各終端10對應的IP地址。初步選擇部56c從中繼裝置管理表(參見圖12)中保存的中繼裝置30內，選擇運行狀態(tài)為“在線”的中繼裝置30的中繼裝置ID，從而選定中繼裝置30。
[0152]初步選擇部56c根據上述終端IP地址抽取部56b抽取的要求終端以及收信終端的IP地址，檢索中繼裝置管理表(參見圖12)，確認上述選擇的每個中繼裝置30的IP地址的點地址對應的上述要求終端的IP地址的點地址是否與收信終端的IP地址的點地址相同。進而，初步選擇部56c將每個中繼裝置30的地址優(yōu)先度的點數(shù)中相比于終端10的地址優(yōu)先度點數(shù)高的點數(shù)、與傳送速度優(yōu)選度的點數(shù)合計，并選擇該合計點數(shù)較高的上位2個中繼裝置30，用以進一步選擇中繼裝置30。在此，選擇了點數(shù)最高的兩個中繼裝置30，但選擇并不受此限制，如果有利于中繼裝置30篩選，還可以選擇三個以上點數(shù)最高的中繼裝置30。
[0153]優(yōu)先度決定部56d對照優(yōu)先度管理表(參見圖17)，決定上述初步選擇部56c查找到的每個中繼裝置30的地址優(yōu)先度的點數(shù)。此外，優(yōu)先度決定部56d還根據中繼裝置管理表(參見圖12)中保存的各中繼裝置30的最大數(shù)據傳送速度，來檢索優(yōu)先度管理表(參見圖18)，決定上述初步選擇部56c在第一次篩選處理中選中的各中繼裝置30的傳送速度優(yōu)先度的點數(shù)。[0154]時域管理部57通過執(zhí)行圖6所示CPU201發(fā)送的指令實現(xiàn)其功能，用于將時域ID生成部56a生成的時域ID、要求終端的終端ID、以及收信終端的終端ID相關地保存到存儲部5000的時域管理表(參見圖16)中。時域管理部57還在時域管理表中將每個時域ID與最終選定的終端10的一個中繼裝置30的中繼裝置ID。
[0155]圖像狀態(tài)決定部58以上述延遲時間為檢索鍵，來檢索圖像狀態(tài)管理表(參見圖19)，并抽取對應的圖像數(shù)據的圖像狀態(tài)，用以決定由中繼裝置30中繼的圖像數(shù)據的畫質，或者決定中斷中繼裝置的圖像數(shù)據中繼。
[0156]存儲及讀取處理部59通過執(zhí)行圖6所示CPU201發(fā)送的指令并借助于HDD205實現(xiàn)其功能，用于實行存儲部5000中各種數(shù)據的保存處理或讀取處理。
[0157]延遲時間管理部60通過執(zhí)行圖6所示CPU201發(fā)送的指令并借助于HDD205實現(xiàn)其功能。延遲時間管理部60以上述收信終端的IP地址為檢索鍵，來檢索終端管理表(參見圖14)，抽取對應終端ID。進而，將所述延遲信息表示的延遲日期及時間保存到時域管理數(shù)據庫5005中的時域管理表(參見圖16)中上述抽取的終端ID的記錄項中的延遲時間區(qū)域部分上。
[0158]短信制作部61以收發(fā)信部51收到的延遲信息為檢索鍵，檢索圖像狀態(tài)管理表(參見圖19)，抽取對應的圖像狀態(tài)信息，當該圖像狀態(tài)信息所示的更改內容表示中斷圖像數(shù)據的中繼時，制作表示沒有收到圖像數(shù)據或者僅收到聲音數(shù)據的信息。具體來說，短信制作部61以收發(fā)信部51收到延遲信息時得到的收信終端為檢索鍵，檢索終端管理表(參見圖14)，抽取對應的終端10的終端ID (作為一例第二識別信息)。而后，短信制作部61以該終端ID為檢索鍵，檢索時域管理表(參見圖16)，抽取相同時域中的對應終端ID (作為一例第一識別信息)。進而，短信制作部61以對應終端ID為檢索鍵，檢索終端管理表(參見圖14)，抽取對應終端ID的終端名稱信息。而后，短信制作部61將用該終端名稱信息表示的終端名稱包含到上述信息之中。
[0159]《處理和動作》
[0160]以下參考圖20?圖27來說明傳送系統(tǒng)1的處理方法。圖20是管理系統(tǒng)50收到來自中繼裝置并表示各個中繼裝置30狀態(tài)的狀態(tài)信息的管理處理時序圖。圖20是在多個終端10之間開始通信準備階段的處理時序圖。圖21是中繼裝置的篩選處理時序圖。圖22是中繼裝置30的篩選處理流程圖。圖23是中繼裝置30選擇處理時優(yōu)先度點數(shù)計算狀態(tài)的示意圖。圖24是終端10選擇中繼裝置30的選擇處理時序圖。圖25是終端選擇中繼裝置30的選擇處理流程圖。圖26是在終端之間圖像數(shù)據以及聲音數(shù)據的通信處理時序圖。
[0161]首先利用圖20說明管理系統(tǒng)50收到來自中繼裝置的表示各個中繼裝置30狀態(tài)的狀態(tài)信息的管理處理。首先，圖7所示的各個中繼裝置30中的狀態(tài)檢測部32定期檢測各自的中繼裝置的運行狀態(tài)(S1-1至S1-4)。而后，為了管理系統(tǒng)50實時管理各中繼裝置30的運行狀態(tài)，各中繼裝置30的收發(fā)信部31經由網絡2向管理系統(tǒng)50定期發(fā)送各自的狀態(tài)信息(S2-1至S2-4)。這些狀態(tài)信息包含各中繼裝置30的中繼裝置ID、以及該中繼裝置ID所對應的中繼裝置30的狀態(tài)檢測部32檢測到的運行狀態(tài)。在此，中繼裝置30a、30b、30d正常運行處于“在線”，而中繼裝置30c雖然在運行之中，但是由于實行中繼裝置30c的中繼動作發(fā)生程序性故障，處于“離線”。
[0162]接著，管理系統(tǒng)50的收發(fā)信部51接收各個中繼裝置30發(fā)送的狀態(tài)信息，并通過存儲及讀取處理部59將對應于每個中繼裝置ID的狀態(tài)信息保存到存儲部5000中的中繼裝置管理表(參見圖12)中進行管理(S3-1至S3-4)。這樣，在如圖12所示的中繼裝置管理表中，每個中繼裝置ID都保存“在線”、“離線”、或“故障”中任一運行狀態(tài)。此外還保存每個中繼裝置ID對應的管理系統(tǒng)50收到狀態(tài)信息的收信日期及時間。進而，如果中繼裝置30沒有發(fā)送狀態(tài)信息，則在圖12所示的中繼裝置管理表的各條記錄項中用于記錄運行狀態(tài)的區(qū)域部分以及記錄收信日期及時間的區(qū)域部分為空白、或記錄上一次收信時的運行狀態(tài)以及收信日期及時間。
[0163]以下利用圖21說明在終端10aa和終端10db之間在開始通信之前的準備階段中收發(fā)各管理信息的通信處理。圖21中所有管理信息的通信均通過圖2所示的管理信息用時域sei。
[0164]首先，當用戶指示圖5所示的電源開關109接通后，圖7所示操作輸入接受部12收至IJ電源接通指令，接通電源(S21)。而后，登錄要求部13在收到上述電源接通指令時，收發(fā)信部11經由通信網絡2向管理系統(tǒng)50自動發(fā)送表示要求登錄的登錄要求信息(S22)。該登錄要求信息包含提出登錄要求的終端10aa本身的終端ID以及密碼。這些終端ID以及密碼是通過存儲及讀取處理部19從存儲部1000中讀取并送往收發(fā)信部11的數(shù)據。在終端10aa向管理系統(tǒng)50發(fā)送登錄要求信息時，作為收信一方的管理系統(tǒng)50可以掌握送信一方的終端10aa的IP地址。
[0165]接著，管理系統(tǒng)50的終端認證部52將經由收發(fā)信部51收到的登錄要求信息中所包含的終端ID以及密碼作為檢索鍵進行終端認證(S23)，檢索存儲部5000中的終端認證管理表(參見圖13)，判斷終端認證管理表中是否保存了相同的終端ID以及密碼。當該終端認證部52確認到已經保存相同的終端ID以及密碼，并判斷登錄要求出自具有正當利用權限的終端10時，狀態(tài)管理部53將終端10aa的終端ID、運行狀態(tài)、上述登錄要求信息的收信日期及時刻以及終端10aa的IP地址相關地保存到終端管理表(參見圖14)中(S24)。這樣，在圖14所示的終端管理表中便相關地保存了終端ID “Olaa”、運行狀態(tài)“在線(可以通信)”、收信日期及時間“2009.11.10.13:40”以及終端10aa的IP地址“1.2.1.3”。
[0166]而后，管理系統(tǒng)50的收發(fā)信部51將表示上述終端認證部52的認證結果的認證結果信息經由通信網絡2送往提出上述登錄要求的要求終端即終端10aa(S25)。以下繼續(xù)說明終端認證部52判斷終端具有正當利用權限時的情況。
[0167]管理系統(tǒng)50的終端抽取部54以發(fā)出登錄要求的終端10aa的終端ID “Olaa”作為檢索鍵，檢索收信名單管理表(參見圖15)，讀取能夠與要求終端10aa通信的收信終端候補的終端ID(S26)。在此，與要求終端即終端10aa的終端ID “Olaa”相對應的收信終端10ab、10ba、10db 各自的終端 ID 分別為 “01ab”、“01ba”、“01db”。
[0168]而后，終端狀態(tài)取得部55以上述終端抽取部54抽取的收信終端后部的終端ID(01ab、01ba、01db)為檢索鍵，檢索終端管理表(參見圖14)，讀取上述終端抽取部54抽取的每個終端ID的運行狀態(tài)分別為“離線”、“在線(暫停)”、“在線(正在通信)”，從而取得作為收信候補的終端(10ab、10ba、10db)的運行狀態(tài)(S27)。
[0169]接著，收發(fā)信部51將包含上述S27中作為檢索鍵使用的終端ID“01ab”、“01ba”以及“Oldb”和各自與這些終端ID相對應的收信終端(10ab、10ba、10db的運行狀態(tài)“離線”、“在線(暫停)”以及“在線(正在通信)”，通過通信網絡2送往要求終端10aa(S28)。這樣，要求終端IOaa便掌握了能夠與其通信的收信終端候補IOabUOba以及IOdb的現(xiàn)時運行狀態(tài)分別為“離線”、“在線(暫停)”以及“在線(正在通信)”。
[0170]而后，管理系統(tǒng)50的終端抽取部54以要求登錄的要求終端IOaa的終端ID“01aa”為檢索鍵，檢索收信名單管理表(參見圖15)，抽取以上述要求終端IOaa的終端ID“01aa”為收信終端候補來登記的其他要求終端的終端ID (S29)。圖15顯示的收信終端名單管理表中被抽取的其他要求終端的終端ID為“01ab”、“01ba”以及“Oldb”。
[0171]而后，管理系統(tǒng)50的終端狀態(tài)取得部55以上述要求登錄的要求終端IOaa的終端ID “Olaa”為檢索鍵，檢索終端管理表(見圖14)，取得要求終端IOaa的運行狀態(tài)(S30)。
[0172]而后，收發(fā)信部51向上述S29中抽取的終端ID (01ab、01ba、01db)的終端(10ab、IObaUOdb)中運行狀態(tài)在終端管理表(見圖14)中被表示為“在線”的終端10ba、IOdb發(fā)送收信終端狀態(tài)信息(S31-1、S31-2)，該收信終端狀態(tài)信息中包含S30中取得要求終端IOaa的終端ID “Olaa”和運行狀態(tài)“在線(可以通話)”。在向終端(IObaUOdb)發(fā)送該終端的狀態(tài)信息時，收發(fā)信部51基于各終端ID(01ba、01db)，參考圖14所示的終端管理表中記錄的終端的IP地址。這樣，便向以要求登錄的要求終端IOaa為收信終端進行通信的其他收信終端(IObaUOdb)傳送上述要求終端IOaa的終端ID為“Olaa”以及運行狀態(tài)為“在線(可以通信)”。
[0173]關于其他終端10，與上述S21相同，用戶設定圖6顯示的電源開關109接通后，圖7所示的操作輸入接受部12收到電源接通指示，實行與上述S22?S31-l、S31-2相同的處理，在此不再重復說明。
[0174]接著，利用圖22說明中繼裝置30的篩選處理。圖22中的各種管理信息均以圖2所示的管理信息用時域sei來發(fā)送或接收。在本實施方式中，根據上述步驟32中收到的收信終端的狀態(tài)信息獲悉，作為收信終端候補的終端10中動作狀態(tài)為在線的終端有終端IOba以及10db，要求終端IOaa至少能夠與該終端IOba以及終端IOdb的其中之一通信。以下說明要求終端IOaa的用戶選擇開始與收信終端IOdb通信的情況。
[0175]首先，用戶按動圖5所示的操作鍵108并選擇終端IOdb后，圖7所示的操作輸入接受部12便收到與收信終端IOdb開始通話的要求(S41)。而后，要求終端IOaa的收發(fā)信部11向管理系統(tǒng)50發(fā)送開始要求信息(S42)，該開始要求信息中包含要求終端IOaa的終端ID “Olaa”以及收信終端IOdb的終端ID “Oldb”，并且表示希望開始通信。由此，管理系統(tǒng)50的收發(fā)信部51在收到上述開始要求信息后，能夠掌握發(fā)送信息的要求終端IOaa的IP 地址 “1.2.1.3”。
[0176]而后，狀態(tài)管理部53根據開始要求信息中包含的要求終端IOaa的終端ID“01aa”以及收信終端IOdb的終端ID“01db”，改寫終端管理數(shù)據庫5003中的終端管理表(參見圖14)，將其中包含上述終端ID “Olaa”和“Oldb”各自的記錄中表示動作狀態(tài)的區(qū)域部分均改為“正在通信”(S43)。此時，要求終端IOaa與收信終端IOdb之間雖然還未開始通信，但已處于通信狀態(tài)，為此，如果出現(xiàn)其他終端10要求與要求終端IOaa或者收信終端IOdb通話，將會輸出表不處于正在通信狀態(tài)的聲音或顯不。
[0177]以下說明實行選擇中繼裝置30的時域的處理。首先，圖10所示的選擇用時域ID生成部56a生成選擇用時域ID(S44)，該選擇用時域ID用于識別實行選擇中繼裝置30的時域。而后，時域管理部57將上述S44中生成的時域ID “sel”、要求終端IOaa的終端ID “Olaa”、以及收信終端IOdb的終端ID “Oldb”相關地保存到存儲部5000的時域管理表(參見圖16)中進行管理(S45)。
[0178]而后，管理系統(tǒng)50的初步篩選部56根據中繼裝置管理數(shù)據庫5001、終端管理數(shù)據庫5003、以及優(yōu)先度管理數(shù)據庫5006，進行中繼裝置30的初步選擇，選擇用于在要求終端IOaa與收信終端IOdb之間進行中繼的中繼裝置30 (S46)。
[0179]在此利用圖10以及圖23進一步詳細說明S46中的處理。首先，圖10所示的終端IP地址抽取部56b根據要求終端IOaa發(fā)送的開始通信信息中包含的要求終端IOaa的終端ID “Olaa”、以及收信終端IOdb的終端ID “Oldb”，檢索終端管理表(參見圖14)，抽取分別對應于終端IOaa和終端IOdb的IP地址“ 1.2.1.3”和“ 1.3.2.4” (S46-1)。
[0180]接著，初步選擇部56c從中繼裝置管理表(參見圖12)中選擇動作狀態(tài)為“在線”的中繼裝置30a、30b、30d的中繼裝置ID (I I la、11 Ib、11 Id (S46-2)。初步選擇部56c根據上述S46-1中抽取的要求終端IOaa的IP地址“1.2.1.3”以及收信終端“1.3.2.4”，檢索中繼裝置管理表(參見圖12)，確認上述S46-2中選擇的每個中繼裝置30a、30b、30d的IP地址(1.2.1.2、1.2.2.2、1.3.2.2)的點地址是否與上述要求終端IOaa以及收信終端IOdb的IP地址“ 1.2.1.3”和“ 1.3.2.4”的點地址相同(S46-3)。
[0181]接著，優(yōu)先度決定部56d參考優(yōu)先度管理表(參見圖17)，決定被在上述步驟46-3中確認的每個中繼裝置30a、30b、30d的地址優(yōu)先度點數(shù)(S46-4)。圖24顯示以表格表示的該決定處理的結果。圖24是顯示在進行中繼裝置30篩選處理時的優(yōu)先度的點數(shù)的計算狀態(tài)的圖。該圖24中顯示每個中繼裝置ID的地址優(yōu)先度點數(shù)、傳送速度優(yōu)先度點數(shù)、以及綜合點數(shù)。地址優(yōu)先度點數(shù)被表示為相對于要求終端IOaa的點數(shù)和相對于收信終端IOdb的點數(shù)。綜合點數(shù)為兩個地址優(yōu)先度點數(shù)中較大一方點數(shù)與傳送速度優(yōu)先度點數(shù)的合計。
[0182]本實施方式中，對比中繼裝置30a的IP地址“1.2.1.2”和要求終端IOaa的IP地址“1.2.1.3”，其結果為“同.同.同.異”，為此如圖24所示，地址優(yōu)先度點數(shù)為“5”。對比中繼裝置30a的IP地址“1.2.1.2”和收信終端IOdb的IP地址“1.3.2.4”，其結果為“同.異.異.異”，因此，地址優(yōu)先度點數(shù)為“I”。對比中繼裝置30b的IP地址“1.2.2.2”和要求終端IOaa的IP地址“1.2.1.3”，為“同.同.異.異”，因此，地址優(yōu)先度點數(shù)為“3”。對比中繼裝置30b的IP地址“1.2.2.2”和收信終端IOdb的IP地址“1.3.2.4”，為“同.異.同.異”，因此，地址優(yōu)先度點數(shù)為“I”。進而，對比中繼裝置30d的IP地址“1.3.2.2”和要求終端IOaa的IP地址“1.2.1.3”，為“同.異.異.異”，因此，地址優(yōu)先度點數(shù)為“I”。對比中繼裝置30d的IP地址“1.3.2.2”和收信終端IOdb的IP地址“1.3.2.4”，為“同.同.同.異”，因此，地址優(yōu)先度點數(shù)為“5”。
[0183]下面返回圖23。優(yōu)先度決定部56d以中繼裝置管理表(參見圖12)中保存的中繼裝置30的最大數(shù)據傳送速度來檢索優(yōu)先度管理表(參見圖16)，決定每個上述S46-2的第一次篩選處理中經過篩選得到的中繼裝置30a、30b、30d的傳送速度優(yōu)先度點數(shù)(S46-5)。本實施方式中的中繼裝置30a的最大數(shù)據傳送速度為圖12所示的IOO(Mbps)，因而參考圖18所示的傳送速度優(yōu)先度可知，中繼裝置30a的傳送速度優(yōu)先度點數(shù)為3。與此相同，中繼裝置30b的最大數(shù)據傳送速度的計算結果為1000 (Mbps)，因而其傳送速度優(yōu)先度點數(shù)為5。進而，中繼裝置30d的最大數(shù)據傳送速度的計算結果為IO(Mbps)，其傳送速度優(yōu)先度點數(shù)為I。[0184]而后，初步選擇部56c選擇中繼裝置30a、30b、30d中綜合點數(shù)較高的兩個上位中繼裝置30(S46-6)，該綜合點數(shù)為相對于終端IOaa以及IOdb的地址優(yōu)先度點數(shù)之中較高一方的點數(shù)和傳送速度優(yōu)先度點數(shù)的合計。在本實施方式中如圖24所示，各中繼裝置ID (Ilia、111b、Illd)對應的綜合點數(shù)分別為8、8、6，因此，選擇中繼裝置ID分別為“111a”和“111b”的中繼裝置30a和30b。
[0185]上述S46的篩選處理結束后，圖7所示的收發(fā)信部51經由通信網絡2向收信終端IOdb發(fā)送中繼裝置篩選信息(S47)，該信息用于傳達上述被選中的中繼裝置30的數(shù)量，其中包括在上述S46中被選中的中繼裝置30的數(shù)量“2”、要求終端IOaa的終端ID “Olaa”、以及上述時域ID “sel”。由此，終端IOdb在選擇用時域ID “sel”的時域的實行過程中，管理系統(tǒng)50不但能夠掌握中繼裝置30的數(shù)量、以及是哪一個終端10要求開始通話，而且還能夠掌握發(fā)送中繼裝置篩選信息的管理系統(tǒng)50的IP地址“1.1.1.2”。
[0186]而后，終端IOdb從收發(fā)信部11經由通信網絡2向管理系統(tǒng)50發(fā)送表示結束上述中繼裝置篩選信息接收的收信結束信息(S48)。該收信結束信息中包含時域ID“sel”。由此，管理系統(tǒng)50不但能夠掌握在時域ID為“sel”的時域中實行的中繼裝置數(shù)量的傳達結束，而且還能夠掌握發(fā)送信息的收信終端IOdb的IP地址“1.3.2.4”。
[0187]以下參考圖25以及圖26說明收信終端即終端IOdb選擇中繼裝置30的處理。圖25中各種管理信息均通過管理信息用時域seil來收發(fā)。
[0188]首先，管理系統(tǒng)50在開始電視會議的通信之前分別向在上述S46中選定的中繼裝置30a、30b發(fā)送事先中繼要求信息(S61-1、S61-2)。該事先中繼要求信息表示要求中繼，其中包括時域ID “sel”、要求終端IOaa的IP地址“1.2.1.3”、以及送信終端即終端IOdb的IP地址“1.3.2.4”。這樣，各個中繼裝置30a、30b便不但能夠掌握是哪個時域的事先中繼要求信息、以及是哪一個要求終端和哪一個收信終端，而且還能夠掌握發(fā)送事先中繼要求信息的管理系統(tǒng)50的IP地址“1.1.1.2”。
[0189]而后，各個中繼裝置30a、30b分別從收發(fā)信部31經由通信網絡2向上述S61-1、S61-2中掌握的要求終端即終端IOaa發(fā)送事先送信要求信息(S62-1、S62-2)，該事先送信要求信息表示需要要求終端即終端IOaa在開始通信之前向各個中繼裝置30a、30b即其自己發(fā)送包含下述的ping (Packet Internet Groper)的事先送信信息。該事先送信要求信息中包含時域ID “sel”。這樣，在以時域“sel”實行的中繼裝置30選擇處理中，要求終端即終端IOaa不但能夠掌握向各個中繼裝置30a、30b發(fā)送了事先送信信息，而且還掌握發(fā)送事先送信要求的各個中繼裝置30a、30b的IP地址“1.2.1.2”以及“1.2.2.2”。
[0190]至于為什么管理系統(tǒng)50不是直接將收信終端即終端IOdb的IP地址通知給要求終端，而是如上S61-1中所述,將收信終端IOdb的IP地址通知給中繼裝置30a,而后如上S61-2中所述，由中繼裝置30要求要求終端即終端IOaa向其本身即中繼裝置30發(fā)送事先送信要求信息，其目的在于確保安全，避免各個終端10之間獲悉其他終端10的IP地址。
[0191]接著，要求終端IOaa的接收信部11經由通信網絡2向各個中繼裝置30a、30b發(fā)送事先送信信息(S63-l、S63-2)。該事先送信信息先于圖像數(shù)據以及聲音數(shù)據發(fā)送，并取代圖像數(shù)據以及聲音數(shù)據經由各個中繼裝置30a、30b被送往收信終端10db，用于測定從要求終端IOaa發(fā)送開始、到收信終端IOdb接收為止的所要時間。該事先送信信息包括以下內容:用于確認要求終端10aa、中繼裝置30a、30b、以及收信終端IOdb之間已連接就緒可以進行通信的ping、從要求終端IOaa發(fā)送的事先送信信息的發(fā)送日期及時間、以及時域ID“sel”。這樣，各個中繼裝置30a、30b不但能夠掌握在時域ID為“sel”的時域的實行中發(fā)送了事先送信信息，而且還掌握發(fā)送該事先送信信息的要求終端IOaa的IP地址為“1.2.1.3”。
[0192]接著，各個中繼裝置30a、30b對上述S61_l、S61-2收到的事先中繼要求信息中所包含的收信終端IOdb的IP地址“1.3.2.4”進行上述事先送信信息的中繼(步驟64-1、S64-2)。這樣，收信終端IOdb在實行時域ID “sel”的時域中不但能夠掌握事先送信信息，而且還能夠掌握發(fā)送即中繼該事先送信信息的中繼裝置30a、30b的IP地址“1.2.1.2”、“1.2.2.2”。
[0193]接著，收信終端即終端IOdb的最終篩選部16根據事先送信信息最終選定一個中繼裝置30，該中繼裝置30用于中繼電視會議通話中的圖像數(shù)據以及聲音數(shù)據(S65)。
[0194]在此，利用圖9以及圖26進一步詳細說明S65。首先，圖9所示的最終篩選部16的計測部16a對每個經由中繼裝置30a、30b中繼的事先送信信息被收信終端IOdb的收發(fā)信部11收到的收信日期及時間(S65-1)進行計時。而后，計算部16b根據上述計時得到的收信日期及時間與上述事先送信信息中所包含的送信日期及時間之間的差，計算每個已完成收信日期及時間計測的事先送信信息從發(fā)出到收到所要時間(S65-2)。接著，最終選擇部16c在時域ID “sel”的時域的實行中，判斷是否收到與預定進行中繼的中繼裝置30的個數(shù)“2”數(shù)量相當?shù)乃惺孪人托判畔?S65-3)。如果還未全部收到(否)，則最終選擇部16c判斷收信終端IOdb在收到事先收信信息后經過的時間是否超過預定時間(在此為I分鐘)(S65-4)。如果沒有超過預定時間(否)，則返回上述步驟65-1。而如果在上述S65-3中判斷已收到所有事先送信信息(是)，或者，上述S65-4中判斷已超過了預定時間(是)，則最終選擇部16c選擇一個中繼裝置30，在計算部16b算出的各中繼裝置中繼事先送信信息所要時間中該中繼裝置30所要時間最短(S65-5)。在本實施方式中，用中繼裝置30a中繼事先送信信息所要的送信與收信之間的時間要短于用中繼裝置30b中繼事先送信信息所要的時間，因此，選擇中繼裝置30a。
[0195]而后，收信終端IOdb的收發(fā)信部11經由通信網絡2向管理系統(tǒng)50發(fā)送選擇信息，該選擇信息表示已選定中繼裝置30a(S66)，其中包括時域ID “sel”、以及被選的中繼裝置30a的中繼裝置ID “111a”。這樣，管理系統(tǒng)50在時域ID “sel”的時域的實行中，不但能夠掌握已選定中繼裝置30a，而且還掌握發(fā)送選擇信息的收信終端IOdb的IP地址“1.3.2.4”。
[0196]而后，管理系統(tǒng)50的時域管理部57在時域管理表(參見圖16)的時域管理表中，將上述最終選定的一個中繼裝置30a的中繼裝置ID“ 11 la”保存到含有選擇用時域ID“sel”的記錄項內的中繼裝置ID的區(qū)域部分上(S67)。而后，管理系統(tǒng)50的收發(fā)信部51經由通信網絡2向中繼裝置30a發(fā)送中繼開始要求信息(S68)，該中繼開始要求信息表示要求開始中繼，其中包括被中繼的要求終端IOaa以及收信終端IOdb各自的IP地址“1.2.1.3”以及“1.3.2.4”。這樣，中繼裝置30a能夠掌握了自己本身被選定為進行中繼的中繼裝置，構筑用于在終端IOaa和IOdb之間以低分辨率、中分辨率、高分辨率的三個圖像數(shù)據以及聲音圖像數(shù)據進行通信的時域(S69)，由此，可以在終端IOaa和終端IOdb之間開始電視會議。
[0197]在以上的說明中，S47中管理系統(tǒng)50向收信終端IOdb發(fā)送中繼裝置篩選信息，同時，通過S48?S64-l、S64-2，在收信終端IOdb —方進行中繼裝置的選擇處理(S65)。但是，本發(fā)明并不受此限制。除此之外，還可以在上述S47中，通過管理系統(tǒng)50向要求終端IOaa發(fā)送中繼裝置篩選信息，并在其后的S48到S64-1以及S64-2中，將發(fā)送各種信息的要求終端IOaa與接收各種信息的收信終端IOdb互相交換。這樣，便可以在上述S65中由要求終端IOaa來實行中繼裝置的選擇處理，另外，還可以在S66中由要求終端IOaa來發(fā)送選擇信
肩、O
[0198]以下利用圖7和圖27來說明在要求終端IOaa和收信終端IOdb之間收發(fā)內容數(shù)據舉行電視會議期間的處理。在圖像數(shù)據和聲音數(shù)據的通信以及下述延遲時間的檢測等處理中，從終端IOaa向終端IOdb方向發(fā)送圖像數(shù)據和聲音數(shù)據的處理、與反方向即從終端IOdb向終端IOaa方向發(fā)送內容數(shù)據為相同處理，因此以下僅說明從終端IOaa向終端IOdb方向的處理，而省略關于反方向處理的說明。
[0199]首先，要求終端IOaa的收發(fā)信部11通過圖2所示的圖像及聲音數(shù)據用時域sed，將攝像部14a拍攝的被攝體的圖像數(shù)據以及從聲音輸入部15a輸入的聲音數(shù)據，經由通信網絡2送往中繼裝置30a (S81)。在本實施方式中輸送圖3所示的低分辨率、中分辨率、高分辨率三種數(shù)據構成的高質量圖像數(shù)據以及聲音數(shù)據。由此，中繼裝置30a的收發(fā)信部31便收到上述三個分辨率不同的圖像數(shù)據以及聲音數(shù)據。而后，圖像狀態(tài)確認部33用收信終端IOdb的IP地址“1.3.2.4”作為檢索鍵，檢索改變圖像狀態(tài)管理表(參見圖11)，并通過抽取對應的圖像狀態(tài)信息，來確認所要中繼的圖像數(shù)據的圖像的質量或者中斷圖像數(shù)據的中繼(S82)。在本實施方式中，由于受到確認的圖像數(shù)據的畫質為“高畫質”，并且與收發(fā)信部31收到的圖像數(shù)據的畫質相同，因此中繼裝置30a通過圖像及聲音數(shù)據用時域sed，將畫質未經任何改動的圖像數(shù)據以及未經任何改動的聲音數(shù)據送往收信終端IOdb (S83)。與此同時還還發(fā)送了要求終端即終端IOaa的終端ID “Olaa”。這樣，收信終端IOdb的收發(fā)信部11收到低分辨率、中分辨率、高分辨率三種數(shù)據構成的高質量圖像數(shù)據以及聲音數(shù)據。而后，顯示控制部17組合具有三組不同畫質的圖像數(shù)據，并在顯示器120上顯示基于上述圖像數(shù)據的圖像，同時，聲音輸出部15b輸出基于上述聲音數(shù)據的聲音。
[0200]接著，終端IOdb的延遲檢測部18每隔一定時間，如每隔I秒檢測收發(fā)信部11收到的圖像數(shù)據的收信延遲時間(S84)。本實施方式在以下說明中設定延遲時間為200ms。
[0201]收信終端IOdb的收發(fā)信部11用圖2所示的管理信息用時域sei并經由通信網絡2將表示延遲時間為“200 (ms) ”的延遲信息送往管理系統(tǒng)50 (S85)。這樣，管理系統(tǒng)50便能夠在掌握延遲時間的同時，還掌握發(fā)送延遲信息的終端IOdb的IP地址“1.3.2.4”。
[0202]接著，管理系統(tǒng)50的延遲時間管理部60以上述收信終端IOdb的IP地址“1.3.2.4”為檢索鍵，檢索終端管理表(參見圖14)，抽取對應的終端ID “Oldb”，進而，將上述延遲信息中的延遲時間“200 (ms)”保存到時域管理表(參見圖16)中包含上述終端ID “Oldb”的記錄項內用于記錄延遲時間的區(qū)域部分中(S86)。
[0203]接著，圖像狀態(tài)決定部58以上述延遲時間“200 (ms) ”為檢索鍵，檢索圖像狀態(tài)管理表(參見圖19)，抽取對應的圖像狀態(tài)信息，決定需要中繼裝置30a進行更改的圖像數(shù)據的圖像狀態(tài)(S87)。在此，圖像狀態(tài)決定部58抽取的圖像狀態(tài)信息為“中畫質”，并將中繼裝置30將要中繼的畫質定為“中畫質”。
[0204]而后，收發(fā)信部51在時域管理表(參見圖16)中，以與上述終端ID “Oldb”相關的中繼裝置ID “111a”為檢索鍵，檢索中繼裝置管理表(參見圖12)，抽取對應的中繼裝置30a的IP地址“1.2.1.2” (S88)。而后，收發(fā)信部51用圖2所示的管理信息用時域sei并經由通信網絡2，將上述S87決定的表示圖像數(shù)據的畫質為“中畫質”的圖像狀態(tài)信息送往中繼裝置30a(S89)。該圖像狀態(tài)信息中包括在上述S86中被當作檢索鍵使用的收信終端IOdb的IP地址“1.3.2.4”。這樣，中繼裝置30a的改變圖像質量管理部34便將收信終端IOdb的IP地址“1.3.2.4”與被中繼的圖像數(shù)據的畫質“中畫質”相關地保存到改變圖像狀態(tài)管理表(參見圖11)中進行管理(S90)。
[0205]而后，終端IOaa繼續(xù)進行與上述S81相同的處理，即用圖像及聲音用時域sed向中繼裝置30a發(fā)送以低畫質、中畫質、高畫質構成的高畫質圖像數(shù)據、聲音數(shù)據以及終端IOaa的終端ID “Olaa” (S91)。這樣，與上述S82相同，中繼裝置30a的圖像狀態(tài)確認部33以收信終端IOdb的IP地址“1.3.2.4”作為檢索鍵，檢索改變圖像狀態(tài)管理表(參見圖11),并通過抽取對應的中繼圖像數(shù)據的畫質“中畫質”,來確認受到中繼的圖像數(shù)據的畫質(S92)。在本實施方式中，圖像數(shù)據的畫質被確認為“中畫質”，該畫質低于收發(fā)信部31收到的圖像數(shù)據的畫質“高畫質”，為此，圖像質量更改部35改變圖像數(shù)據的圖像狀態(tài)，將“高畫質”降低為“中畫質”，更改圖像數(shù)據的畫質(S93)。
[0206]而后，收發(fā)信部31用圖像及聲音數(shù)據用時域sed并經由通信網絡2，向終端IOdb發(fā)送上述圖像數(shù)據的畫質被改變成“中畫質”的圖像數(shù)據以及音質未經改變的聲音數(shù)據(S94)。與此同時還發(fā)送要求終端即終端IOaa的終端ID “Olaa”。這樣，收發(fā)信部11收到中分辨率和低分辨率2組數(shù)據構成的中畫質圖像數(shù)據以及聲音數(shù)據。而后，顯示控制部17結合兩種分辨率的圖像數(shù)據，并在顯示器120上顯示圖像，同時基于聲音數(shù)據從聲音輸出部15b輸出聲音。
[0207]這樣，收信終端即終端IOdb接收圖像數(shù)據時如果發(fā)生收信延遲，則可以通過中繼裝置30a改變圖像的畫質，以避免參加電視會議的人員有不協(xié)調感覺。
[0208]此外，在圖像的質量降低后，如果通信網絡2的擁擠得到解消，延遲檢測部18檢測到的延遲時間小于100 (ms)，則經由上述S85?S92，并通過S93，能夠再更改為原來的畫質即“高畫質”。
[0209]以下利用圖28?圖37說明一例收信終端即終端IOdb的顯示器120db所顯示得畫面。在以下的說明中針對終端10aa、終端IOca以及終端IOdb三個地點之間舉行三者電視會議的情況進行說明。
[0210]圖28是一例顯示器顯示的畫面的示意圖。該畫面為終端IOdb的顯示器120db顯示的畫面。如圖28所示,顯示器120db顯示的電視會議用畫面PO上顯示以下畫面:顯示參加會議對方的主要成員圖像的主畫面P1、顯示自身圖像的副畫面P2、以及顯示參加會議對方的輔助性成員圖像的副畫面P3?P8。在顯示器120中顯示多個畫面中主畫面Pl所占面積最大。
[0211]在電視會議用畫面PO的最下方，左側顯示短信顯示畫面P10，中間顯示“畫面轉換”鍵P11,在轉換主畫面和副畫面時,可用鼠標等按動該鍵PU。
[0212]電視會議用畫面PO的最下方的右側中顯示相機圖標P12，用于表示該終端(終端IOdb)本身的相機112電源接通且從該終端本身進行圖像通信，或該終端(終端IOdb)本身的相機112電源斷開且從該終端本身未進行圖像通信。相機圖標為“ X ”時，表示終端本身的相機112電源處于接通狀態(tài)，用戶可在此后關閉電源。另一方面，如果相機圖標不是“ X ”時，表示終端本身的相機112電源不是處于接通狀態(tài)，用戶可在此后接通電源。
[0213]以下用圖29?圖31說明在第一種顯示形態(tài)中在主畫面Pl上顯示正在發(fā)言的參加者的圖像。圖29是改變顯示器上顯示的畫面的處理流程。圖30是顯示內容發(fā)生變化后的畫面管理表的示意圖。圖31是顯示器上顯示的改變后的畫面的示意圖。
[0214]如圖29所示，終端10 (在此為收信終端即終端IOdb)的聲音判斷部21判斷自己的收發(fā)信部11收到的多個聲音數(shù)據中是否包含始終在規(guī)定值以上的聲音信號值(S101的否)。
[0215]其次，SlOl的判斷為包含始終在規(guī)定值以上的聲音信號水準(S101的是)，則更改部22改變畫面管理表的內容(S102)，如圖30所示，在畫面管理表30中，與包含規(guī)定值以上的聲音信號水準的聲音數(shù)據一起收到的終端IOca的終端ID “Olca”被改為與預定的畫面編號“I”相關。此時，顯示控制器17按照更改后的畫面管理表的內容，如圖31所示，在顯示器120db上的多個畫面(P1、P2、P3)中分別顯示對應的畫面。與圖28相比，圖31中終端IOca的圖像與終端IOaa的圖像被互相交換。
[0216]這樣，將開始發(fā)言的對方圖像顯示到主畫面Pl上，起到方便電視會議舉行的效
果O
[0217]上述S87中針對延遲時間為200ms時的情況進行了說明，以下說明延遲時間為600ms時的情況。
[0218]在延遲時間為600ms時，在S86中，延遲時間管理部60將延遲信息所表示的延遲時間600ms保存到時域管理表(參見圖16)中終端ID為Oldb的記錄項中的延遲時間區(qū)域部分中進行管理。而后，在S87中，圖像狀態(tài)決定部58以延遲時間600ms為檢索鍵，檢索圖像狀態(tài)管理表(參見圖19)，抽取對應的圖像狀態(tài)信息“中斷”，并決定中斷中繼裝置30a的圖像數(shù)據中繼。這樣，在S94中，收發(fā)信部31停止中繼上述圖像數(shù)據，同時依然利用圖像及聲音數(shù)據用時域sed并經由通信網絡2將上述聲音數(shù)據送往終端10db。
[0219]另一方面，當上述S87決定的圖像狀態(tài)為“中斷”時，管理系統(tǒng)50同時實行S88和S89，進行短信制作處理，如圖32所示，制作表示“圖像數(shù)據的收信終端IOdb不接收圖像數(shù)據”的信息(S121)。圖32是短信制作、發(fā)送以及顯示的處理時序圖。
[0220]在此用圖33詳細說明S121中的處理。圖33是短信制作處理流程圖。
[0221]首先，短信制作部61以上述步驟85中收到的終端IOdb的IP地址作為檢索鍵，檢索終端管理數(shù)據庫5003，抽取對應的終端ID(S121-1)。
[0222]其次，短信制作部61以終端IOdb的終端ID “Oldb”為檢索鍵，檢索時域管理數(shù)據庫5005，抽取處于相同時域(在此時域ID為sel)中的對應的終端IOaa的終端ID “Olaa” (S121-2)。
[0223]而后，短信制作部61以終端IOaa的終端ID “Olaa”為檢索鍵，檢索終端管理數(shù)據庫5003，抽取對應的終端名稱信息(在此為“AA終端”，S121-3)。在此抽取的終端名稱信息除了 “AA終端”以外，還可以是終端名稱信息的其它部分，如“日本東京事業(yè)所AA終端”或“東京事業(yè)所AA終端”之類的全部或部分終端名稱信息。
[0224]在此，例舉了終端IOdb中終端IOaa的圖像信息時發(fā)生了接收延遲。而多個終端之間通信，圖像信息收信延遲當然可能發(fā)生在其他終端之間，如終端IOdb與終端IOca之間，或終端aa與終端ca之間。由于對時域進行個別管理，因此當收信終端(如終端IOdb)中延遲收到圖像數(shù)據時，便能夠通過實行上述S121-1?3，檢索終端管理數(shù)據庫以及時域管理數(shù)據庫，確認是來自哪一個終端的圖像數(shù)據發(fā)生延遲。
[0225]而后，短信制作部61制作表示沒有收到圖像數(shù)據的信息(S121-4)，例如，該信息是將上述S121-3中抽取的終端名稱信息“AA終端”放入“沒有收到圖像”的句子中組成內容為“沒有收到AA終端的圖像”的信息。
[0226]除上述以外，短信的內容還可以是“僅接收聲音”。
[0227]此外，短信的內容并不局限于文字，也可以是圖標等圖像。在以圖標等圖像作為短信時，圖像數(shù)據可預存在存儲部5000中，在短信制作部61制作圖像時，從存儲部5000中讀取圖標等圖像的數(shù)據。另外還可以將圖標等圖像數(shù)據預存在終端10的存儲部1000中，根據管理系統(tǒng)發(fā)送的指令，從存儲部1000中讀取圖像數(shù)據。
[0228]接著，如圖32所示，管理系統(tǒng)50的收發(fā)信部51經由通信網絡2向終端IOdb發(fā)送上述S121中制作的短信以及發(fā)生延遲的圖像數(shù)據的送信終端即終端IOaa的終端ID“01aa”(S122)。對此，終端IOdb的收發(fā)信部11接受短信以及終端ID。而后，終端IOdb的顯示控制部17在顯示器120db上顯示短信(S123)。短信的數(shù)據為text數(shù)據，其數(shù)據量相比于圖像數(shù)據以及聲音數(shù)據非常小，為此，即便通信網絡2的帶域十分狹窄，該數(shù)據也能夠得到中繼。
[0229]在此用圖34和圖35進一步詳細說明S123中的處理。圖34是顯示短信的流程圖。圖35是顯示器上顯示的一例第一顯示形態(tài)畫面得示意圖。
[0230]首先，終端IOdb的收發(fā)信部11始終保持接收短信數(shù)據以及終端ID的準備(S123-1的否)。如果收發(fā)信部11收到短信數(shù)據以及終端ID(S123-1的是)，則抽取部20根據收到的終端ID，檢索圖像管理表(參見圖8)，抽取對應的畫面編號(S123-2)。
[0231]而后，顯示控制部17用圖35的主畫面Pl上顯示的短信來取代圖28的主畫面Pl上顯示的圖像。即當終端IOdb的主畫面Pl上顯示終端IOaa的圖像時，如果終端IOdb的圖像數(shù)據接收延遲約600rns，則中繼裝置30a的圖像質量更改部35終端圖像數(shù)據的中繼。同時，終端IOdb用上述S122中收到的短信顯示到主畫面Pl上，以此取代無法在上述S83、S94中接收圖像數(shù)據。
[0232]以下用圖36和圖37說明一例顯示器120db上顯示第二以及第三顯示形態(tài)的畫面。圖36是顯示器上顯示的第二顯示形態(tài)的畫面的示意圖。圖37是顯示器上顯示的第三顯示形態(tài)的畫面的示意圖。
[0233]圖36所示的第二顯示形態(tài)與第一顯示形態(tài)相同，仍然顯示三個地點之間舉行三者電視會議的情況。首先，終端IOdb處于如圖31所示的狀態(tài)，終端IOdb的收發(fā)信部11始終保持接收短信數(shù)據以及終端ID的準備(S123-1的否)。如果收發(fā)信部11收到短信數(shù)據以及終端ID(S123-1的是)，則抽取部20根據收到的終端ID，檢索圖像管理表(參見圖8)，抽取對應的畫面編號(S123-2)。此時，終端IOdb接收終端IOaa發(fā)送的圖像信息延遲600 (ms)，在這種情況下，終端IOdb因無法收到圖像數(shù)據，轉而如圖36所示在畫面上顯示收到的短信用以代替。
[0234]進而說明如圖37所示的第三顯示形態(tài)顯示九個以上地點之間舉行九方電視會議的情況。這些地點中包含終端10cc，該終端IOcc的圖像數(shù)據表示的圖像未被顯示在顯示器120的畫面上。[0235]終端IOdb起初處于類似圖28所示畫面的狀態(tài)，而后發(fā)生終端IOaa發(fā)送的圖像數(shù)據收信延遲。對此，終端IOdb改為如圖37所示地顯示，即在主畫面Pl上顯示雖然收到圖像數(shù)據卻未顯示的由終端IOcc發(fā)送的圖像數(shù)據表示的圖像，以此取代未能收到的終端IOdb的圖像數(shù)據。另外，在短信顯示畫面PlO上顯示表示未能收到終端IOaa的圖像的短信。
[0236]此時，在圖像數(shù)據發(fā)生收信延遲之前，圖像管理表(參見圖8)中畫面編號“I”與終端IOaa的終端ID相關，畫面編號“補I”與終端IOcc的終端ID相關。在終端IOaa的圖像數(shù)據接收中斷后，將圖像管理表(參見圖8)中分別與畫面編號“I”和“補I”相關的終端ID互相交換。在本顯示方式中未顯示的圖像是與主畫面的圖像交換，但是本發(fā)明并不受此限制，該未顯示的圖像也可以與副畫面的圖像交換。
[0237]《主要效果》
[0238]如上所述，在收信一方的終端10中因圖像數(shù)據接收延遲而造成由中繼裝置30中繼的圖像數(shù)據的接收被中斷的情況下，管理系統(tǒng)50向收信一方的終端10發(fā)送未收到圖像數(shù)據或只能接收聲音數(shù)據的信息。據此，收信一方的終端10在其顯示器120上顯示上述信息，使該終端10的用戶能夠獲悉沒有收到圖像數(shù)據的原因在于圖像數(shù)據因延遲而未被中繼，而不是由于送信一方的終端10中止了電視會議。因此，收信一方的終端10的用戶能夠在整個電視會議期間放心地與送信一方的終端10的用戶交流。
[0239]管理系統(tǒng)50將送信一方的終端10的名稱包含在上述信息中，據此可知舉行三方以上的電視會議中的哪個終端10未能收到圖像數(shù)據。
[0240]【第一實施方式】
[0241]以下利用圖38說 明本發(fā)明第一實施方式。圖38是本發(fā)明第一實施方式涉及的延遲解消處理的流程圖。
[0242]《本實施方式的整體結構》
[0243]本實施方式以上述為前提，上述各結構在本實施方式中進一步具有以下功能。
[0244]在本實施方式中，圖7所示的終端10中的延遲檢測部18在延遲時間超過規(guī)定值(例如500ms)的情況下，向收發(fā)信部11提出中斷發(fā)送圖像數(shù)據的要求。
[0245]終端10的收發(fā)信部11收到延遲檢測部18發(fā)送的圖像數(shù)據送信中斷要求后，即便是正在用攝像部14拍攝被攝體，也將中斷向通信網絡2發(fā)送圖像數(shù)據，僅發(fā)送聲音數(shù)據。
[0246]《本實施方式的處理或動作》
[0247]以下利用圖38說明本發(fā)明第一實施方式涉及的延遲解消處理。
[0248]首先，在本實施方式中終端IOdb也實行圖27所示的步驟S81至S84的處理。S84之后實行終端IOdb實行圖38所示的處理。
[0249]即在圖27的步驟S84中，延遲檢測部18檢測圖像數(shù)據的收信延遲時間。當該檢測到的延遲時間超過規(guī)定值(如500ms)時(S201的是)，延遲檢測部18要求收發(fā)信部11中斷圖像數(shù)據的發(fā)送(S202)。而后，收發(fā)信部11僅向通信網絡2發(fā)送聲音數(shù)據，而中斷圖像數(shù)據的發(fā)送(S203)。相反，如果在S201中延遲時間沒有超過上述規(guī)定值(S201的否)，則不需要解消延遲，不實行S202和S203的處理，結束圖38的處理。
[0250]《本實施方式的效果》
[0251]按照上述本實施方式，在通信網絡擁擠傳送容量下降的環(huán)境下，終端IOdb不是要求通信對方的終端aa終端發(fā)送圖像數(shù)據，而是中斷自己的圖像數(shù)據的發(fā)送。據此，發(fā)揮了緩解通信網絡擁擠以確保聲音數(shù)據收發(fā)的效果。
[0252]此時，終端IOdb不要求通信對方的終端IOaa中斷圖像數(shù)據的發(fā)送，因此不需要為此特意向對方傳送終端提出中斷發(fā)送圖像數(shù)據的要求。
[0253] 【第二實施方式】
[0254]以下利用圖39說明本發(fā)明第二實施方式。圖39是本發(fā)明第二實施方式涉及的延遲解消處理的流程圖。
[0255]《本實施方式的整體結構》
[0256]本實施方式以上述為前提，上述各結構在本實施方式中進一步具有以下功能。
[0257]在本實施方式中，當圖7所示的終端10的延遲檢測部18檢測到延遲時間超過規(guī)定值(如500ms)時,該延遲檢測部18要求攝像部14中斷被攝體的拍攝。
[0258]對此，終端10的攝像部14收到延遲檢測部18的要求后，中斷攝像處理。
[0259]《本實施方式的處理或動作》
[0260]以下利用圖39說明本發(fā)明第二實施方式涉及的延遲解消處理。
[0261]首先，在本實施方式中終端IOdb也實行圖27所示的步驟S81至S84的處理。S84之后實行終端IOdb實行圖39所示的處理。
[0262]即在圖27的步驟S84中，延遲檢測部18檢測圖像數(shù)據的收信延遲時間。當該檢測到的延遲時間超過規(guī)定值(如500ms)時(S211的是)，延遲檢測部18要求攝像部14中斷被攝體的拍攝(S212)。而后，攝像部14中斷攝像處理(S213)。這樣，便不再有從攝像部14送往收發(fā)信部11的圖像像數(shù)據，其結果收發(fā)信部11便中斷向通信網絡2發(fā)送圖像數(shù)據。
[0263]相反，如果在S211中延遲時間沒有超過上述規(guī)定值(S211的否)，則不需要解消延遲，不實行S212和S213的處理，結束圖39的處理。
[0264]《本實施方式的效果》
[0265]按照上述本實施方式，除了上述第一實施方式的效果以外，還因中斷了攝像部14的攝像處理，因而具有節(jié)能效果。
[0266]在通信網絡擁擠傳送容量下降的環(huán)境下，終端IOdb不是要求通信對方的終端aa中斷發(fā)送圖像數(shù)據，而是中斷自己的圖像數(shù)據的發(fā)送。據此，發(fā)揮了緩解通信網絡擁擠以確保聲音數(shù)據收發(fā)的效果。
[0267]此時，終端IOdb沒有要求通信對方的終端IOaa終端圖像數(shù)據的發(fā)送，因此不需要特意為此向對方傳送中斷圖像數(shù)據送信的要求。
[0268]【實施方式的補充】
[0269]上述各實施方式的中繼裝置30、管理系統(tǒng)50以及程序提供系統(tǒng)90以及保守系統(tǒng)100既可用單獨的計算機構建，也可以將功能部拆開，用分別承擔被拆開的各功能部的多臺計算機來構建。而且，在用單獨的計算機構建程序提供系統(tǒng)90時，既可將程序提供系統(tǒng)90發(fā)送的程序拆開形成多個模塊來發(fā)送，也可發(fā)送整個程序。進而，在用多個計算機構建程序提供系統(tǒng)90時，多個模塊可以拆開由各臺計算機分別發(fā)送。
[0270]可以用CD-ROM等記錄介質保存上述各個實施方式的終端用程序、中繼裝置用程序、以及傳送管理用程序，在向國內外各方用戶提供終端用程序、中繼裝置用程序、以及傳輸管理用程序時，可將該記錄介質以及保存這些程序的HD204和具有該HD204的程序提供系統(tǒng)90作為軟件產品使用。[0271]在上述實施方式中，著眼于圖像數(shù)據的圖像分辨率，利用圖11所示的改變圖像狀態(tài)管理表以及圖19所示的圖像狀態(tài)管理表，來對圖像狀態(tài)進行管理，在此，圖像分辨率僅僅是表示受到中繼裝置30中繼的圖像數(shù)據的圖像質量的一例而已，本發(fā)明并不受此限制，還有其他可以用于表示圖像質量的例子，如用圖像數(shù)據的畫質深度、聲音數(shù)據的聲音取樣頻率、聲音數(shù)據的聲音比特長等來進行管理。聲音數(shù)據的通信還可以與三種分辨率(高分辨率、中分辨率、低分辨率)的數(shù)據的通信分開進行。
[0272]對于收信日期及時間的管理也不局限于圖12、圖14、圖16所示，在這些收信日期及時間中至少需要管理收信時間。
[0273]上述實施方式用圖12中管理中繼裝置的IP地址，用圖14中管理終端的IP地址，但本發(fā)明并不受此限制。本發(fā)明只要是用于在通信網絡2上確認中繼裝置30的中繼裝置確認信息、或者用于在通信網絡2上確認終端10的終端確認信息,便可作為上述收信信息的其他例子，用來管理各自的全域名(FQDN, fully qualified domain name)。此時,通過公知的域名系統(tǒng)(DNS, domain name system)服務器來取得對應于FQDN的IP地址。另外，不但可以表示為“用于確認通信網絡2上的中繼裝置30的中繼裝置確定信息”，還可以表示為“表示連接通信網絡2上的中繼裝置30的連接對象的中繼裝置連接對象信息”，或者“表示通信網絡2上的中繼裝置30的收信對象的中繼裝置收信對象信息”。同樣，不但可以表示為“用于在通信網絡2上確定終端10的終端確認信息”，還可以表示為“表示連接通信網絡2上的終端10的連接對象的終端連接對象信息”，或者“表示通信網絡2上的終端10的收信對象的終端收信對象信息”。
[0274]在上述實施方式中以傳送系統(tǒng)I為例對電視會議系統(tǒng)進行了說明，但是本發(fā)明并不受此限制，除了傳送系統(tǒng)以外，本發(fā)明還適用于網協(xié)(IPanternet protocol)電話、網絡電話等電話系統(tǒng)。另外，傳送系統(tǒng)I還可以用于汽車導航系統(tǒng)。在這種情況下，例如，終端10的一方相當于搭載于汽車中的導航裝置，而另一方相當于管理導航的管理中心的管理終端或管理服務器、或者相當于搭載于其他汽車中的導航裝置。進而，傳送系統(tǒng)I還可以是手機的通信系統(tǒng)。在這種情況下，例如終端10相當于手機。
[0275]上述實施方式用圖像數(shù)據以及聲音數(shù)據作為一例內容數(shù)據來進行說明，但本發(fā)明并不受此限制。內容數(shù)據還可以是觸覺數(shù)據，在這種情況下，一方終端的用戶的觸覺被傳送到另一方終端。進而，內容數(shù)據還可以是嗅覺，此時，一方終端的用戶的氣味被傳送到另一方終端。內容數(shù)據只要是圖像數(shù)據、聲音數(shù)據、觸覺數(shù)據、以及嗅覺數(shù)據其中之一便可。
[0276]上述實施方式對利用傳送系統(tǒng)I舉行電視會議進行了說明。但是本發(fā)明并不受此限制，除此之外，本發(fā)明還可以用于討論協(xié)商、親友之間的交談、或者單向信息提供。
【權利要求】
1.一種傳送終端，其通過與對方傳送終端之間收發(fā)包含聲音數(shù)據在內的內容數(shù)據來實現(xiàn)與所述對方傳送終端之間的通信，其特征在于具備以下各部:收信部，用于接收所述內容數(shù)據之中由所述對方傳送終端發(fā)送的第一內容數(shù)據；送信部，用于發(fā)送所述內容數(shù)據之中從該傳送終端送往所述對方傳送終端的第二內容數(shù)據；以及，延遲檢測部，用于檢測所述收信部收到所述第一內容信息時的延遲時間，當所述延遲檢測部檢測到的延遲時間超過規(guī)定值時，所述送信部中斷所述第二內容數(shù)據中除聲音數(shù)據以外的數(shù)據送信。
2.根據權利要求1所述的傳送終端，其特征在于，所述第二內容數(shù)據中包含圖像數(shù)據，所述送信部中斷所述第二內容數(shù)據之中的所述圖像數(shù)據的送信。
3.根據權利要求2所述的傳送終端，其特征在于，所述傳送終端進一步具備用于拍攝處于該傳送終端一方的被攝體的攝像部，被所述送信部中斷送信的所述圖像數(shù)據為所述攝像部拍攝的圖像數(shù)據。
4.根據權利要求3所述的傳送終端，其特征在于，當所述延遲檢測部檢測到的延遲時間超過所述規(guī)定值時，所述攝像部中斷所述被攝體的拍攝。
5.—種傳送方法,用于傳送終端通過與對方傳送終端之間收發(fā)包含聲音數(shù)據在內的內容數(shù)據來實現(xiàn)與所述對方傳送終端之間的通信，其特征在于具備以下步驟:收信步驟，接收所述內容數(shù)據之中由所述對方傳送終端發(fā)送的第一內容數(shù)據；送信步驟，發(fā)送所述內容數(shù)據之中從該傳送終端送往所述對方傳送終端的第二內容數(shù)據；以及，延遲檢測步驟，檢測在所述收信步驟中收到所述第一內容信息時的延遲時間，當在所述延遲檢測步驟中檢測到的延遲時間超過規(guī)定值時，在所述送信步驟中，中斷所述第二內容數(shù)據中除聲音數(shù)據以外的數(shù)據送信。
【文檔編號】H04N7/15GK103731627SQ201310466812
【公開日】2014年4月16日 申請日期:2013年10月9日 優(yōu)先權日:2012年10月15日
【發(fā)明者】加藤喜永, 淺井貴浩 申請人:株式會社理光