本發(fā)明涉及一種操作裝置、跟蹤系統(tǒng)、操作方法及程序,尤其涉及一種用于跟蹤被攝體的操作裝置、跟蹤系統(tǒng)、操作方法及程序。
背景技術:
一邊跟蹤特定的被攝體,一邊連續(xù)進行拍攝的跟蹤攝像技術,在監(jiān)控攝像機或通常的數(shù)碼相機等領域中被廣泛使用。作為確定成為跟蹤對象的特定的被攝體的位置的方法提出有各種方法,例如已知有通過進行使跟蹤對象的特征與攝像圖像匹配的圖像處理而確定圖像內(nèi)的跟蹤對象的位置的方法。
并且,已知有使具有跟蹤跟蹤對象的功能的相機與遠程操作裝置之間互換信息,以跟蹤跟蹤對象的技術。
并且,提出有根據(jù)跟蹤對象的動作而跟蹤跟蹤對象的技術。
例如,在專利文獻1中公開了帶自動跟蹤功能的相機和操作裝置(遠程操作裝置),并公開了在跟蹤對象的移動速度小于閾值的情況下進行圖像的高分辨率化的技術。
以往技術文獻
專利文獻
專利文獻1:日本特開2014-216694號公報
技術實現(xiàn)要素:
發(fā)明要解決的技術課題
然而,由于相機與操作裝置之間的通信速度有限,因此從相機發(fā)送到操作裝置的圖像的尺寸(像素數(shù))與利用操作裝置接收的幀率構成權衡關系。即,若將圖像的尺寸設為較大,則有可能在操作裝置側(cè)無法接收所有幀,利用操作裝置接收的幀率有下降的傾向。
另一方面,若將圖像的尺寸設為較小,則導致判別較小的跟蹤對象與其它被攝體的精度降低,因此有時進行自動跟蹤的相機難以以高精度持續(xù)跟蹤跟蹤對象。
若幀率下降,則在跟蹤動作較快的跟蹤對象的情況下,由于跟蹤對象在圖像之間的移動量變大,因此有可能進行自動跟蹤的相機難以以高精度持續(xù)跟蹤跟蹤對象。
本發(fā)明是鑒于這種情況而完成的,其目的在于提供一種即使為較小的跟蹤對象或移動量較大的跟蹤對象,也能夠以高精度持續(xù)跟蹤的操作裝置、跟蹤系統(tǒng)、操作方法及程序。
用于解決技術課題的手段
本發(fā)明的一方式的操作裝置為對具備自動跟蹤功能的相機發(fā)送自動跟蹤功能用控制信息的操作裝置,其具備:接收部,接收從相機連續(xù)發(fā)送的圖像;跟蹤對象接受部,接受相機進行跟蹤的特定的跟蹤對象;移動量計算部,根據(jù)由接收部連續(xù)接收的圖像,計算連續(xù)的圖像之間的跟蹤對象的移動量;移動量判定部,判定利用移動量計算部算出的移動量是否為第1移動量閾值以上;及尺寸命令發(fā)送部,在由移動量判定部判定移動量為第1移動量閾值以上的情況下,向相機發(fā)送將相機所發(fā)送圖像的尺寸從第1尺寸變更為小于第1尺寸的第2尺寸的命令。
根據(jù)本方式,在跟蹤對象的移動量為第1移動量閾值以上的情況下,發(fā)送將從相機所發(fā)送圖像的尺寸變更為較小尺寸的命令,因此可抑制操作裝置接收的幀率下降,即使為移動量較大的跟蹤對象,也能夠以高精度持續(xù)進行跟蹤。
并且,根據(jù)本方式,在跟蹤對象的移動量小于第1移動量閾值的情況下,不發(fā)送將從相機所發(fā)送圖像的尺寸變更為較小尺寸的命令,因此圖像的尺寸不會變小,即使為較小的跟蹤對象,也能夠以高精度持續(xù)進行跟蹤。
優(yōu)選操作裝置還具備:跟蹤處理部,其跟蹤處理部通過圖像的圖像處理而進行跟蹤對象的跟蹤,所述跟蹤處理部包括:評價值生成部,生成表示跟蹤的準確度的評價值;及評價值判定部,判定利用評價值生成部生成的評價值是否為評價值閾值以上,尺寸命令發(fā)送部在發(fā)送將圖像的尺寸變更為第2尺寸的命令之后,在由移動量判定部判定移動量小于第1移動量閾值且由評價值判定部判定評價值為評價值閾值以上的情況下,發(fā)送將圖像的尺寸從第2尺寸變更為第1尺寸的命令。
根據(jù)本方式,在判定為被攝體的移動量小于第1移動量閾值且跟蹤的評價值為評價值閾值以上的情況下,發(fā)送圖像的尺寸變更為原來的較大尺寸的命令。由此,在本方式中,操作裝置能夠通過較大尺寸的圖像進行跟蹤處理,因此能夠進行高精度的跟蹤。
優(yōu)選操作裝置還具備:跟蹤處理部,其跟蹤處理部通過圖像處理而進行跟蹤對象的跟蹤,所述跟蹤處理還部包括:評價值生成部,生成表示跟蹤的準確度的評價值;及評價值判定部,判定利用評價值生成部生成的評價值是否為評價值閾值以上,移動量判定部判定移動量是否小于比第1移動量閾值還小的第2移動量閾值,在由移動量判定部判定移動量小于第2移動量閾值且由評價值判定部判定評價值為評價值閾值以上的情況下,尺寸命令發(fā)送部生成將圖像的尺寸變更為大于第1尺寸的第3尺寸的命令。
根據(jù)本方式,在判定為被攝體的移動量小于第2移動量閾值且跟蹤的評價值為評價值閾值以上的情況下,發(fā)送圖像的尺寸變更為原來的較大尺寸的命令。由此,在本方式中,操作裝置能夠通過較大尺寸的圖像進行跟蹤處理,因此能夠進行高精度的跟蹤。
優(yōu)選評價值生成部根據(jù)塊匹配中模板圖像和與模板圖像對應區(qū)域的圖像的各像素差分的絕對值的總和而生成評價值。
根據(jù)本方式,跟蹤的評價是根據(jù)塊匹配中模板圖像和與模板圖像對應區(qū)域的圖像的各像素差分的絕對值的總和而進行的。由此,本方式以高精度進行跟蹤的評價,因此能夠進行更高精度的跟蹤。
優(yōu)選操作裝置具備:幀率檢測部,從由接收部連續(xù)接收的圖像中檢測所接收到的圖像的幀率;及幀率判定部,判定由幀率檢測部檢測到的幀率是否小于幀率閾值,在由幀率判定部判定幀率小于幀率閾值的情況下,尺寸命令發(fā)送部發(fā)送將圖像的尺寸變更為第2尺寸的命令。
根據(jù)本方式,在幀率小于幀率閾值的情況下,發(fā)送將圖像的尺寸變更為第2尺寸的命令,因此發(fā)送較小尺寸的圖像,能夠提高已下降的幀率。由此,在本方式中,即使為移動量較大的跟蹤對象,也能夠以高精度進行跟蹤。
優(yōu)選還具備通信速度獲取部,其根據(jù)幀率檢測部檢測到的幀率而獲取與相機的通信速度。
根據(jù)本方式,根據(jù)幀率而獲取相機與操作裝置的通信速度,因此以更高精度獲取通信速度。
優(yōu)選操作裝置還具備通信信息發(fā)送部,其向相機發(fā)送與相機的通信狀態(tài)有關的信息,在由幀率判定部判定幀率小于幀率閾值的情況下,通信信息發(fā)送部發(fā)送有關通信錯誤的信息作為有關通信狀態(tài)的信息。
根據(jù)本方式,在幀率小于幀率閾值的情況下,向相機發(fā)送有關通信錯誤的信息,因此相機能夠掌握操作裝置中的通信狀態(tài)。
優(yōu)選幀率閾值根據(jù)相機所發(fā)送圖像的尺寸而設定。
根據(jù)本方式,幀率閾值根據(jù)圖像的尺寸而設定,因此能夠以更高精度進行幀率的判定。
優(yōu)選操作裝置還具備:顯示部,顯示從相機連續(xù)的發(fā)送的圖像;及輸入部,指定顯示部的畫面上的輸入位置,跟蹤對象接受部接受由輸入部指定的輸入位置上的被攝體作為跟蹤對象。
根據(jù)本方式,通過由輸入部指定顯示部顯示畫面上的位置而接受跟蹤對象,因此可以更簡單地確定跟蹤對象。
本發(fā)明的另一方式的跟蹤系統(tǒng)為具備相機和用于操作相機的操作裝置的跟蹤系統(tǒng),相機具備:攝像部,獲取圖像;攝像方向切換機構,切換攝像部的攝像方向;圖像發(fā)送部,發(fā)送圖像;命令接收部,接收來自操作裝置的命令;及尺寸變更部,根據(jù)來自操作裝置的命令而變更從圖像發(fā)送部向操作裝置發(fā)送的圖像的尺寸,所述操作裝置根據(jù)由圖像發(fā)送部發(fā)送的圖像的接收狀況而發(fā)送圖像的尺寸的變更命令,操作裝置具備:接收部,接收從相機連續(xù)發(fā)送的圖像;跟蹤對象接受部,接受相機進行跟蹤的特定的跟蹤對象;移動量計算部,根據(jù)由接收部連續(xù)接收到的圖像,計算跟蹤對象在連續(xù)的圖像之間的移動量;移動量判定部,判定利用移動量計算部算出的移動量是否為第1移動量閾值以上;及尺寸命令發(fā)送部,在由移動量判定部判定移動量為第1移動量閾值以上的情況下,向相機發(fā)送將相機發(fā)送的圖像的分辨率從第1尺寸變更為小于第1尺寸的第2尺寸的命令。
本發(fā)明的另一方式的操作方法為向具備自動跟蹤功能的相機發(fā)送自動跟蹤功能用控制信息的操作方法,其包括:接收步驟,接收從相機連續(xù)發(fā)送的圖像;跟蹤對象接受步驟,接受相機進行跟蹤的特定的跟蹤對象;移動量計算步驟,根據(jù)由接收步驟連續(xù)接收到的圖像,計算連續(xù)的圖像之間的跟蹤對象的移動量;移動量判定步驟,判定利用移動量計算步驟算出的移動量是否為第1移動量閾值以上;及尺寸命令發(fā)送步驟,在由移動量判定步驟判定移動量為第1移動量閾值以上的情況下,向相機發(fā)送將相機所發(fā)送圖像的尺寸從第1尺寸變更為小于第1尺寸的第2尺寸的命令。
優(yōu)選操作方法還具備:跟蹤處理步驟,其跟蹤處理步驟通過圖像的圖像處理而進行跟蹤對象的跟蹤,所述跟蹤處理步驟包括:評價值生成步驟,生成表示跟蹤的準確度的評價值;及評價值判定步驟,判定由評價值生成步驟生成的評價值是否為評價值閾值以上,尺寸命令發(fā)送步驟在發(fā)送將圖像的尺寸變更為第2尺寸的命令之后,在由移動量判定步驟判定移動量小于第1移動量閾值且由評價值判定步驟判定評價值為評價值閾值以上的情況下,發(fā)送將圖像的尺寸從第2尺寸變更為第1尺寸的命令。
優(yōu)選操作方法還具備:跟蹤處理步驟,其跟蹤處理步驟通過圖像處理而進行跟蹤對象的跟蹤,所述跟蹤處理步驟包括:評價值生成步驟,生成表示跟蹤的準確度的評價值;及評價值判定步驟,判定利用評價值生成步驟生成的評價值是否為評價值閾值以上,移動量判定步驟判定移動量是否小于比第1移動量閾值小的第2移動量閾值,在由移動量判定步驟判定移動量小于第2移動量閾值且由評價值判定步驟判定評價值為評價值閾值以上的情況下,尺寸命令發(fā)送步驟生成將圖像的尺寸變更為大于第1尺寸的第3尺寸的命令。
優(yōu)選評價值生成步驟根據(jù)塊匹配中模板圖像和與模板圖像對應區(qū)域的圖像的各像素差分的絕對值的總和而生成評價值。
優(yōu)選操作方法包括:幀率檢測步驟,從由接收步驟連續(xù)接收到的圖像中檢測所接收到的圖像的幀率;及幀率判定步驟,判定由幀率檢測步驟檢測到的幀率是否小于幀率閾值,在由幀率判定步驟判定幀率小于幀率閾值的情況下,尺寸命令發(fā)送步驟發(fā)送將圖像的尺寸變更為第2尺寸的命令。
優(yōu)選操作方法還包括通信速度獲取步驟,其根據(jù)幀率檢測步驟所檢測到的幀率而獲取與相機的通信速度。
優(yōu)選操作方法還包括通信信息發(fā)送步驟,其向相機發(fā)送與相機的通信狀態(tài)有關的信息,在由幀率判定步驟判定幀率小于幀率閾值的情況下,通信信息發(fā)送步驟發(fā)送有關通信錯誤的信息作為有關通信狀態(tài)的信息。
優(yōu)選幀率閾值根據(jù)相機所發(fā)送圖像的尺寸而設定。
優(yōu)選操作方法還包括:顯示步驟,顯示從相機連續(xù)發(fā)送的圖像;及輸入步驟,指定顯示步驟畫面上的輸入位置,跟蹤對象接受步驟接受利用輸入步驟指定的輸入位置的被攝體作為跟蹤對象。
本發(fā)明的另一方式的程序為使計算機執(zhí)行向具備自動跟蹤功能的相機發(fā)送自動跟蹤功能用控制信息的操作方法的程序,所述操作方法包括:接收步驟,接收從相機連續(xù)發(fā)送的圖像;跟蹤對象接受步驟,接受相機進行跟蹤的特定的跟蹤對象;移動量計算步驟,根據(jù)由接收步驟連續(xù)接收到的圖像,計算連續(xù)的圖像之間的跟蹤對象的移動量;移動量判定步驟,判定利用移動量計算步驟算出的移動量是否為第1移動量閾值以上;及尺寸命令發(fā)送步驟,在由移動量判定步驟判定移動量為第1移動量閾值以上的情況下,發(fā)送將相機所發(fā)送圖像的尺寸從第1尺寸變更為小于第1尺寸的第2尺寸的命令。
發(fā)明效果
根據(jù)本發(fā)明,在跟蹤對象的移動量為第1移動量閾值以上的情況下,發(fā)送將從相機所發(fā)送圖像的尺寸變更為較小尺寸的命令,因此可抑制操作裝置接收的幀率下降,即使為移動量較大的跟蹤對象,也能夠以高精度持續(xù)進行跟蹤。并且,根據(jù)本發(fā)明,在跟蹤對象的移動量小于第1移動量閾值的情況下,不會發(fā)送將相機所發(fā)送圖像的尺寸變更為較小尺寸的命令,因此圖像尺寸不會變小,即使為較小的跟蹤對象,也能夠以高精度持續(xù)進行跟蹤。
附圖說明
圖1是表示跟蹤系統(tǒng)的一例的外觀立體圖。
圖2是表示相機的功能結(jié)構的例子的框圖。
圖3是表示操作裝置的功能結(jié)構的例子的框圖。
圖4是表示第1實施方式中的操作裝置的動作的流程圖。
圖5是表示第2實施方式的操作裝置的動作的流程圖。
圖6是表示第3實施方式的操作裝置的動作的流程圖。
圖7是表示第4實施方式的操作裝置的功能結(jié)構的例子的框圖。
圖8是表示第4實施方式中的操作裝置的動作的流程圖。
具體實施方式
以下,根據(jù)附圖對本發(fā)明所涉及的攝像裝置及攝像方法的優(yōu)選實施方式進行說明。
以下,根據(jù)附圖對本發(fā)明的優(yōu)選實施方式進行說明。
圖1是表示本發(fā)明的一方式的跟蹤系統(tǒng)300的一例的外觀立體圖。跟蹤系統(tǒng)300具備操作裝置100(智能手機)和相機10(具備自動跟蹤功能的云臺攝像機)。
操作裝置100是用于操作相機10的裝置。另外,在圖1所示情況下,示出操作裝置100以無線的方式操作相機10的例子,但并不限定于此,操作裝置100和相機10也可以以有線的方式連接。
相機10主要具有裝置主體12、底座14、固定于底座14且將攝像部20保持成轉(zhuǎn)動自如的保持部16、覆蓋攝像部20的球形罩18。
底座14配設成以裝置主體12的垂直方向z的軸為中心旋轉(zhuǎn)自如,通過平搖驅(qū)動部34(圖2)以垂直方向z的軸為中心旋轉(zhuǎn)。
保持部16具有與水平方向x的軸設置于同軸上的齒輪16a,從俯仰驅(qū)動部36(圖2)經(jīng)由齒輪16a而傳遞驅(qū)動力,由此使攝像部20在上下方向上轉(zhuǎn)動(俯仰動作)。
球形罩18為防塵及防滴用罩,為了使攝像部20的光學性能不變,而與攝像部20的光軸方向l無關,優(yōu)選為將水平方向x的軸與垂直方向z的軸的交點作為曲率中心的恒定壁厚的球殼形狀。
并且,優(yōu)選在裝置主體12的背面設置未圖示的三腳架安裝部(三腳架螺孔等)。
相機10上設置有命令攝像開始的攝像開始按鈕19、電源開關(未圖示),但相機10具有相機側(cè)通信部50(圖2),主要通過與外部的操作裝置(本例中為智能手機)100的無線通信從操作裝置100能夠附加各種操作用命令輸入。并且,相機10通過無線通信從操作裝置100獲取對攝像圖像數(shù)據(jù)進行分析而得到的與跟蹤對象的位置有關的信息。另外,有關操作裝置100的說明按照圖3進行。并且,相機10可以具備進行有關通信狀態(tài)錯誤的警告顯示的警告顯示部(未圖示)。
圖2是表示相機10(云臺攝像機)的功能結(jié)構的例子的框圖。
相機10也能夠進行靜止圖像及動態(tài)圖像的拍攝,大致具備攝像部20、攝像方向調(diào)整部30、控制部40、信號處理部41、相機側(cè)顯示部61、操作部60、存儲器62、相機側(cè)通信部50及尺寸變更部65。
攝像部20具有成像透鏡22及成像元件(cmos)24等,并連續(xù)獲取攝像圖像數(shù)據(jù)。成像透鏡22由單焦透鏡或變焦透鏡構成,使被攝體像成像于成像元件24的成像面上。另外,成像透鏡22中所包含的聚焦透鏡、變倍透鏡(變焦透鏡的情況)及光圈23分別由透鏡驅(qū)動部26驅(qū)動。
成像元件24是按每一個像素紅(r)、綠(g)、藍(b)這3原色的原色濾色器以規(guī)定的圖案排列(拜耳排列、g條紋r/b完整方格、x-trans(注冊商標)排列、蜂窩狀排列等)的彩色成像元件,由cmos(complementarymetaloxidesemiconductor)型圖像傳感器構成。另外,并不限定于cmos型圖像傳感器,也可以是ccd(charge-coupleddevice)型圖像傳感器。
成像元件24由具有垂直驅(qū)動器及水平驅(qū)動器等的cmos驅(qū)動器28、以及定時信號發(fā)生器(tg:timinggenerator)29驅(qū)動,從成像元件24讀取與被攝體光的入射光量相應的像素信號(與蓄積在每一個像素中的信號電荷對應的數(shù)字信號)。
攝像方向調(diào)整部30具備云臺機構32、平搖驅(qū)動部34及俯仰驅(qū)動部36等,并調(diào)整攝像部20的攝像方向。另外,如圖1所示,云臺機構(攝像方向切換機構)32由使攝像部20相對于裝置主體12向水平方向(平搖方向)旋轉(zhuǎn)的平搖機構、以及向垂直方向(俯仰方向)轉(zhuǎn)動的俯仰機構32構成。云臺機構32具有檢測平搖方向的旋轉(zhuǎn)角度(平搖角)的基準位置的原位傳感器、檢測俯仰方向的傾斜角(俯仰角)的基準位置的原位傳感器。由云臺機構32切換攝像部20的攝像方向。
平搖驅(qū)動部34及俯仰驅(qū)動部36分別具有步進電機及電機驅(qū)動器,對云臺機構32輸出驅(qū)動力,驅(qū)動云臺機構32。
信號處理部41對從攝像部20被輸入的數(shù)字圖像信號(攝像圖像數(shù)據(jù))進行偏移處理、包括白平衡校正及靈敏度校正的增益/控制處理、伽馬校正處理、去馬賽克處理(顏色插值處理)、rgb/yc轉(zhuǎn)換處理等信號處理。其中,去馬賽克處理是從與單板式彩色成像元件的濾色器排列對應的馬賽克圖像按每一個像素算出所有顏色信息的處理,也稱為同步處理。例如是包括rgb三色濾色器的成像元件的情況下,從包括rgb的馬賽克圖像按每一個像素算出rgb所有顏色信息的處理。并且,rgb/yc轉(zhuǎn)換處理是由已進行去馬賽克處理的rgb圖像數(shù)據(jù)生成亮度數(shù)據(jù)y、色差數(shù)據(jù)cb、cr的處理。信號處理部41發(fā)送實施上述處理后的攝像圖像數(shù)據(jù)。
尺寸變更部65變更用于向操作裝置100發(fā)送圖像的尺寸。即,尺寸變更部65為了將作為即時預覽圖像而顯示于操作裝置100的圖像尺寸發(fā)送到操作裝置100而進行變更。例如尺寸變更部65在從信號處理部41中獲取的圖像為記錄用全hd(highdifinition)(1920×1080)的情況下,使全hd的圖像縮小為vga(videographicsarray)(640×480)的尺寸。并且,尺寸變更部65也可以根據(jù)來自操作裝置100的命令而變更從圖像發(fā)送部向操作裝置100發(fā)送圖像的尺寸,所述操作裝置100根據(jù)由圖像發(fā)送部發(fā)送圖像的接收狀況而發(fā)送圖像的尺寸的變更命令。例如在向操作裝置100發(fā)送了vga圖像的情況下,若從操作裝置100經(jīng)由相機側(cè)通信部50而接收縮小尺寸的命令,則尺寸變更部65將圖像的尺寸所縮小為qvga(quartervideographicsarray)(320×240)的尺寸。另外,關于圖像的尺寸,并不限定于上述全hd、vga、qvga,而可以使用各種圖像的尺寸。并且,尺寸變更部65也能夠以與縮小尺寸相同的方式增大尺寸。
控制部40主要具備攝像控制部42、透鏡控制部43、方向控制部44及動作控制部46。
攝像控制部42是命令經(jīng)由cmos驅(qū)動器28、tg29而排出蓄積在成像元件24的每一個像素的電容器中的電荷、或者讀取與蓄積在電容器中的電荷對應的信號等的部分,進行攝像控制。
透鏡控制部43是經(jīng)由透鏡驅(qū)動部26而控制成像透鏡22中所包含的聚焦透鏡、變倍透鏡及光圈23的部分,進行使聚焦透鏡移動到對焦位置的自動對焦(af:autofocus)控制等。將與af區(qū)域?qū)臄?shù)字信號的高頻成分的絕對值進行累計,并檢測該累計值(af評價值)成為最大的對焦位置,使聚焦透鏡移動到檢測到的對焦位置,由此進行af控制。
方向控制部44為控制攝像方向調(diào)整部30的部分。具體而言,在設定為自動跟蹤模式的情況下,方向控制部44以被攝體(跟蹤對象)成為視場角的中心的方式控制攝像方向調(diào)整部30。并且在未設定有自動跟蹤模式的情況下,方向控制部44按照從操作部60或操作裝置100發(fā)送過來的命令而控制攝像方向調(diào)整部30。
動作控制部46控制攝像控制部42、透鏡控制部43及方向控制部44的動作。例如動作控制部46控制方向控制部44以使云臺機構32工作或停止。并且,動作控制部46將跟蹤功能用控制信息發(fā)送到方向控制部44,以跟蹤跟蹤對象的方式經(jīng)由向控制部44而控制云臺機構32。并且,動作控制部46使被拍攝動態(tài)圖像的圖像停止記錄于存儲器62或者解除該停止。另外,動作控制部46使攝像部20中的動態(tài)圖像拍攝停止并設為省電模式,或者解除省電模式。
相機側(cè)通信部50是與圖1所示的外部的操作裝置100之間進行無線通信的部分,作為將圖像發(fā)送到操作裝置100的圖像發(fā)送部及接收來自操作裝置100的命令的命令接收部而發(fā)揮功能。例如相機側(cè)通信部50將記錄用圖像等發(fā)送到操作裝置100,進而,由攝像部20拍攝動態(tài)圖像,能夠?qū)⒂尚盘柼幚聿?1處理的圖像(攝像圖像數(shù)據(jù))發(fā)送到操作裝置100。由此,能夠?qū)討B(tài)圖像等記錄用圖像記錄于操作裝置100的內(nèi)部或外置記錄介質(zhì),或者將即時預覽圖像顯示于操作裝置100的顯示部(顯示輸入部120)。并且,例如相機側(cè)通信部50能夠接收從操作裝置100發(fā)送的圖像尺寸的變更命令。
操作部60包括設置于裝置主體12的攝像開始按鈕19(圖1)、電源開關等,能夠進行與來自操作裝置100的操作用命令輸入相同的操作用命令輸入。
相機側(cè)顯示部61作為顯示即時預覽圖像、重放圖像等的圖像顯示部而發(fā)揮功能,并且與操作部60協(xié)同作用,作為菜單畫面的顯示、用于設定及輸入各種參數(shù)的用戶界面部而發(fā)揮功能。
存儲器62包括構成臨時存儲靜止圖像或動態(tài)圖像的存儲區(qū)域、進行各種運算處理等的工作用區(qū)域的sdram(synchronousdynamicrandomaccessmemory)、或存儲拍攝用程序及控制中需要的各種數(shù)據(jù)等的rom(readonlymemory)等。通過攝像部20而被拍攝動態(tài)圖像的圖像記錄于存儲器62是由動作控制部46來控制的。
圖3是表示操作裝置100的功能結(jié)構的例子的框圖。
如圖3所示,作為操作裝置100的主要的構成要件,具備:終端側(cè)通信部(接收部)110、顯示輸入部120、通話部130、操作部140、相機部141、存儲部150、外部輸入輸出部160、gps(globalpositioningsystem)接收部170、動作傳感器部180、電源部190、移動量判定部193、移動量計算部191、跟蹤處理部197及主控制部101。并且,作為操作裝置100的主要功能,具備經(jīng)由基站裝置bs和移動通信網(wǎng)nw進行移動無線通信的無線通信功能。
終端側(cè)通信部110按照主控制部101的命令,對容納于移動通信網(wǎng)nw的基站裝置bs進行無線通信。使用該無線通信來進行語音數(shù)據(jù)、圖像數(shù)據(jù)等各種文件數(shù)據(jù)、電子郵件數(shù)據(jù)等的收發(fā)以及web數(shù)據(jù)或流數(shù)據(jù)等的接收。本例中,操作裝置100的終端側(cè)通信部110對相機10發(fā)送各種操作用命令輸入,或者作為從相機10接收連續(xù)發(fā)送的圖像(即時預覽圖像)、記錄用圖像等作為接收部而發(fā)揮功能。
顯示輸入部120通過主控制部101的控制而顯示圖像(靜止圖像及動態(tài)圖像)和文字信息等來視覺性地向用戶傳遞信息,并且檢測用戶對所顯示的信息的操作。顯示輸入部120具備顯示面板121和操作面板(觸摸面板)122。在用戶欣賞3d圖像的情況下,優(yōu)選顯示面板121為3d顯示面板。并且,顯示輸入部120也作為接受相機10進行跟蹤的特定的跟蹤對象的跟蹤對象接受部而發(fā)揮功能。
顯示面板121將lcd(liquidcrystaldisplay)、oeld(organicelectro-luminescencedisplay)等用作顯示設備,作為顯示從相機10連續(xù)發(fā)送的圖像的顯示部而發(fā)揮功能。
操作面板(輸入部)122是以能夠視覺辨認顯示于顯示面板121的顯示面上的圖像的方式載置,并檢測通過用戶的手指或尖筆來操作的一個或多個坐標的設備。若通過用戶的手指或尖筆來操作該設備,則將因操作而產(chǎn)生的檢測信號輸出至主控制部101。接著,主控制部101根據(jù)接收到的檢測信號來檢測顯示面板121上的操作位置(坐標),指定顯示部的畫面上的輸入位置。
如圖1所示,操作裝置100的顯示面板121和操作面板122成為一體而構成顯示輸入部120,配置成操作面板122完全覆蓋顯示面板121。采用該配置的情況下,操作面板122可以對顯示面板121以外的區(qū)域也具備檢測用戶操作的功能。換言之,操作面板122可以具備針對與顯示面板121重疊的重疊部分的檢測區(qū)域(以下,稱為顯示區(qū)域)、及針對除此以外的與顯示面板121不重疊的外緣部分的檢測區(qū)域(以下,稱為非顯示區(qū)域)。
另外,可以使顯示區(qū)域的大小和顯示面板121的大小完全一致,但無需一定要使兩者一致。并且,操作面板122可以具備外緣部分和除此以外的內(nèi)側(cè)部分這兩個感應區(qū)域。而且,外緣部分的寬度按照框體102的大小等而可以適當?shù)卦O計。此外,作為在操作面板122中采用的位置檢測方式,可以舉出矩陣開關方式、電阻膜方式、表面彈性波方式、紅外線方式、電磁感應方式、靜電電容方式等,還可以采用任意方式。
通話部130具備揚聲器131和麥克風132,所述通話部將通過麥克風132輸入的用戶的語音轉(zhuǎn)換成能夠在主控制部101中處理的語音數(shù)據(jù)并輸出至主控制部101,或者對通過終端側(cè)通信部110或外部輸入輸出部160而接收到的語音數(shù)據(jù)進行解碼并從揚聲器131輸出。并且,如圖1所示,例如,能夠?qū)P聲器131及麥克風132搭載于與設置有顯示輸入部120的面相同的面。
操作部140為使用鍵開關等的硬件鍵,接受來自用戶的命令。例如,操作部140搭載于操作裝置100的框體102的顯示輸入部120的下部、下側(cè)面,是若手指等按下則開啟,若手指離開則通過彈簧等的復原力而成為關閉狀態(tài)的按鈕式開關。
存儲部150存儲主控制部101的控制程序和控制數(shù)據(jù)、與通信對方的名稱、電話號碼等建立了對應關聯(lián)的地址數(shù)據(jù)、收發(fā)的電子郵件的數(shù)據(jù)、通過web瀏覽下載的web數(shù)據(jù)以及已下載的內(nèi)容數(shù)據(jù),并且臨時存儲流數(shù)據(jù)等。并且,存儲部150由智能手機內(nèi)置的內(nèi)部存儲部151和具有裝卸自如的外部存儲器插槽的外部存儲部152構成。另外,構成存儲部150的各內(nèi)部存儲部151和外部存儲部152使用閃存類型(flashmemorytype)、硬盤類型(harddisktype)、微型多介質(zhì)卡類型(multimediacardmicrotype)、卡類型的存儲器(例如microsd(注冊商標)存儲器等)、ram(randomaccessmemory)、rom(readonlymemory)等存放介質(zhì)來實現(xiàn)。
外部輸入輸出部160起到與連結(jié)于操作裝置100的所有外部設備的接口的作用,用于通過通信等(例如通用串行總線(usb(universalsirialbus)等)或網(wǎng)絡(例如因特網(wǎng)、無線lan(localareanetwork)、藍牙(bluetooth)(注冊商標)、rfid(radiofrequencyidentification)、紅外線通信(infrareddataassociation:irda)(注冊商標)、uwb(ultrawideband)(注冊商標)、紫蜂(zigbee)(注冊商標)等)直接或間接地與其他外部設備連接。
作為與操作裝置100連結(jié)的外部設備,例如有:有/無線頭戴式耳機、有/無線外部充電器、有/無線數(shù)據(jù)端口、經(jīng)由卡插槽連接的存儲卡(memorycard)或sim(subscriberidentitymodulecard)/uim(useridentitymodulecard)卡、經(jīng)由音頻視頻i/o(input/output)端子連接的外部音頻視頻設備、無線連接的外部音頻視頻設備、有/無線連接的智能手機、有/無線連接的個人計算機、有/無線連接的pda(personaldigitalassistant)及耳機等。外部輸入輸出部160能夠?qū)倪@種外部設備接收到傳送的數(shù)據(jù)傳遞至操作裝置100內(nèi)部的各構成要件,或者將操作裝置100內(nèi)部的數(shù)據(jù)傳送至外部設備。
gps接收部170按照主控制部101的命令,接收從gps衛(wèi)星st1~stn發(fā)送的gps信號,并執(zhí)行基于接收到的多個gps信號的定位運算處理,檢測包括該操作裝置100的緯度、經(jīng)度、高度的位置。gps接收部170在能夠從終端側(cè)通信部110或外部輸入輸出部160(例如,無線lan)獲取位置信息時,還能夠使用該位置信息來檢測位置。
動作傳感器部180例如具備3軸加速度傳感器等,按照主控制部101的命令而檢測操作裝置100的物理動作。通過檢測操作裝置100的物理動作來檢測操作裝置100的運動方向、加速度。該檢測結(jié)果被輸出至主控制部101。
電源部190按照主控制部101的命令,向操作裝置100的各部供給電池(未圖示)中蓄積的電力。
主控制部101具備微處理器,按照存儲部150所存儲的控制程序、控制數(shù)據(jù)進行動作,統(tǒng)一控制操作裝置100的各部。并且,主控制部101為了通過終端側(cè)通信部110進行語音通信、數(shù)據(jù)通信而具備控制通信系統(tǒng)的各部的移動通信控制功能和應用處理功能。
應用處理功能通過主控制部101按照存儲部150所存儲的應用軟件進行動作來實現(xiàn)。作為應用處理功能,例如有控制外部輸入輸出部160而與對象設備進行數(shù)據(jù)通信的紅外線通信功能、進行電子郵件的收發(fā)的電子郵件功能、瀏覽web頁的web瀏覽功能等。
并且,主控制部101具備根據(jù)接收數(shù)據(jù)、已下載的流數(shù)據(jù)等圖像數(shù)據(jù)(靜止圖像和動態(tài)圖像的數(shù)據(jù))將影像顯示于顯示輸入部120等的圖像處理功能。圖像處理功能是指,主控制部101將上述圖像數(shù)據(jù)進行解碼,并對該解碼結(jié)果進行圖像處理,從而將圖像顯示于顯示輸入部120的功能。
另外,主控制部101執(zhí)行對顯示面板121的顯示控制和對通過操作部140、操作面板122進行的用戶操作進行檢測的操作檢測控制。
通過執(zhí)行顯示控制,主控制部101顯示用于啟動應用軟件的圖標或滾動條等軟件鍵,或者顯示用于創(chuàng)建電子郵件的窗口。另外,滾動條是指針對無法完全收進顯示面板121的顯示區(qū)域的較大的圖像等,用于接受使圖像的顯示部分移動的命令的軟件鍵。
而且,主控制部101執(zhí)行對通過操作部140、操作面板122進行的用戶操作進行檢測的操作檢測控制。
主控制部101通過執(zhí)行操作檢測控制而檢測通過操作部140進行的用戶操作,或者通過操作面板122來接受對上述圖標的操作或?qū)ι鲜龃翱诘妮斎霗诘淖址妮斎?,或者接受通過滾動條進行的顯示圖像的滾動請求。
而且,通過執(zhí)行操作檢測控制,主控制部101判定對操作面板122的操作位置是與顯示面板121重疊的重疊部分(顯示區(qū)域),還是除此以外的與顯示面板121不重疊的外緣部分(非顯示區(qū)域),并具備控制操作面板122的感應區(qū)域或軟件鍵的顯示位置的觸摸面板控制功能。
并且,主控制部101還能夠檢測對操作面板122的手勢操作,并按照檢測出的手勢操作來執(zhí)行預先設定的功能。手勢操作并非是以往的簡單的觸摸操作,而是表示利用手指等描繪軌跡、或者同時指定多個位置、或者組合這些對多個位置中的至少一個描繪軌跡的操作。
相機部141是使用cmos(complementarymetaloxidesemiconductor)或ccd(charge-coupleddevice)等成像元件來進行電子攝像(攝像)的數(shù)碼相機。
并且,相機部141通過主控制部101的控制能夠?qū)⑼ㄟ^拍攝而得到的圖像數(shù)據(jù)轉(zhuǎn)換成例如jpeg(jointphotographiccodingexpertsgroup)等壓縮的圖像數(shù)據(jù),并記錄于存儲部150,或者通過外部輸入輸出部160及終端側(cè)通信部110而進行輸出。
在圖1所示的操作裝置100中,相機部141搭載于與顯示輸入部120相同的面,但相機部141的搭載位置并不限定于此,也可以搭載于顯示輸入部120的背面、或者搭載有多個相機部141。另外,在搭載有多個相機部141的情況下,還能夠切換用于攝像的相機部141來單獨進行拍攝、或者同時使用多個相機部141來進行拍攝。
并且,相機部141能夠利用于操作裝置100的各種功能。例如,能夠在顯示面板121上顯示利用相機部141獲取的圖像、或者作為操作面板122的操作輸入之一而利用相機部141的圖像。并且,在gps接收部170檢測位置時,還能夠參照來自相機部141的圖像來檢測位置。而且,還能夠參照來自相機部141的圖像,不使用3軸加速度傳感器或者與3軸加速度傳感器同時使用,來判斷操作裝置100的相機部141的光軸方向、判斷當前的使用環(huán)境。當然,還能夠在應用軟件內(nèi)利用來自相機部141的圖像。
在本例中,經(jīng)由網(wǎng)絡等下載用于操作相機10的應用軟件并存儲于存儲部150,通過操作裝置100的應用處理功能,使主控制部101按照所下載的應用軟件進行動作,由此使通用的操作裝置100作為用于操作相機10的用戶界面部而發(fā)揮功能。
移動量計算部191根據(jù)由終端側(cè)通信部110連續(xù)接收到的圖像來計算連續(xù)的圖像之間的跟蹤對象的移動量。移動量計算部191能夠以公知的各種方法計算跟蹤對象的移動量。例如移動量計算部191獲取第1時間上的圖像中跟蹤對象的坐標和第2時間上的圖像中跟蹤對象的坐標,通過計算兩個坐標的距離而能夠算出移動量。
移動量判定部193判定利用移動量計算部191算出的移動量是否為第1移動量閾值以上。即,移動量判定部193通過比較利用移動量計算部191算出的移動量和第1移動量閾值而進行判定,判定跟蹤對象的移動量是否較大(動作較快)或者移動量是否較小(動作較慢)。另外,第1移動量閾值是任意設定的閾值,且無特別的限定。例如第1移動量閾值是考慮利用跟蹤處理部197進行的跟蹤處理(跟蹤運算)的性能和幀率而決定的。
在由移動量判定部193判定移動量為第1移動量閾值以上的情況下,尺寸命令發(fā)送部195向相機10發(fā)送將相機10發(fā)送的圖像的尺寸從第1尺寸變更為小于第1尺寸的第2尺寸的命令。即,在由移動量判定部193判定移動量為第1閾值以上的情況下,跟蹤對象較快,因此尺寸命令發(fā)送部195發(fā)送縮小相機10發(fā)送的圖像的尺寸的命令,以維持操作裝置100接收的幀率(防止下降)。由此,即使在相機跟蹤動作較快的跟蹤對象的情況下,也能夠以高精度持續(xù)進行跟蹤。并且,在跟蹤對象的移動量小于第1移動量閾值的情況下,尺寸命令發(fā)送部195不發(fā)送將從相機10發(fā)送的圖像的尺寸變更為較小尺寸的命令。由此,圖像的尺寸不會變小,即使是較小的跟蹤對象,也能夠以高精度持續(xù)進行跟蹤。
跟蹤處理部197進行通過對從相機10連續(xù)發(fā)送的圖像進行圖像處理而被確定的跟蹤對象的跟蹤。例如跟蹤處理部197利用塊匹配處理、圖案匹配處理、或臉部檢測處理的方法進行跟蹤對象的檢測,并獲取跟蹤對象的坐標。另外,關于塊匹配處理、圖案匹配處理或臉部檢測處理,因眾所周知而省略說明。跟蹤處理部197經(jīng)由終端側(cè)通信部110向相機10發(fā)送所獲取的跟蹤對象的坐標作為用于控制云臺機構32的信息(跟蹤功能用控制信息)。另外,跟蹤處理部197能夠通過自動或手動的方式進行跟蹤,在自動跟蹤的情況下,跟蹤處理部197持續(xù)檢測臨時被確定的跟蹤對象,在手動跟蹤的情況下,跟蹤處理部197依次檢測被確定的跟蹤對象。
跟蹤處理部197具有評價值生成部199及評價值判定部201。評價值生成部199生成表示跟蹤的準確度的評價值。例如評價值生成部199根據(jù)塊匹配中模板圖像與對應于模板圖像的區(qū)域的圖像之間的各像素差分的絕對值的總和而生成評價值。在此,塊匹配中模板圖像與對應于模板圖像的區(qū)域的圖像之間的各像素差分的絕對值的總和通常被稱作ssd(sumofsquareddifferences)或sad(sumofabsolutedifferences)。另外,關于ssd及sad的具體的計算方法,可以使用公知的方法。
評價值判定部201判定利用評價值生成部199生成的評價值是否為評價值閾值以上。即,評價值判定部201通過比較利用評價值生成部199算出的評價值和評價值閾值而進行判定,判定是否以高精度進行跟蹤。例如在評價值為評價值閾值以上的情況下,評價值判定部201判定并沒有以高精度進行跟蹤,在評價值小于評價值閾值的情況下,評價值判定部201判定以高精度進行跟蹤。在此,評價值閾值也可以考慮所希望的跟蹤性能而決定。
(第1實施方式)
圖4是表示第1實施方式中的操作裝置100的動作的流程圖。
首先,操作裝置100由終端側(cè)通信部110接收從相機10的相機側(cè)通信部50連續(xù)發(fā)送過來的圖像(步驟s10)。之后,由跟蹤對象接受部接受特定的跟蹤對象(步驟s11)。而且,計算由移動量計算部191接受的跟蹤對象在連續(xù)的圖像之間的移動量(步驟s12),由移動量判定部193判定所算出的移動量是否為第1移動量閾值以上(步驟s13)。
在由移動量判定部193判定移動量為第1閾值以上的情況下,由尺寸命令發(fā)送部195向相機10發(fā)送將圖像的尺寸從第1尺寸變更為小于第1尺寸的第2尺寸的命令(步驟s14)。并且,在由移動量判定部193判定移動量小于第1閾值的情況下,不發(fā)送來自尺寸命令發(fā)送部195的命令(步驟s15)。
如以上說明,本實施方式在跟蹤對象的移動量為第1移動量閾值以上的情況下,發(fā)送將從相機10發(fā)送的圖像的尺寸變更為較小尺寸的命令,因此可抑制操作裝置100接收的幀率下降,即使為移動量較大的跟蹤對象,也能夠以高精度持續(xù)進行跟蹤。并且,本實施方式在跟蹤對象的移動量小于第1移動量閾值的情況下,不發(fā)送將從相機10發(fā)送的圖像的尺寸變更為較小尺寸的命令,因此圖像的尺寸不會變小,即使為較小的跟蹤對象,也能夠以高精度持續(xù)進行跟蹤。
并且,上述各結(jié)構及功能通過適當?shù)亟M合任意的硬件、軟件或者兩者的組合而可以實現(xiàn)。例如可以將本發(fā)明應用于使計算機執(zhí)行上述處理步驟(處理順序)的程序、記錄有這種程序的計算機可讀取的記錄介質(zhì)(非臨時性有形介質(zhì))或者可以安裝這種程序的計算機。
(第2實施方式)
接著,作為第2實施方式,關于尺寸命令發(fā)送部195發(fā)送從第2尺寸向第1尺寸的命令的情況進行說明。圖5是表示第2實施方式的操作裝置100的動作的流程圖。
首先,由終端側(cè)通信部110接收從相機側(cè)通信部50連續(xù)發(fā)送過來的圖像(步驟s20),并由跟蹤對象接受部接受特定的跟蹤對象(步驟s21),由移動量計算部191計算所接受的跟蹤對象在連續(xù)的圖像之間的移動量(步驟s22),由移動量判定部193判定所算出的移動量是否為第1移動量閾值以上(步驟s23)。
在由移動量判定部193判定移動量為第1閾值以上的情況下,由尺寸命令發(fā)送部195向相機10發(fā)送將圖像的尺寸從第1尺寸變更為小于第1尺寸的第2尺寸的命令(步驟s24)。并且,在由移動量判定部193判定移動量小于第1閾值的情況下,不發(fā)送來自尺寸命令發(fā)送部195的命令(步驟s25)。
在由尺寸命令發(fā)送部195發(fā)送從第1尺寸向第2尺寸縮小尺寸的命令之后,由移動量計算部191計算跟蹤對象的移動量。而且,由移動量判定部193判定所算出的移動量(步驟s26),由評價值判定部201判定利用跟蹤處理部197進行跟蹤的評價值是否為評價值閾值以上(步驟s27)。之后,在判斷評價值為評價值閾值以上的情況下,尺寸命令發(fā)送部195命令從第2尺寸變更為大于第2尺寸的第1尺寸(步驟s28)。
如以上說明,本實施方式在判定被攝體的移動量小于第2移動量閾值且跟蹤的評價值為評價值閾值以上的情況下,發(fā)送圖像的尺寸變更為原來的較大尺寸的命令。由此,在本實施方式中,操作裝置100能夠通過較大尺寸的圖像而進行跟蹤處理,因此能夠以高精度進行跟蹤。
(第3實施方式)
接著,作為第3實施方式,關于尺寸命令發(fā)送部195發(fā)送從第1尺寸向第3尺寸的命令的情況進行說明。圖6是表示第3實施方式的操作裝置100的動作的流程圖。
首先,由終端側(cè)通信部110接收從相機側(cè)通信部50連續(xù)發(fā)送過來的圖像(步驟s30),由跟蹤對象接受部接受特定的跟蹤對象(步驟s31),由移動量計算部191計算所接受的跟蹤對象在連續(xù)的圖像之間的移動量(步驟s32),由移動量判定部193判定所算出的移動量是否為第1移動量閾值以上(步驟s33)。
在由移動量判定部193判定移動量為第1閾值以上的情況下,由尺寸命令發(fā)送部195向相機10發(fā)送將圖像的尺寸從第1尺寸變更為小于第1尺寸的第2尺寸的命令(步驟s34)。并且,在由移動量判定部193判定移動量小于第1閾值的情況下,不發(fā)送來自尺寸命令發(fā)送部195的命令(步驟s35)。
在從尺寸命令發(fā)送部195未發(fā)送圖像尺寸變更的命令之后,由移動量判定部193判定跟蹤對象的移動量是否小于第2移動量閾值(步驟s36)。之后,在跟蹤對象的移動量小于第2移動量閾值的情況下,由評價值判定部201判定評價值是否為評價值閾值以上(步驟s37)。而且,在評價值為評價值閾值以上的情況下,發(fā)送將圖像的尺寸從第1尺寸變更為大于第1尺寸的第3尺寸的命令(步驟s38)。
如以上說明,本實施方式在判定被攝體的移動量小于第2移動量閾值且跟蹤的評價值為評價值閾值以上的情況下,發(fā)送圖像的尺寸變更為較大尺寸的命令。由此,在本實施方式中,操作裝置100通過較大尺寸的圖像而能夠進行跟蹤處理,因此能夠以高精度進行跟蹤。
(第4實施方式)
接著,關于第4實施方式進行說明。
圖7是表示第4實施方式的操作裝置100的功能結(jié)構的例子的框圖。另外,對于在圖3中已進行說明的功能塊標注相同的符號并省略說明。
與圖3所示的操作裝置100相比,第4實施方式的操作裝置100中被追加幀率檢測部203、幀率判定部205、通信信息發(fā)送部207及通信速度獲取部209。
幀率檢測部203檢測接收部連續(xù)接收的圖像的幀率。即,幀率檢測部203檢測從相機10的相機側(cè)通信部50連續(xù)發(fā)送過來的圖像的終端側(cè)通信部110所接收的幀率。
幀率判定部205判定由幀率檢測部203檢測到的幀率是否小于幀率閾值。在幀率小于幀率閾值的情況下,是相機10的相機側(cè)通信部50與操作裝置100的終端側(cè)通信部110之間的通信不良的狀態(tài),在幀率為幀率閾值以上的情況下,是相機10的相機側(cè)通信部50與操作裝置100的終端側(cè)通信部110之間的通信良好的狀態(tài)。另外,幀率閾值也可以根據(jù)相機10發(fā)送的圖像的尺寸而設定。由此,由于幀率閾值根據(jù)圖像的尺寸而設定,因此能夠以更高精度進行幀率的判定。
通信信息發(fā)送部207向相機10發(fā)送與相機10的通信狀態(tài)有關的信息。即,在由幀率判定部205判定幀率小于幀率閾值的情況下,通信信息發(fā)送部207發(fā)送有關通信錯誤的信息作為有關通信狀態(tài)的信息。由此,在幀率小于幀率閾值的情況下,有關通信錯誤的信息被發(fā)送到相機10,因此相機10能夠掌握操作裝置100中的通信狀態(tài)。
通信速度獲取部209根據(jù)幀率檢測部203檢測到的幀率而獲取與相機10的通信速度。具體而言,通信速度獲取部209根據(jù)幀率檢測部203檢測到的幀率的數(shù)值而獲取相機10與操作裝置100的通信速度。例如通信速度獲取部209具有幀率與通信速度對應的表格數(shù)據(jù),根據(jù)該表格數(shù)據(jù)而獲取通信速度。
圖8是表示第4實施方式中的操作裝置100的動作的流程圖。
首先,由終端側(cè)通信部110接收從相機側(cè)通信部50連續(xù)發(fā)送過來的圖像(步驟s40),由跟蹤對象接受部接受特定的跟蹤對象(步驟s41),由移動量計算部191計算所接受的跟蹤對象在連續(xù)的圖像之間的移動量(步驟s42),由移動量判定部193判定所算出的移動量是否為第1移動量閾值以上(步驟s43)。
而且,在判定移動量為第1閾值以上的情況下,操作裝置100向相機10發(fā)送將圖像的尺寸從第1尺寸變更為小于第1尺寸的第2尺寸的命令(步驟s47)。在由移動量判定部193判定移動量小于第1閾值的情況下,利用幀率檢測部203檢測操作裝置100經(jīng)由終端側(cè)通信部110而接收的幀率(步驟s44)。之后,由幀率判定部205判定所檢測到的幀率是否小于幀率閾值(步驟s45)。在所檢測到的幀率小于幀率閾值的情況下,由尺寸命令發(fā)送部195發(fā)送從第1尺寸變更為第2尺寸的命令。另一方面,在所檢測到的幀率為幀率閾值以上的情況下,尺寸命令發(fā)送部195不發(fā)送尺寸變更的命令(步驟s46)。
如以上說明,本實施方式在幀率小于幀率閾值的情況下發(fā)送將圖像的尺寸變更為第2尺寸的命令,因此能夠提高下降的幀率。由此,在本方式中,即使為移動量較多的跟蹤對象,也能夠以高精度進行跟蹤。
以上,關于本發(fā)明的例子進行了說明,但本發(fā)明并不限定于上述實施方式,當然,在不脫離本發(fā)明的宗旨的范圍內(nèi)可以進行各種變更。
符號說明
10-相機,12-裝置主體,14-底座,16-保持部,16a-齒輪,18-球形罩,19-攝像開始按鈕,20-攝像部,22-成像透鏡,23-光圈,24-成像元件,26-透鏡驅(qū)動部,28-cmos驅(qū)動器,30-攝像方向調(diào)整部,32-云臺機構,34-平搖驅(qū)動部,36-俯仰驅(qū)動部,40-控制部,41-信號處理部,42-攝像控制部,43-透鏡控制部,44-方向控制部,46-動作控制部,50-相機側(cè)通信部,60-操作部,61-相機側(cè)顯示部,62-存儲器,65-尺寸變更部,100-操作裝置,101-主控制部,102-框體,110-終端側(cè)通信部,120-顯示輸入部,121-顯示面板,122-操作面板,130-通話部,131-揚聲器,132-麥克風,140-操作部,141-相機部,150-存儲部,151-內(nèi)部存儲部,152-外部存儲部,160-外部輸入輸出部,170-gps接收部,180-動作傳感器部,190-電源部,191-移動量計算部,193-移動量判定部,195-尺寸命令發(fā)送部,197-跟蹤處理部,199-評價值生成部,201-評價值判定部,300-跟蹤系統(tǒng)。