用于處理圖像數(shù)據(jù)流的裝置、方法和系統(tǒng)的制作方法
【專利摘要】本發(fā)明公開了用于處理圖像數(shù)據(jù)流的裝置、方法和系統(tǒng)。實(shí)現(xiàn)方式涉及一種用于處理圖像數(shù)據(jù)流的裝置。所述裝置可以包括:第一處理單元和第二處理單元,用于接收所述圖像數(shù)據(jù)流。所述第一處理單元可以被布置成用于提供第一數(shù)據(jù)流,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。所述第二處理單元可以被布置成用于提供第二數(shù)據(jù)流,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。
【專利說(shuō)明】用于處理圖像數(shù)據(jù)流的裝置、方法和系統(tǒng)
【技術(shù)領(lǐng)域】
[0001]實(shí)施例涉及圖像數(shù)據(jù)的(預(yù))處理的改進(jìn)。
【背景技術(shù)】
[0002]為了增強(qiáng)道路安全性并且減少事故,Euro-NCAP (歐洲新車安全評(píng)鑒協(xié)會(huì))定義了詳細(xì)的先進(jìn)駕駛員輔助系統(tǒng)(ADAS)特征和測(cè)試情形以用于在2016年以后生產(chǎn)的車輛中,以便獲得五星評(píng)級(jí)。
[0003]使用了不同類型(例如基于照相機(jī)或基于雷達(dá))的系統(tǒng),這些系統(tǒng)意圖用來(lái)檢測(cè)風(fēng)險(xiǎn)情況,通知駕駛員并且假如駕駛員未及時(shí)介入則自主地發(fā)起動(dòng)作(例如使車輛慢下來(lái)以免碰撞)。
[0004]基于照相機(jī)的系統(tǒng)特別地使得能夠進(jìn)行前向碰撞報(bào)警、車道偏離和遠(yuǎn)光燈輔助。
[0005]為了甚至在變化的并且不同的光條件下提供想要的程度的安全性,可以使用高動(dòng)態(tài)傳感器,這進(jìn)而造成對(duì)于存儲(chǔ)器和計(jì)算性能的增加的要求。另一方面,意圖使基于照相機(jī)的系統(tǒng)變得更廉價(jià),從而更多的車輛可以裝備有這樣的安全性增強(qiáng)的特征。
【發(fā)明內(nèi)容】
[0006]本發(fā)明的一個(gè)方面涉及一種用于處理圖像數(shù)據(jù)流的裝置,包括:第一處理單元和第二處理單元,用于接收所述圖像數(shù)據(jù)流;其中,所述第一處理單元被布置成用于提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;其中,所述第二處理單元被布置成用于提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。
[0007]本發(fā)明的一個(gè)方面涉及一種裝置,包括:第一處理單元,被耦接到輸入圖像數(shù)據(jù)流,其中,所述第一處理單元被布置成用于提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述輸入圖像數(shù)據(jù)流相比具有減少的帶寬;第二處理單元,被耦接到所述輸入圖像數(shù)據(jù)流,其中,所述第二處理單元被布置成用于提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;存儲(chǔ)器,用于至少部分地存儲(chǔ)所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流。
[0008]本發(fā)明的一個(gè)方面涉及一種用于處理圖像數(shù)據(jù)流的方法,包括:提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;其中,由第一處理單元提供所述第一數(shù)據(jù)流,并且由第二處理單元提供所述第二數(shù)據(jù)流。
[0009]本發(fā)明的一個(gè)方面涉及一種用于處理圖像數(shù)據(jù)流的系統(tǒng),包括:用于提供第一數(shù)據(jù)流的部件,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;用于提供第二數(shù)據(jù)流的部件,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。
【專利附圖】
【附圖說(shuō)明】
[0010]參照附圖示出并且圖解實(shí)施例。附圖用于圖解基本原理,從而僅圖解對(duì)于理解基本原理所必須的各方面。附圖并非成比例。在附圖中,相同標(biāo)號(hào)指明同樣的特征。
[0011]圖1示出如其可以在ADAS應(yīng)用中利用那樣的示例性示意圖。
[0012]圖2示出圖像處理架構(gòu)的示例性示意圖。
[0013]圖3示出包括若干被并行布置的像素路徑(pixelpath)的示例性架構(gòu)。
[0014]圖4示出包括圖3的像素路徑的示例性架構(gòu),其中,數(shù)據(jù)流存儲(chǔ)在特別被實(shí)現(xiàn)為嵌入式RAM的存儲(chǔ)器中。
【具體實(shí)施方式】
[0015]所提出的方法特別提供一種對(duì)于存儲(chǔ)器具有低要求的圖像預(yù)處理器架構(gòu)。該解決方案可以特別利用在先進(jìn)駕駛員輔助系統(tǒng)(ADAS)中。
[0016]用于ADAS的圖像處理可以使用若干處理路徑,其中,所述處理路徑中的至少兩條可以被彼此并行地布置。圖像存儲(chǔ)器可以包括隨機(jī)存取存儲(chǔ)器(RAM),其被看作對(duì)于ADAS裝置的成本而言的關(guān)鍵因素。
[0017]第一實(shí)施例涉及一種用于處理圖像數(shù)據(jù)流的裝置,包括第一處理單元和第二處理單元以用于接收?qǐng)D像數(shù)據(jù)流;其中,所述第一處理單元被布置成用于提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;以及其中所述第二處理單元被布置成用于提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。
[0018]圖像數(shù)據(jù)流可以是圖像記錄裝置(例如照相機(jī))所提供的任何數(shù)據(jù)。所述圖像數(shù)據(jù)流包括以特定速率拍攝的圖像或圖片。圖像數(shù)據(jù)流的數(shù)據(jù)速率取決于所拍攝的圖像的大小以及每段時(shí)間間隔記錄的圖像量(即多久記錄一次圖像)??梢杂芍辽僖粋€(gè)照相機(jī)提供圖像數(shù)據(jù)流。所述圖像數(shù)據(jù)流可以已經(jīng)被照相機(jī)接口預(yù)處理,其中,這樣的預(yù)處理可以特別地包括解壓縮。
[0019]所述第一處理單元和所述第二處理單元可以是物理上分離的處理實(shí)體,其可以特別地被部署在單個(gè)芯片或若干芯片上。每個(gè)處理單元構(gòu)建還被提及為像素路徑的處理路徑。可以存在兩個(gè)或更多個(gè)處理所述圖像數(shù)據(jù)流的處理單元。
[0020]所述第一處理單元的壓縮率和所述第二處理單元的壓縮率可以被調(diào)整或經(jīng)受配置。
[0021]第二實(shí)施例涉及一種裝置,包括:第一處理單元,被耦接到輸入圖像數(shù)據(jù)流,其中,所述第一處理單元被布置用于提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述輸入圖像數(shù)據(jù)流相比具有減少的帶寬;所述裝置包括:第二處理單元,被耦接到所述輸入圖像數(shù)據(jù)流,其中,所述第二處理單元被布置成用于提供第二數(shù)據(jù)流,其中所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;并且所述裝置包括存儲(chǔ)器,用于至少部分地存儲(chǔ)所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流。
[0022]第三實(shí)施例涉及一種用于處理圖像數(shù)據(jù)流的方法,包括以下步驟:
一提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬; 一提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬; 一其中,由第一處理單元提供所述第一數(shù)據(jù)流,并且由第二處理單元提供所述第二數(shù)據(jù)流。
[0023]第四實(shí)施例針對(duì)一種用于處理圖像數(shù)據(jù)流的系統(tǒng),包括:用于提供第一數(shù)據(jù)流的部件,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;用于提供第二數(shù)據(jù)流的部件,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。
[0024]圖1示出如其可以在ADAS應(yīng)用中利用那樣的示例性示意圖。具有共計(jì)120兆字節(jié)/秒的數(shù)據(jù)速率的視頻流101 (還被提及為圖像流或(圖像)數(shù)據(jù)流)被饋送到照相機(jī)接口 102,照相機(jī)接口 102可以對(duì)該視頻流101進(jìn)行解壓縮,并且將解壓縮的流饋送到低精度圖像獲取單元103和全精度圖像獲取單元104。
[0025]低精度圖像獲取單元103處理輸入流,并且以減少的分辨率來(lái)提供包括全場(chǎng)景(即100%的圖像)的流109。流109存儲(chǔ)在存儲(chǔ)器105中。下一級(jí)可以按總計(jì)例如達(dá)到15兆字節(jié)/秒的數(shù)據(jù)速率經(jīng)由流107來(lái)利用存儲(chǔ)器105中所存儲(chǔ)的該流109的數(shù)據(jù)。
[0026]全精度圖像獲取單元104處理輸入流,并且以其全分辨率來(lái)提供包括減少的場(chǎng)景(例如流101中所包含的圖像的場(chǎng)景的30%或50%)的流110。流110存儲(chǔ)在存儲(chǔ)器106中。下一級(jí)可以按總計(jì)例如達(dá)到60兆字節(jié)/秒的數(shù)據(jù)速率經(jīng)由流108來(lái)利用存儲(chǔ)器106中所存儲(chǔ)的該流110的數(shù)據(jù)。
[0027]因此,圖1所示的示例可以用在包括兩個(gè)獲取路徑的單個(gè)芯片ADAS裝置中:一個(gè)低分辨率的路徑覆蓋輸入流101的整個(gè)圖像或場(chǎng)景,而另一個(gè)高分辨率的路徑覆蓋輸入流101的整個(gè)圖像或場(chǎng)景的一部分。
[0028]應(yīng)注意單個(gè)芯片可以是單個(gè)襯底、管芯、晶片或硅。
[0029]在此所提出的方法特別允許利用減少的存儲(chǔ)器(特別是RAM)的量來(lái)減少處理器(例如CPU或信令處理器)在圖像預(yù)處理期間的負(fù)荷。這對(duì)于基于照相機(jī)的ADAS應(yīng)用而言可能是有用的。由于即將來(lái)臨的世代的照相機(jī)具有甚至更高分辨率的傳感器并且因此以甚至增加的數(shù)據(jù)速率來(lái)提供圖像流,因此該解決方案是特別有益的。
[0030]因此,所提出的解決方案特別是應(yīng)對(duì)ADAS應(yīng)用中增加的RAM需求。按照所提出的方法,所要求的存儲(chǔ)器的量可以被明顯地減少(考慮相同數(shù)據(jù)速率的視頻流)。假如是具有增加的數(shù)據(jù)速率的視頻流,則所要求的附加的存儲(chǔ)器的量可以被減少。應(yīng)注意減少所要求的RAM的量還暗示可以減少用于單個(gè)芯片解決方案的硅上的面積,并且可以或者造成更小的單個(gè)芯片或者造成具有增加的性能的相同大小的單個(gè)芯片。這兩種效果都是有益的并且成本高效的。
[0031]圖2示出圖像處理架構(gòu)的示例性示意圖。處于120兆字節(jié)/秒的數(shù)據(jù)速率的(例如壓縮的)數(shù)據(jù)流201被饋送到照相機(jī)接口 202,照相機(jī)接口 202對(duì)數(shù)據(jù)流201進(jìn)行解壓縮,并且以達(dá)到200兆字節(jié)/秒的數(shù)據(jù)速率將(解壓縮的)數(shù)據(jù)流206供給至處理單元203。應(yīng)注意數(shù)據(jù)流201可以是壓縮的或未壓縮的數(shù)據(jù)流。
[0032]處理單元203可以提供以下中的至少一個(gè):
一利用不同壓縮率的至少兩個(gè)壓縮數(shù)據(jù)流,
一壓縮數(shù)據(jù)流中的至少一個(gè)是高分辨率;
一壓縮數(shù)據(jù)流中的至少一個(gè)是減少的(例如低的)分辨率;
一壓縮數(shù)據(jù)流中的至少一個(gè)包括數(shù)據(jù)流206的完整圖像或場(chǎng)景;
一壓縮數(shù)據(jù)流中的至少一個(gè)包括數(shù)據(jù)流206的圖像或場(chǎng)景的一部分; 一至少一個(gè)被濾波的壓縮數(shù)據(jù)流。
[0033]所述圖像或場(chǎng)景的一部分可能提及例如在水平線之上或之下的圖像的一部分。這對(duì)于對(duì)前方道路拍攝的圖片或視頻可能特別有用,因?yàn)榻?jīng)??梢栽谒骄€之下的地面發(fā)現(xiàn)道路。提取機(jī)制和成像處理算法可以被用于確定圖像或場(chǎng)景的所述部分。
[0034]關(guān)于此的解決方案可能提及每像素所使用的比特的數(shù)量(還被提及為像素精度)和/或用于(視頻的)圖像的像素的數(shù)量:例如,具有1280X720個(gè)像素(其中,每個(gè)像素具有16比特)的分辨率的視頻流可以被減少為例如:
-1024X576個(gè)像素,每個(gè)像素具有16比特,即更小量的像素,和/或 — 1280X720個(gè)像素,每個(gè)像素具有8比特,即更小量的像素精度。
[0035]當(dāng)然,上面的圖僅僅是示例;可以相應(yīng)地使用其它分辨率以及寬高比。另外,取決于特定的使用情況情形,可以對(duì)像素量的減少和像素精度的減少進(jìn)行組合。
[0036]結(jié)果,處理單元203提供若干數(shù)據(jù)流204、205以用于進(jìn)一步的處理。所組合的數(shù)據(jù)流204、205的數(shù)據(jù)速率(總計(jì)例如20兆字節(jié)/秒至30兆字節(jié)/秒)與流206的數(shù)據(jù)速率相比可以被明顯地減少。根據(jù)處理單元203的可能性,數(shù)據(jù)流204、205中的每一個(gè)可以優(yōu)選地形成為給定類型的壓縮視頻。
[0037]例如,可以使用基于高精度視頻的高精度算法,從而處理單元203所提供的輸出與其輸入(即數(shù)據(jù)流206)的數(shù)據(jù)速率相比可以被實(shí)質(zhì)地減少。
[0038]因此,該解決方案特別是可以提供可以用于具有多個(gè)數(shù)據(jù)流動(dòng)和高數(shù)據(jù)壓縮中的每一個(gè)的ADAS中的圖像處理的硬件。另外,高精度處理可以用于改進(jìn)的數(shù)據(jù)減少。
[0039]這樣的硬件可以被組織為物理上分離的像素路徑,其中,每個(gè)像素路徑使得能夠進(jìn)行視頻數(shù)據(jù)的預(yù)處理?;谶@樣的硬件架構(gòu),后續(xù)的處理級(jí)可以處理減少的量的存儲(chǔ)器(例如嵌入式RAM)。
[0040]圖3示出包括被并行布置的若干像素路徑的示例性架構(gòu)。壓縮數(shù)據(jù)流301被饋送到照相機(jī)接口 302,照相機(jī)接口 302解壓縮數(shù)據(jù)流301,并且將(解壓縮的)數(shù)據(jù)流306 (全分辨率、高精度像素)供給至處理單元303至305,其中,處理單元303至305中的每一個(gè)是一個(gè)像素路徑的一部分。
[0041]特別是通過(guò)以允許減少后續(xù)處理級(jí)中的RAM需求的方式來(lái)使用硬件加速器而布置處理單元303至305以用于處理圖像。
[0042]處理單元303至305中的每一個(gè)可以被布置為提供下面中的至少一個(gè):
一以特定壓縮率提供數(shù)據(jù)流,其中處理單元303至305當(dāng)中的壓縮率可以至少部分地相同,或它們可以至少部分地不同;
一高分辨率的壓縮數(shù)據(jù)流;
一減少的(例如低的)分辨率的壓縮數(shù)據(jù)流;
一包括數(shù)據(jù)流306的完整圖像或場(chǎng)景的壓縮數(shù)據(jù)流;
一包括數(shù)據(jù)流306的圖像或場(chǎng)景的一部分(例如細(xì)節(jié))的壓縮數(shù)據(jù)流;
一濾波操作。
[0043]因此,處理單元303至305中的每一個(gè)提供數(shù)據(jù)流307至309以用于進(jìn)一步的處理。因?yàn)樗鼈兊膲嚎s,所以數(shù)據(jù)流307至309在一起可以具有比數(shù)據(jù)流306明顯更低的數(shù)據(jù)速率。數(shù)據(jù)流307至309特別是可以為不同分辨率(像素的數(shù)量和/或像素分辨率),和/或包括輸入數(shù)據(jù)流306的不同部分(細(xì)節(jié))。此外,數(shù)據(jù)流307至309中的每一個(gè)例如可以經(jīng)受至少一個(gè)濾波操作,以便確定圖像中或圖像的一部分中的紅外內(nèi)容??梢越M合這些可能性以便供給能夠以高效方式利用存儲(chǔ)器的適當(dāng)數(shù)據(jù)流307至309,并且允許后續(xù)的處理級(jí)以在時(shí)間上和在存儲(chǔ)器上高效的方式來(lái)利用從數(shù)據(jù)流306獲得的信息。
[0044]所提出的解決方案可以被實(shí)現(xiàn)在ADAS相關(guān)的圖像處理器中,或者作為ADAS相關(guān)的圖像處理器的一部分。該圖像處理器可以能夠明顯減少輸出數(shù)據(jù)速率和大小,從而在沒有或具有關(guān)于傳遞到一般目的的圖像處理器(例如圖4的控制器402,參見以下)的信息的輸出質(zhì)量和精度的受限制折中的情況下優(yōu)化計(jì)算需求和存儲(chǔ)器需求。圖像處理器能夠提供由至少一個(gè)傳感器所獲取的情景的若干表示,從而存儲(chǔ)這樣的表示所要求的存儲(chǔ)器可以被明顯減少。
[0045]處理單元303至305中的每一個(gè)可以是為一般目的的圖像處理器提供數(shù)據(jù)的這樣的圖像處理器的一部分。處理單元303至305可以生成基于數(shù)據(jù)流306的場(chǎng)景的多個(gè)表示。處理單元303至305中的每一個(gè)可以使用由一般目的的圖像處理器運(yùn)行的ADAS算法。每個(gè)表示的獲取速率可以可選地被經(jīng)受配置。
[0046]數(shù)據(jù)流307至309可以被存儲(chǔ)在公共共享存儲(chǔ)器中。作為選項(xiàng),數(shù)據(jù)流307至309中的每一個(gè)可以被存儲(chǔ)在(共享)存儲(chǔ)器的不同部分中。
[0047]另一選項(xiàng)是:至少一個(gè)數(shù)據(jù)流307、308或309具有與至少一個(gè)其它的數(shù)據(jù)流不同的輸出速率。此外,數(shù)據(jù)流307、308或309可以具有多個(gè)輸出速率,即,其可以在時(shí)間上的若干時(shí)刻(例如每經(jīng)η個(gè)和每經(jīng)m個(gè)時(shí)鐘周期)提供壓縮圖像。換句話說(shuō),可以每經(jīng)一段時(shí)間間隔就確定和/或存儲(chǔ)一次壓縮圖像或者在這樣的時(shí)間間隔內(nèi)將壓縮圖像確定和/或存儲(chǔ)若干次。
[0048]由處理單元303至305中的至少一個(gè)利用的算法可以包括下面的至少一個(gè): 一對(duì)到來(lái)的數(shù)據(jù)流進(jìn)行壓縮;
一區(qū)域提?。?br>
一無(wú)損向下采樣;
一濾波,特別是卷積濾波;以及一減少像素大小。
[0049]這些算法僅僅是示例,算法可以經(jīng)受例如由用戶進(jìn)行的或者以自動(dòng)的方式進(jìn)行的配置。相應(yīng)地,可以利用其它的用于圖像處理和/或?yàn)V波的算法。例如,處理單元303至305中的至少一個(gè)可以利用已知的圖像壓縮算法(比如MPEG或H.26x)。
[0050]根據(jù)示例,處理單元303可以生成表示如由數(shù)據(jù)流306供給那樣的整個(gè)場(chǎng)景、但是具有減少的像素?cái)?shù)量并且具有每像素16比特的像素精度的壓縮圖像,以提取數(shù)據(jù)流306中的水平線位置并且分析圖像亮度。處理單元304可以基于使用模糊濾波(基于具有減少的像素量和減少的像素精度的整個(gè)場(chǎng)景)來(lái)生成壓縮圖像。處理單元305可以基于用于邊緣檢測(cè)(例如為了車道檢測(cè)和/或碰撞報(bào)警的目的)的可配置的(多個(gè))卷積濾波器的使用而生成壓縮圖像。處理單元303至305以相同或不同的時(shí)間間隔生成這些圖像,造成具有相同或不同數(shù)據(jù)速率的數(shù)據(jù)流307至309 (還取決于相應(yīng)的數(shù)據(jù)流307至309的每個(gè)圖像的大小)。
[0051]所建議的解決方案允許在關(guān)注于預(yù)處理的一般性圖像壓縮與由一般目的的處理器進(jìn)行的圖像后處理(下一級(jí)處理,參見例如圖4中的控制器402)之間的容易的軟件分隔。
[0052]一個(gè)選項(xiàng)是處理一特別是利用硬件加速器來(lái)進(jìn)行一可以基于行或基于圖像來(lái)完成。例如,基于行的處理可以用于減少緩沖所要求的存儲(chǔ)器。
[0053]另一選項(xiàng)是處理單元303至305中的每一個(gè)(或它們中的至少一些)包括無(wú)損向下采樣級(jí)。
[0054]進(jìn)一步的選項(xiàng)是處理單元303至305中的至少一個(gè)可以以還對(duì)數(shù)據(jù)流307至309中的每一個(gè)的數(shù)據(jù)速率具有明顯影響的不同圖像速率來(lái)提供輸出。例如,處理單元304和305可以處理數(shù)據(jù)流306,并且以一定的時(shí)鐘速率(即在長(zhǎng)度t的時(shí)間間隔之后)提供輸出。處理單元303可以執(zhí)行不同的操作,操作例如可能是復(fù)雜的或者不經(jīng)常要求用到的,并且與由處理單元304和305提供的結(jié)果相比,處理器303可以以例如以總計(jì)2t的時(shí)間間隔(在該示例中每?jī)蓚€(gè)時(shí)間間隔t)的不同的時(shí)鐘速率來(lái)提供其處理的結(jié)果。因此,基于每個(gè)處理單元303至305的處理能力和/或使用情況情形,對(duì)于各個(gè)目標(biāo)來(lái)處理數(shù)據(jù)流306的工作量可以被高效地分布在各像素路徑(即處理單元303至305)當(dāng)中。
[0055]還可以的一個(gè)選項(xiàng)是利用外部信號(hào)和/或配置標(biāo)記來(lái)使能處理單元303至305中的至少一個(gè)的處理,從而外部信號(hào)和/或配置標(biāo)記可以定義當(dāng)獲取到后續(xù)圖像時(shí)哪個(gè)(哪些)處理單元將預(yù)處理所獲取的圖像。例如,由傳感器確定的光條件的改變可以用于啟動(dòng)或重啟處理單元303至305中的至少一個(gè)。
[0056]有益的是,所提出的示例使用像素路徑以根據(jù)使用情況需求來(lái)提供高效的預(yù)處理。通過(guò)組合由處理單元303至305供給的數(shù)據(jù)流307至309,輸入數(shù)據(jù)流306的數(shù)據(jù)速率被實(shí)質(zhì)性地減少。因此,存儲(chǔ)器的量(例如用于RAM的芯片上的表面)可以被明顯減少,或者一作為替換一可以處理更高的數(shù)據(jù)速率(例如更多的像素路徑),這造成或是更便宜的產(chǎn)品或是利用相同芯片面積的更高性能的產(chǎn)品。這對(duì)于利用嵌入式RAM的單個(gè)芯片解決方案而言是特別有用的。
[0057]TK例:經(jīng)由接口的轉(zhuǎn)換
圖4示出包括圖3的像素路徑的示例性架構(gòu),其中,數(shù)據(jù)流307至309被存儲(chǔ)在存儲(chǔ)器401 (特別是嵌入式RAM)中。
[0058]提供接口 403和/或接口 404以獲得來(lái)自存儲(chǔ)器401的數(shù)據(jù)流307至309的信息,并且將信息轉(zhuǎn)換成對(duì)于控制器402進(jìn)行處理而言適合和/或高效的格式??刂破?02和接口 403、404經(jīng)由總線405耦接??刂破?02可以是或其可以包括中央處理單元、信號(hào)處理器或微控制器等。
[0059]例如,存儲(chǔ)器401中所存儲(chǔ)的數(shù)據(jù)流307至309可能具有總計(jì)8比特的像素精度,但是控制器402可能是對(duì)16比特而不是對(duì)8比特來(lái)高效地操作。因此,接口 403和404可以(分別地或組合地)提供從8比特到16比特的轉(zhuǎn)換以用于使控制器402能夠以高效的方式來(lái)處理數(shù)據(jù)流307至309 (或其一部分)。
[0060]進(jìn)行轉(zhuǎn)換的方法具有可以仍然高效地使用存儲(chǔ)器401的優(yōu)點(diǎn),因?yàn)榻涌?403、404將8比特圖像數(shù)據(jù)變換為16比特圖像數(shù)據(jù)而且不需要將這樣的16比特圖像數(shù)據(jù)存儲(chǔ)在存儲(chǔ)器401中。
[0061]因此,接口 403和404可以被設(shè)計(jì)為使得像素信息可以按最小的所要求精度來(lái)存儲(chǔ),并且其可以被變換為適合于控制器402的格式。
[0062]應(yīng)注意為了轉(zhuǎn)換的目的可以提供至少一個(gè)這樣的接口。另外,可以使用若干接口403和404。作為選項(xiàng),接口 403被布置為讀取存儲(chǔ)器401中所存儲(chǔ)的格式下的像素,并且在沒有任何轉(zhuǎn)換的情況下將這些像素傳遞到控制器402。還一選項(xiàng)是接口 404被布置為讀取存儲(chǔ)器401中所存儲(chǔ)的像素,將它們轉(zhuǎn)換成適合于控制器402的格式,并且將被轉(zhuǎn)換的像素轉(zhuǎn)發(fā)到控制器402。
[0063]所述轉(zhuǎn)換可以包括向上轉(zhuǎn)換,例如從8比特到16比特或從4比特到16比特。所述轉(zhuǎn)換還可以包括向下轉(zhuǎn)換,例如從32比特到16比特等。
[0064]進(jìn)一步的優(yōu)點(diǎn)和示例
所提出的解決方案使得有益的硬件配置能夠在減少RAM需求的情況下覆蓋例如基于照相機(jī)的ADAS。例如,包括1280 X 720個(gè)像素的傳感器可能要求1.8兆字節(jié)的RAM緩沖器。通過(guò)減少數(shù)據(jù)流的數(shù)據(jù)速率,所要求的RAM可以被減少到690千字節(jié),這節(jié)省了多于1.1兆字節(jié)的RAM。這與采用40nm的4平方毫米的硅面積的面積對(duì)應(yīng),并且造成減少到1/3。
[0065]使用硬件加速器有益地允許高能量效率,這還可以增加所附接的部件(比如,例如(信號(hào))處理器)的壽命時(shí)段。
[0066]由于I兆字節(jié)的RAM可以足夠用于處理雷達(dá)和圖像數(shù)據(jù),因此所提出的解決方案進(jìn)一步使得能夠使用同一硅來(lái)覆蓋雷達(dá)和圖像處理。
[0067]所提出的解決方案可以應(yīng)用在個(gè)人交通運(yùn)輸領(lǐng)域或工業(yè)應(yīng)用中。當(dāng)在運(yùn)動(dòng)實(shí)體(例如任意種類的車輛)中實(shí)現(xiàn)時(shí),特別是在有興趣檢測(cè)和/或監(jiān)控它們的周圍環(huán)境和/或確定它們周圍環(huán)境的特殊性的情況下,這是特別有用的。
[0068]所建議的架構(gòu)可以與ADAS預(yù)處理器組合而使用,允許明顯的存儲(chǔ)器減少。這對(duì)于以下應(yīng)用中的至少一個(gè)可能是特別有益的:遠(yuǎn)光燈輔助、車道分離報(bào)警、前向碰撞報(bào)警。
[0069]因?yàn)樵摲椒ǖ牡痛鎯?chǔ)器需求,因此其也可以用于優(yōu)化或減少功耗。
[0070]下面的示例和/或?qū)嵤├械闹辽僖粋€(gè)可以被看作是創(chuàng)新的。如所描述那樣它們可以與其它方面或?qū)嵤├M合。在此描述的任意的實(shí)施例或設(shè)計(jì)不一定被解釋為較之其它實(shí)施例或設(shè)計(jì)是優(yōu)選的或是有利的。
[0071 ] 建議了一種用于處理圖像數(shù)據(jù)流的裝置,
一包括第一處理單元和第二處理單元,用于接收所述圖像數(shù)據(jù)流;
一其中,所述第一處理單元被布置成用于提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;
一其中,所述第二處理單元被布置成用于提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。
[0072]在實(shí)施例中,所述第一處理單元被布置為提供下面中的至少一個(gè):
一以第一壓縮率從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流;
一以第一分辨率從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流;
一基于所述圖像數(shù)據(jù)流的場(chǎng)景的一部分來(lái)從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流; 一基于濾波操作來(lái)從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流。
[0073]在實(shí)施例中,所述第一壓縮率造成圖像數(shù)據(jù)流的無(wú)損壓縮或有損壓縮。
[0074]在實(shí)施例中,所述第一分辨率包括下面中的至少一個(gè):
一與所述圖像數(shù)據(jù)流的圖像相比的減少的像素量; 一與所述圖像數(shù)據(jù)流的圖像相比的減少的像素精度量;
一與所述圖像數(shù)據(jù)流在每段時(shí)間的圖像相比的減少的在每段時(shí)間的圖像的量。
[0075]在實(shí)施例中,所述第二處理單元被布置為提供下面中的至少一個(gè):
一以第二壓縮率從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流;
一以第二分辨率從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流;
一基于所述圖像數(shù)據(jù)流的場(chǎng)景的一部分來(lái)從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流; 一基于濾波操作來(lái)從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流。
[0076]在實(shí)施例中,所述第二壓縮率造成圖像數(shù)據(jù)流的無(wú)損壓縮或有損壓縮。
[0077]在實(shí)施例中,所述第二分辨率包括下面中的至少一個(gè):
一與所述圖像數(shù)據(jù)流的圖像相比的減少的像素量;
一與所述圖像數(shù)據(jù)流的圖像相比的減少的像素精度量;
一與所述圖像數(shù)據(jù)流在每段時(shí)間的圖像相比的減少的在每段時(shí)間的圖像的量。
[0078]在實(shí)施例中,在特定區(qū)域提取中,經(jīng)由圖像處理來(lái)確定所述圖像數(shù)據(jù)流的場(chǎng)景的一部分。
[0079]在實(shí)施例中,所述濾波操作包括下面中的至少一個(gè):
一低通濾波;
一聞通濾波;
一模糊濾波;
一卷積濾波。
[0080]在實(shí)施例中,通過(guò)逐行處理所述圖像數(shù)據(jù)流的圖像而基于圖像數(shù)據(jù)流來(lái)確定所述第一數(shù)據(jù)流。
[0081]在實(shí)施例中,通過(guò)逐行處理所述圖像數(shù)據(jù)流的圖像而基于圖像數(shù)據(jù)流來(lái)確定所述第二數(shù)據(jù)流。
[0082]在實(shí)施例中,所述第一處理單元的獲取速率和所述第二處理單元的獲取速率均是可配置的。
[0083]在實(shí)施例中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有在每段時(shí)間間隔不同數(shù)量的圖像。
[0084]在實(shí)施例中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有在每段時(shí)間間隔不同數(shù)量的圖像。
[0085]在實(shí)施例中,所述裝置包括:存儲(chǔ)器,用于至少部分地存儲(chǔ)所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流。
[0086]在實(shí)施例中,所述存儲(chǔ)器是共享存儲(chǔ)器,其中,所述第一處理單元與所述共享存儲(chǔ)器的第一部分關(guān)聯(lián),并且所述第二處理單元與所述共享存儲(chǔ)器的第二部分關(guān)聯(lián)。
[0087]在實(shí)施例中,所述存儲(chǔ)器包括隨機(jī)存取存儲(chǔ)器。
[0088]在實(shí)施例中,在單個(gè)芯片上布置所述第一處理單元、所述第二處理單元和所述隨機(jī)存取存儲(chǔ)器。
[0089]在實(shí)施例中,所述裝置包括:至少一個(gè)接口,被布置成用于存取所述存儲(chǔ)器并且用于將所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流的數(shù)據(jù)轉(zhuǎn)換為預(yù)定格式。
[0090]在實(shí)施例中,所述預(yù)定格式包括由被布置成用于處理來(lái)自所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流的圖像的控制器所使用的多個(gè)比特。
[0091]建議了一種裝置,
一包括第一處理單元,其被耦接到輸入圖像數(shù)據(jù)流,其中,所述第一處理單元被布置用于提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述輸入圖像數(shù)據(jù)流相比具有減少的帶寬;一包括第二處理單元,其被耦接到所述輸入圖像數(shù)據(jù)流,其中,所述第二處理單元被布置成用于提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;
一包括存儲(chǔ)器,用于至少部分地存儲(chǔ)所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流。
[0092]在實(shí)施例中,在單個(gè)芯片上布置圖像預(yù)處理級(jí)的部件,其中,所述存儲(chǔ)器是所述單個(gè)芯片上所布置的隨機(jī)存取存儲(chǔ)器。
[0093]建議了一種用于處理圖像數(shù)據(jù)流的方法,包括以下步驟:
一提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;一提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;一其中,由第一處理單元提供所述第一數(shù)據(jù)流,并且由第二處理單元提供所述第二數(shù)據(jù)流。
[0094]在實(shí)施例中,所述方法包括步驟:
一在存儲(chǔ)器中至少部分地存儲(chǔ)所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流。
[0095]在實(shí)施例中,提供所述第一數(shù)據(jù)流的步驟包括下面中的至少一個(gè):
一以第一壓縮率從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流;
一以第一分辨率從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流;
一基于所述圖像數(shù)據(jù)流的場(chǎng)景的一部分來(lái)從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流; 一基于濾波操作來(lái)從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流。
[0096]在實(shí)施例中,所述第一分辨率包括下面中的至少一個(gè):
一與所述圖像數(shù)據(jù)流的圖像相比的減少的像素量;
一與所述圖像數(shù)據(jù)流的圖像相比的減少的像素精度量;
一與所述圖像數(shù)據(jù)流在每段時(shí)間的圖像相比的減少的在每段時(shí)間的圖像的量。
[0097]在實(shí)施例中,提供所述第二數(shù)據(jù)流的步驟包括下面中的至少一個(gè):
一以第二壓縮率從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流;
一以第二分辨率從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流;
一基于所述圖像數(shù)據(jù)流的場(chǎng)景的一部分來(lái)從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流; 一基于濾波操作來(lái)從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流。
[0098]在實(shí)施例中,所述第二分辨率包括下面中的至少一個(gè):
一與所述圖像數(shù)據(jù)流的圖像相比的減少的像素量;
一與所述圖像數(shù)據(jù)流的圖像相比的減少的像素精度量;
一與所述圖像數(shù)據(jù)流在每段時(shí)間的圖像相比的減少的在每段時(shí)間的圖像的量。
[0099]提供一種用于處理圖像數(shù)據(jù)流的系統(tǒng),包括:
一用于提供第一數(shù)據(jù)流的部件,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;
一用于提供第二數(shù)據(jù)流的部件,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬;
雖然已經(jīng)公開了本發(fā)明各個(gè)示例性實(shí)施例,但是對(duì)于本領(lǐng)域技術(shù)人員顯而易見的是,可以在不脫離本發(fā)明的精神和范圍的情況下作出將達(dá)成本發(fā)明的一些優(yōu)點(diǎn)的各種改變和修改。對(duì)于本領(lǐng)域技術(shù)人員來(lái)說(shuō)很明顯執(zhí)行相同功能的其它部件可以被適合地代替。應(yīng)當(dāng)提到參照具體的圖所解釋的特征可以與其它圖的特征組合,即使是在尚未明確提到這一點(diǎn)的那些情況下也如此。進(jìn)一步地,可以或者使用適當(dāng)?shù)奶幚砥髦噶疃坑绍浖?shí)現(xiàn)方式來(lái)達(dá)成本發(fā)明的方法,或者以利用硬件邏輯和軟件邏輯的組合以達(dá)成相同結(jié)果的混合式實(shí)現(xiàn)方式來(lái)達(dá)成本發(fā)明的方法。意圖由所述權(quán)利要求覆蓋這樣的對(duì)本發(fā)明構(gòu)思的修改。
【權(quán)利要求】
1.一種用于處理圖像數(shù)據(jù)流的裝置,包括: 第一處理單元和第二處理單元,用于接收所述圖像數(shù)據(jù)流; 其中,所述第一處理單元被布置成用于提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬; 其中,所述第二處理單元被布置成用于提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。
2.如權(quán)利要求1所述的裝置,其中,所述第一處理單元被布置成提供下面中的至少一個(gè): 以第一壓縮率從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流; 以第一分辨率從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流; 基于所述圖像數(shù)據(jù)流的場(chǎng)景的一部分來(lái)從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流; 基于濾波操作來(lái)從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流。
3.如權(quán)利要求2所述的裝置,其中,所述第一壓縮率造成所述圖像數(shù)據(jù)流的無(wú)損壓縮或有損壓縮。
4.如權(quán)利要求2所述的裝置,其中,所述第一分辨率包括下面中的至少一個(gè): 與所述圖像數(shù)據(jù)流的圖像相比的減少的像素量; 與所述圖像數(shù)據(jù)流的圖像相比的減少的像素精度量; 與所述圖像數(shù)據(jù)流在每段時(shí)間的圖像相比的減少的在每段時(shí)間的圖像的量。
5.如權(quán)利要求2所述的裝置,其中,在特定區(qū)域提取中,經(jīng)由圖像處理來(lái)確定所述圖像數(shù)據(jù)流的場(chǎng)景的一部分。
6.如權(quán)利要求2所述的裝置,其中,所述濾波操作包括下面中的至少一個(gè): 低通濾波; 聞通濾波; 模糊濾波; 卷積濾波。
7.如權(quán)利要求1所述的裝置,其中,所述第二處理單元被布置成提供下面中的至少一個(gè): 以第二壓縮率從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流; 以第二分辨率從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流; 基于所述圖像數(shù)據(jù)流的場(chǎng)景的一部分來(lái)從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流; 基于濾波操作來(lái)從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流。
8.如權(quán)利要求7所述的裝置,其中,所述第二壓縮率造成所述圖像數(shù)據(jù)流的無(wú)損壓縮或有損壓縮。
9.如權(quán)利要求7所述的裝置,其中,所述第二分辨率包括下面中的至少一個(gè): 與所述圖像數(shù)據(jù)流的圖像相比的減少的像素量; 與所述圖像數(shù)據(jù)流的圖像相比的減少的像素精度量; 與所述圖像數(shù)據(jù)流在每段時(shí)間的圖像相比的減少的在每段時(shí)間的圖像的量。
10.如權(quán)利要求7所述的裝置,其中,在特定區(qū)域提取中,經(jīng)由圖像處理來(lái)確定所述圖像數(shù)據(jù)流的場(chǎng)景的一部分。
11.如權(quán)利要求7所述的裝置,其中,所述濾波操作包括下面中的至少一個(gè): 低通濾波; 高通濾波; 模糊濾波; 卷積濾波。
12.如權(quán)利要求1所述的裝置,其中,通過(guò)逐行處理所述圖像數(shù)據(jù)流的圖像而基于所述圖像數(shù)據(jù)流來(lái)確定所述第一數(shù)據(jù)流。
13.如權(quán)利要求1所述的裝置,其中,通過(guò)逐行處理所述圖像數(shù)據(jù)流的圖像而基于所述圖像數(shù)據(jù)流來(lái)確定所述第二數(shù)據(jù)流。
14.如權(quán)利要求1所述的裝置,其中,所述第一處理單元的獲取速率和所述第二處理單元的獲取速率均是可配置的。
15.如權(quán)利要求1所述的裝置,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有在每段時(shí)間間隔不同數(shù)量的圖像。
16.如權(quán)利要求1所述的裝置,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有在每段時(shí)間間隔不同數(shù)量的圖像。
17.如權(quán)利要求1所述的裝置,包括:存儲(chǔ)器,用于至少部分地存儲(chǔ)所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流。
18.如權(quán)利要求17所述的裝置,其中,所述存儲(chǔ)器是共享存儲(chǔ)器,其中,所述第一處理單元與所述共享存儲(chǔ)器的第一部分關(guān)聯(lián),并且所述第二處理單元與所述共享存儲(chǔ)器的第二部分關(guān)聯(lián)。
19.如權(quán)利要求17所述的裝置,其中,所述存儲(chǔ)器包括隨機(jī)存取存儲(chǔ)器。
20.如權(quán)利要求19所述的裝置,其中,在單個(gè)芯片上布置所述第一處理單元、所述第二處理單元和所述隨機(jī)存取存儲(chǔ)器。
21.如權(quán)利要求17所述的裝置,包括:至少一個(gè)接口,被布置成用于存取所述存儲(chǔ)器并且用于將所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流的數(shù)據(jù)轉(zhuǎn)換為預(yù)定格式。
22.如權(quán)利要求21所述的裝置,其中,所述預(yù)定格式包括由被布置成用于處理來(lái)自所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流的圖像的控制器所使用的多個(gè)比特。
23.一種裝置,包括: 第一處理單元,被耦接到輸入圖像數(shù)據(jù)流,其中,所述第一處理單元被布置成用于提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述輸入圖像數(shù)據(jù)流相比具有減少的帶寬; 第二處理單元,被耦接到所述輸入圖像數(shù)據(jù)流,其中,所述第二處理單元被布置成用于提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬; 存儲(chǔ)器,用于至少部分地存儲(chǔ)所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流。
24.如權(quán)利要求23所述的裝置,其中,在單個(gè)芯片上布置所述處理單元,并且其中,所述存儲(chǔ)器是布置在所述單個(gè)芯片上的隨機(jī)存取存儲(chǔ)器。
25.一種用于處理圖像數(shù)據(jù)流的方法,包括: 提供第一數(shù)據(jù)流,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬; 提供第二數(shù)據(jù)流,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬; 其中,由第一處理單元提供所述第一數(shù)據(jù)流,并且由第二處理單元提供所述第二數(shù)據(jù) 流。
26.如權(quán)利要求25所述的方法,進(jìn)一步包括: 在存儲(chǔ)器中至少部分地存儲(chǔ)所述第一數(shù)據(jù)流和所述第二數(shù)據(jù)流。
27.如權(quán)利要求25所述的方法,其中,提供所述第一數(shù)據(jù)流包括下面中的至少一個(gè): 以第一壓縮率從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流; 以第一分辨率從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流; 基于所述圖像數(shù)據(jù)流的場(chǎng)景的一部分來(lái)從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流; 基于濾波操作來(lái)從所述圖像數(shù)據(jù)流生成所述第一數(shù)據(jù)流。
28.如權(quán)利要求27所述的方法,其中,所述第一分辨率包括下面中的至少一個(gè): 與所述圖像數(shù)據(jù)流的圖像相比的減少的像素量; 與所述圖像數(shù)據(jù)流的圖像相比的減少的像素精度量; 與所述圖像數(shù)據(jù)流在每段時(shí)間的圖像相比的減少的在每段時(shí)間的圖像的量。
29.如權(quán)利要求25所述的方法,其中,提供所述第二數(shù)據(jù)流包括下面中的至少一個(gè): 以第二壓縮率從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流; 以第二分辨率從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流; 基于所述圖像數(shù)據(jù)流的場(chǎng)景的一部分來(lái)從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流; 基于濾波操作來(lái)從所述圖像數(shù)據(jù)流生成所述第二數(shù)據(jù)流。
30.如權(quán)利要求29所述的方法,其中,所述第二分辨率包括下面中的至少一個(gè): 與所述圖像數(shù)據(jù)流的圖像相比的減少的像素量; 與所述圖像數(shù)據(jù)流的圖像相比的減少的像素精度量; 與所述圖像數(shù)據(jù)流在每段時(shí)間的圖像相比的減少的在每段時(shí)間的圖像的量。
31.一種用于處理圖像數(shù)據(jù)流的系統(tǒng),包括: 用于提供第一數(shù)據(jù)流的部件,其中,所述第一數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬; 用于提供第二數(shù)據(jù)流的部件,其中,所述第二數(shù)據(jù)流與所述圖像數(shù)據(jù)流相比具有減少的帶寬。
【文檔編號(hào)】H04N19/117GK104244014SQ201410262419
【公開日】2014年12月24日 申請(qǐng)日期:2014年6月12日 優(yōu)先權(quán)日:2013年6月12日
【發(fā)明者】羅歇 A., 伊尼阿斯 R. 申請(qǐng)人:英飛凌科技股份有限公司