專(zhuān)利名稱(chēng)：對(duì)多裝置音頻捕獲的處理的制作方法
技術(shù)領(lǐng)域：
本發(fā)明涉及音頻捕獲、處理、表示、傳輸和呈現(xiàn)領(lǐng)域，尤其涉及通過(guò)多個(gè)裝置提供的音頻記錄環(huán)境。
背景技術(shù)：
多視角音頻是這種音頻捕獲、處理、表示、傳輸和呈現(xiàn)的使用場(chǎng)合的一個(gè)示例。多視角音頻是這樣的概念其提供對(duì)音頻場(chǎng)景的不同聽(tīng)覺(jué)視角，用戶(hù)可以從不同的聽(tīng)覺(jué)視角選擇他/她喜歡的那個(gè)視角。不管是單獨(dú)還是與相應(yīng)的多視角視頻概念結(jié)合，多視角音頻都使得能夠?qū)崿F(xiàn)被認(rèn)為是下列領(lǐng)域中有趣的特性的功能，這些領(lǐng)域包括遠(yuǎn)程呈現(xiàn)(telepresence)應(yīng)用、音/視頻會(huì)議、沉浸式人與人通信(還可能包括視頻和/或合成內(nèi)容，例如為了提供“全3D”體驗(yàn))、游戲或虛擬/增強(qiáng)現(xiàn)實(shí)應(yīng)用等，不一而足。

發(fā)明內(nèi)容
對(duì)多視角音頻的捕獲涉及利用向周?chē)纛l場(chǎng)景提供不同聽(tīng)覺(jué)視角的許多記錄裝置?？梢韵蛴脩?hù)(或應(yīng)用)給出選擇，以便根據(jù)他/她的偏好選擇收聽(tīng)這些記錄中的具體的一個(gè)。還可以向用戶(hù)(或應(yīng)用)給出對(duì)音頻場(chǎng)景內(nèi)期望的收聽(tīng)位置的自由選擇。在這種途徑中，與所期望的收聽(tīng)位置關(guān)聯(lián)的音頻信號(hào)被確定為音頻場(chǎng)景內(nèi)多個(gè)記錄的一個(gè)或多個(gè)合并——每個(gè)合并例如基于例如源自接近所選的收聽(tīng)位置的多個(gè)記錄裝置的一個(gè)或多個(gè)記錄。然而，由于測(cè)量和/或估計(jì)音頻場(chǎng)景內(nèi)多個(gè)記錄裝置的多個(gè)位置的能力有限，和/或由于該位置測(cè)量和/或估計(jì)的不精確性，所以如果只依賴(lài)所測(cè)量/估計(jì)的多個(gè)記錄裝置的多個(gè)位置，則確定與音頻場(chǎng)景內(nèi)期望的收聽(tīng)位置關(guān)聯(lián)的多個(gè)記錄的合適合并會(huì)打折扣。此外，可以存在這樣的情況，其中根本就沒(méi)有可用的對(duì)各個(gè)記錄裝置的專(zhuān)用的測(cè)量/估計(jì)位置，例如，如果諸如因?yàn)橛涗浹b置能夠接收來(lái)自基站/接入點(diǎn)/信標(biāo)的無(wú)線電信號(hào)，所以只是籠統(tǒng)地知道一對(duì)記錄裝置位于具體的區(qū)域中，例如蜂窩通信系統(tǒng)(例如小區(qū))的基站的覆蓋區(qū)域、或無(wú)線局域網(wǎng)(WLAN)接入點(diǎn)的覆蓋區(qū)域、或無(wú)線電廣播系統(tǒng)的信標(biāo)的覆蓋區(qū)域，示例不一而足。于是期望的收聽(tīng)位置可以例如被了解到在該覆蓋區(qū)域內(nèi)。此外，甚至可能存在這樣的情況，其中，來(lái)自一對(duì)記錄裝置的多個(gè)記錄將被不依賴(lài)于期望的收聽(tīng)位置地適當(dāng)合并。在所有這些使用場(chǎng)合中，如果記錄裝置的數(shù)量大，將會(huì)加劇對(duì)來(lái)自多個(gè)記錄裝置的多個(gè)記錄的合并，舉例來(lái)講，如果在諸如音樂(lè)會(huì)等大型事件中記錄音頻，則很容易出現(xiàn)這種情況。因此，除其他目的外本發(fā)明的目的尤其是，提供用于對(duì)多個(gè)記錄裝置記錄的多個(gè)音頻信號(hào)的適當(dāng)合并的方法、設(shè)備、系統(tǒng)、計(jì)算機(jī)程序以及計(jì)算機(jī)程序產(chǎn)品。在本發(fā)明的第一方面，公開(kāi)了一種方法，包括
通過(guò)第一設(shè)備選擇一個(gè)或多個(gè)記錄裝置以獲得所選記錄裝置集，以及在所述第一設(shè)備處接收關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的信息之一，所述所選記錄裝置集中所選的記錄裝置是至少基于為記錄裝置集的記錄裝置確定的相關(guān)性水平選自所述記錄裝置集，以及通過(guò)所述第一設(shè)備執(zhí)行對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并和通過(guò)所述第一設(shè)備引起所述合并之一，以獲得用于呈現(xiàn)的一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)。在本發(fā)明的該第一個(gè)方面，還公開(kāi)了計(jì)算機(jī)程序，其包括用于在計(jì)算機(jī)程序在處理器上執(zhí)行時(shí)執(zhí)行根據(jù)本發(fā)明的第一方面的方法的程序代碼。所述計(jì)算機(jī)程序可以例如是經(jīng)由網(wǎng)絡(luò)(比如因特網(wǎng))可分發(fā)的。計(jì)算機(jī)程序可以是例如在計(jì)算機(jī)可讀介質(zhì)中可存儲(chǔ)或可編碼的。計(jì)算機(jī)程序可以例如至少部分地表示處理器的軟件和/或固件。在本發(fā)明的該第一方面中，還公開(kāi)了計(jì)算機(jī)可讀介質(zhì)，其上存儲(chǔ)有根據(jù)本發(fā)明第一方面的計(jì)算機(jī)程序。計(jì)算機(jī)可讀介質(zhì)可以例如被實(shí)現(xiàn)為電、磁、電-磁、光或其它存儲(chǔ)介 質(zhì)，并且可以是可移除介質(zhì)或被固定安裝在設(shè)備或裝置中的介質(zhì)。隨機(jī)訪問(wèn)存儲(chǔ)器(RAM)或只讀存儲(chǔ)器(ROM)是這種計(jì)算機(jī)可讀介質(zhì)的非限制性示例。計(jì)算機(jī)可讀介質(zhì)可以例如是有形介質(zhì)，例如有形存儲(chǔ)介質(zhì)。計(jì)算機(jī)可讀介質(zhì)被理解為計(jì)算機(jī)(比如處理器)可讀的。在本發(fā)明的該第一方面中，還公開(kāi)了第一設(shè)備，其被配置為執(zhí)行根據(jù)本發(fā)明第一方面的方法。在本發(fā)明的該第一方面中，還公開(kāi)了第一設(shè)備，包括用于選擇一個(gè)或多個(gè)記錄裝置以獲得所選記錄裝置集以及接收關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的信息兩者之一的裝置，所述所選記錄裝置集中所選的記錄裝置是至少基于為記錄裝置集的記錄裝置確定的相關(guān)性水平選自所述記錄裝置集，以及用于執(zhí)行對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并以及引起所述合并兩者之一，以獲得用于呈現(xiàn)的一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)的裝置。在本發(fā)明的該第一方面中，還公開(kāi)了第一設(shè)備，其包括至少一個(gè)處理器；以及包括計(jì)算機(jī)程序代碼的至少一個(gè)存儲(chǔ)器，所述至少一個(gè)存儲(chǔ)器和所述計(jì)算機(jī)程序代碼被配置為與所述至少一個(gè)處理器一起，引起所述第一設(shè)備至少選擇一個(gè)或多個(gè)記錄裝置以獲得所選記錄裝置集以及接收關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的信息兩者之一，所述所選記錄裝置集中所選的記錄裝置是至少基于為記錄裝置集的記錄裝置確定的相關(guān)性水平選自所述記錄裝置集，以及執(zhí)行對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并以及引起所述合并兩者之一，以獲得用于呈現(xiàn)的一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)。包括在存儲(chǔ)器中的計(jì)算機(jī)程序代碼可以例如至少部分地表示用于處理器的軟件和/或固件?？捎商幚砥髟L問(wèn)的RAM或ROM是存儲(chǔ)器的非限制性示例。根據(jù)本發(fā)明第一方面的所述第一設(shè)備可以例如是電子裝置(比如服務(wù)器，例如音頻服務(wù)器)或被包括在電子裝置中。所述第一設(shè)備可以例如包括用戶(hù)接口和/或網(wǎng)絡(luò)接口(例如，用來(lái)與通信網(wǎng)絡(luò)(比如因特網(wǎng)、蜂窩通信系統(tǒng)以及WLAN，非限制性示例不一而足)對(duì)接)。
在下文中，將描述本發(fā)明第一方面的特征和實(shí)施方式(示出了進(jìn)一步的特征)，它們被理解為同樣適用于上述本發(fā)明第一方面的方法、設(shè)備、計(jì)算機(jī)程序和計(jì)算機(jī)程序產(chǎn)品。這些單個(gè)的特征/實(shí)施方式被認(rèn)為是示例性的且非限制性的，并且可分別獨(dú)立于其他所公開(kāi)的特征/實(shí)施方式合并。此外，這些特征/實(shí)施方式也將被認(rèn)為是以相互以及與上述本發(fā)明第一方面所有可能的組合進(jìn)行了公開(kāi)。如果未特別聲明，則在本說(shuō)明書(shū)中如果設(shè)備/裝置被描述為執(zhí)行某種動(dòng)作，則設(shè)備/裝置被理解為包括用于執(zhí)行該動(dòng)作的相應(yīng)裝置，設(shè)備的存儲(chǔ)器和計(jì)算機(jī)代碼被理解為被配置用于，與處理器一起，引起設(shè)備(除了已由設(shè)備執(zhí)行的其它動(dòng)作之外還)執(zhí)行該動(dòng)作，并且計(jì)算機(jī)程序被認(rèn)為包括在程序在處理器上執(zhí)行時(shí)用于執(zhí)行該動(dòng)作的相應(yīng)程序代碼。包括在記錄裝置集中的記錄裝置能夠記錄音頻信號(hào)，其中該記錄裝置集包括一個(gè)或多個(gè)(例如至少兩個(gè))記錄裝置。記錄裝置可以例如能夠每個(gè)記錄裝置記錄一個(gè)音頻信 號(hào)，但是同樣可行的是，一個(gè)或多個(gè)記錄裝置中的一個(gè)或多個(gè)記錄裝置能夠一次記錄例如來(lái)自不同的方向的多于一個(gè)音頻信號(hào)。為了記錄音頻信號(hào)，記錄裝置可以例如配備有一個(gè)或多個(gè)麥克風(fēng)。記錄裝置或連接到(經(jīng)由無(wú)線或有線連接)記錄裝置的設(shè)備還能夠向第一設(shè)備或者直接地或經(jīng)由一個(gè)或多個(gè)另外的設(shè)備提供所記錄的音頻信號(hào)。舉例來(lái)講，可以在至少部分地使用了無(wú)線電通信系統(tǒng)的情況下將記錄的音頻信號(hào)提供給第一設(shè)備。所述記錄裝置集中的記錄裝置可以例如構(gòu)成多個(gè)記錄裝置的子集，其中，所述多個(gè)記錄裝置可以例如包括記錄或已經(jīng)記錄了在音頻場(chǎng)景中記錄的音頻信號(hào)的所有記錄裝置。所述記錄裝置集可以例如只包含所述多個(gè)記錄裝置中接近期望的收聽(tīng)效果的那些記錄
>J-U ρ α裝直。從所述記錄裝置集入手，通過(guò)從所述記錄裝置集選擇記錄裝置來(lái)確定所選記錄裝置集。于是所選記錄裝置被包括在所選記錄裝置集中。至少基于為所述記錄裝置集的記錄裝置確定的相關(guān)性水平來(lái)選擇所述所選記錄裝置。其中，可以例如確定相關(guān)性水平使得每個(gè)記錄裝置都被指派各自的相關(guān)性水平。被指派給記錄裝置的相關(guān)性水平可以相互不同，但同樣可行的是，同一相關(guān)性水平可被指派給兩個(gè)或更多記錄裝置。相關(guān)性水平指示記錄裝置的相關(guān)性，例如感性相關(guān)性，并因而在從記錄裝置集選擇記錄裝置時(shí)作為輔助?？梢岳缰辽倩谟涗浹b置記錄的音頻信號(hào)為記錄裝置集的記錄裝置確定相關(guān)性水平。對(duì)所選記錄裝置的確定還可以基于記錄裝置的測(cè)量/估計(jì)的方位?？梢岳鐬橥挥涗浹b置集的記錄裝置確定不同(例如，至少兩個(gè)不同的)的相關(guān)性水平集。例如，可以例如通過(guò)將不同的帶通濾波器應(yīng)用到記錄裝置所記錄的音頻信號(hào)并形成用于確定相關(guān)性水平的至少部分基礎(chǔ)，分別為不同頻帶確定不同的相關(guān)性水平集。這種特定于頻帶的多個(gè)相關(guān)性水平集于是還可以產(chǎn)生特定于頻帶的多個(gè)所選記錄裝置集以及特定于頻帶的合并后的音頻信號(hào)。這可對(duì)音頻場(chǎng)景中的多音頻源/音頻活動(dòng)中心的改善的分辨率有所貢獻(xiàn)。通過(guò)對(duì)音頻場(chǎng)景中所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)進(jìn)行合并來(lái)利用所述所選記錄裝置集，以獲得用于呈現(xiàn)(例如，通過(guò)第一設(shè)備或另一設(shè)備來(lái)呈現(xiàn))的一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)。其中，如果關(guān)于記錄裝置的相關(guān)性水平是至少基于記錄裝置所記錄的音頻信號(hào)來(lái)確定，則被合并以獲得所述一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)的所記錄的音頻信號(hào)，可以與確定用于所選記錄裝置的相關(guān)性水平所基于的所記錄的音頻信號(hào)相同，或者也可以是不同的所記錄的音頻信號(hào)?？稍谒鏊x記錄裝置已經(jīng)記錄了音頻信號(hào)之前、期間或之后，確定(通過(guò)選擇記錄裝置)所選記錄裝置集，其中，所述音頻信號(hào)被合并以獲得一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)。其中，一個(gè)或多個(gè)音頻信號(hào)可以按照每個(gè)所選記錄裝置被記錄，并且可以參與所述合并?？赡艽嬖诶邕@種情況，一個(gè)或多個(gè)所選裝置只具有一個(gè)被記錄的音頻信號(hào)，并且一個(gè)或多個(gè)所選記錄裝置具有多于一個(gè)(例如至少兩個(gè))的被記錄的音頻信號(hào)。對(duì)所選記錄裝置所記錄的音頻信號(hào)進(jìn)行合并可以例如通過(guò)下混合所述音頻信號(hào)來(lái)執(zhí)行，例如通過(guò)立體聲下混合，非限制性示例不一而足。所述合并可以包括進(jìn)一步的信號(hào)處理，比如濾波或平移。所述合并可以例如產(chǎn)生單聲道信號(hào)、立體聲信號(hào)、雙耳信號(hào)或多聲道音頻信號(hào)，非限制性示例不一而足。其中，只有所述所選記錄裝置集的所選記錄裝置所記錄的音頻信號(hào)被合并，即，由其它記錄裝置記錄的音頻信號(hào)被排除在所述合并之外。
在這種方式中，所述一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)只包含由所選記錄裝置所記錄的音頻信號(hào)，而不包括來(lái)自所述記錄裝置集的所有記錄裝置的音頻信號(hào)。由于所選記錄裝置是基于相關(guān)性水平被選擇的，所以所述一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)于是只包含由被認(rèn)為與音頻場(chǎng)景相關(guān)(基于相關(guān)性水平)的記錄裝置記錄的音頻信號(hào)，即，例如以最佳方式表示音頻場(chǎng)景。這也降低了生成經(jīng)過(guò)合并的音頻信號(hào)的復(fù)雜性(因?yàn)橹恍杼幚韥?lái)自較少記錄裝置的音頻信號(hào))。此外，在所述記錄裝置集表示被認(rèn)為接近所期望的收聽(tīng)位置的記錄裝置的情況下，但是如果記錄裝置的測(cè)量/估計(jì)位置不可靠的，則只考慮被認(rèn)為是相關(guān)的記錄裝置的音頻信號(hào)可對(duì)排除被錯(cuò)誤地包括在記錄裝置集中的記錄裝置的音頻信號(hào)有所貢獻(xiàn)，因此可提升所述經(jīng)過(guò)合并的音頻信號(hào)的質(zhì)量。針對(duì)這種使用場(chǎng)合的合適的相關(guān)性準(zhǔn)則可以是例如，基于由記錄裝置記錄的音頻信號(hào)的相似性的準(zhǔn)則。這同樣適用于記錄裝置的位置根本不可用或這不相關(guān)的情況，由此通過(guò)基于生成所述一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)的所記錄的音頻信號(hào)，只將相關(guān)的記錄裝置包括到所選記錄裝置集中，也可以實(shí)現(xiàn)記錄裝置數(shù)量的適當(dāng)縮減。第一設(shè)備或者自己執(zhí)行對(duì)記錄裝置的選擇(例如，基于關(guān)于期望的目標(biāo)收聽(tīng)效果的信息)，或者接收關(guān)于所選記錄裝置集的信息(例如從用戶(hù)、應(yīng)用、或者從另外的設(shè)備接收，示例不一而足)。信息可以是例如所選記錄裝置集自身，或者對(duì)其的表示(例如編碼表示)。信息還可以從至少部分不同的至少兩組所選記錄裝置集標(biāo)識(shí)出對(duì)所選記錄裝置集的選擇。此外，第一設(shè)備或者執(zhí)行對(duì)由所選記錄裝置記錄的音頻信號(hào)的合并，或者引起該合并(例如，通過(guò)將所選記錄裝置集轉(zhuǎn)發(fā)給執(zhí)行該合并的設(shè)備)。第一設(shè)備可以例如是服務(wù)器或其一部分。服務(wù)器可以例如是多視角音頻服務(wù)器。第一設(shè)備可以例如進(jìn)一步地能夠接收由記錄裝置集的記錄裝置記錄的音頻信號(hào)。第一設(shè)備可以例如進(jìn)一步地能夠確定相關(guān)性水平。根據(jù)本發(fā)明第一方面的第一實(shí)施方式，所述記錄裝置集至少在考慮了音頻場(chǎng)景中期望的收聽(tīng)位置與記錄裝置的測(cè)量/估計(jì)位置間的位置關(guān)系的情況下，從多個(gè)記錄裝置得至IJ。其中，在本說(shuō)明書(shū)全文中，斜杠“/”被認(rèn)為表示“和/或”。所述多個(gè)記錄裝置可以例如包括從中接收或已經(jīng)接收到例如關(guān)于特定音頻場(chǎng)景被記錄的音頻信號(hào)的所有記錄裝置。所述多個(gè)記錄裝置可以例如包括活動(dòng)的和/或連接到音頻服務(wù)器的那些記錄裝置。相對(duì)于期望的收聽(tīng)位置，基于記錄裝置的測(cè)量/估計(jì)位置從所述多個(gè)記錄裝置得到記錄裝置集構(gòu)成用來(lái)減少對(duì)所述一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)做出貢獻(xiàn)的記錄裝置的數(shù)量的方式。在本發(fā)明第一方面的第一實(shí)施方式中，所述得到可以例如由第一設(shè)備執(zhí)行?？商鎿Q地，所述得到可以由另一設(shè)備執(zhí)行，并且相關(guān)性水平于是可被提供給選擇記錄裝置以獲得所選記錄裝置集的實(shí)體。在本發(fā)明第一方面的該第一實(shí)施方式中，期望的收聽(tīng)位置可以是例如由要在其上呈現(xiàn)所述一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)的第二設(shè)備來(lái)提供。期望的收聽(tīng)位置可以例如由第二設(shè)備的用戶(hù)選擇(例如，基于房間計(jì)劃或提供給他的地圖)或者由第二設(shè)備執(zhí)行的應(yīng)用選擇，并隨后將其從第二設(shè)備提供給第一設(shè)備。可替換地，期望的收聽(tīng)位置可以是預(yù)定義的。進(jìn)一步可替換地，期望的收聽(tīng)位置可以是自動(dòng)確定的，例如基于所測(cè)量/估計(jì)的記錄裝置的位置(例如取其平均)。 在本發(fā)明第一方面的該第一實(shí)施方式中，只有具有處于所期望的收聽(tīng)位置周?chē)A(yù)定區(qū)域內(nèi)的所測(cè)量/估計(jì)位置的記錄裝置才會(huì)被包括在記錄裝置集中。在本發(fā)明第一方面的該第一實(shí)施方式中，只有具有處于所期望的收聽(tīng)位置周?chē)A(yù)定區(qū)域內(nèi)的所測(cè)量/估計(jì)位置的預(yù)定數(shù)量的記錄裝置被包括在記錄裝置集中。包括在所述記錄裝置集中的記錄裝置可以例如是具有相對(duì)于所述期望的收聽(tīng)位置最近的測(cè)量/估計(jì)位置的記錄裝置。根據(jù)本發(fā)明第一方面的第二實(shí)施方式，記錄裝置的相關(guān)性水平至少基于對(duì)記錄裝置所記錄的音頻信號(hào)的表示間的相似性分析而確定。相似性可以是例如通過(guò)可展示音頻信號(hào)間的相似性的相似性分析函數(shù)來(lái)確定(SP使這些音頻信號(hào)被不同地延遲)，其可被看做對(duì)記錄了音頻信號(hào)的記錄裝置的相關(guān)性的測(cè)量。例如，記錄了展現(xiàn)出與許多其他記錄裝置的被記錄的音頻信號(hào)的相似性的音頻信號(hào)的記錄裝置可被指派高相關(guān)性。于是所述所選記錄裝置集可以例如只包括記錄了彼此相似的音頻信號(hào)的記錄裝置，而排除記錄了不相似音頻信號(hào)的記錄裝置。被記錄的音頻信號(hào)的相似性可以例如被看作指示被記錄的源自同一音頻源(或者源自音頻源的相似混合)的音頻信號(hào)。只合并這種相似的被記錄的音頻信號(hào)從而可以給出音頻源(或音頻源的混合)的純粹效果，并可以進(jìn)一步消除不相似的被記錄的音頻信號(hào)(它們可以例如源自其他可能較遠(yuǎn)的音頻源)的影響。相似性分析函數(shù)可以例如至少部分地基于所述表示間的互相關(guān)。例如，所述相似性分析函數(shù)可以是互相關(guān)函數(shù)、或加權(quán)互相關(guān)函數(shù)、或互相關(guān)函數(shù)的變換、或互相關(guān)函數(shù)與其它函數(shù)(例如與互相關(guān)函數(shù)的變換)的組合，非限制性示例不一而足。在所有這些基于互相關(guān)的函數(shù)中，可以使用被記錄的音頻信號(hào)的表示或其修正版本(例如硬限制副本)。同樣可行的是，相似性分析函數(shù)可以基于對(duì)兩個(gè)表示相對(duì)于彼此的不同移位的兩個(gè)表示之間的差的分析，例如平均幅度差函數(shù)(AMDF)的情況中。同樣可行的是，相似性分析函數(shù)可以基于差分析函數(shù)和基于互相關(guān)的函數(shù)的合并。根據(jù)本發(fā)明第一方面的第三實(shí)施方式，記錄裝置的相關(guān)性水平與記錄裝置記錄的音頻信號(hào)的表示關(guān)于參考信號(hào)的延遲有關(guān)。
音頻信號(hào)的表不可以例如是被記錄的音頻信號(hào)的相應(yīng)的同一表不(例如相應(yīng)的復(fù)制)。同樣可行的是，形成由記錄裝置記錄的一個(gè)或多個(gè)音頻信號(hào)的這種表示可以包括濾波、抽取、合并(例如取平均)或通過(guò)其它方式來(lái)處理一個(gè)或多個(gè)音頻信號(hào)。例如，音頻信號(hào)可以被帶通濾波，例如為了改善音頻場(chǎng)景中的多音頻源/音頻活動(dòng)中心的分辨率。每個(gè)記錄裝置可以例如存在一個(gè)相應(yīng)的表示。在本發(fā)明第一方面的該第三實(shí)施方式中，延遲可以例如基于被應(yīng)用到記錄裝置所記錄的音頻信號(hào)的表示的相對(duì)于基準(zhǔn)信號(hào)的相似性分析函數(shù)來(lái)確定。延遲可以例如被確定為表示與產(chǎn)生基于互相關(guān)的函數(shù)的極(例如，最大值或最小值)值(例如，最大互相關(guān)值或最小差值)的參考信號(hào)之間的移位。每個(gè)記錄裝置可以存在例如一個(gè)相應(yīng)的表示，并且每個(gè)表示/記錄裝置可以存在例如一個(gè)相應(yīng)的延遲。在相似性分析函數(shù)(例如互相關(guān)函數(shù)或差函數(shù))中，可以考慮音頻信號(hào)的每個(gè)表示的一個(gè)或多個(gè)分段。這可對(duì)改善相似性分析結(jié)果有所
-Tj. 士 [>貝獻(xiàn)。在本發(fā)明第一方面的該第三實(shí)施方式中，參考信號(hào)可以例如是記錄裝置集的記錄裝置中的一個(gè)記錄的一個(gè)或多個(gè)音頻信號(hào)的表示。參考信號(hào)可以例如是相對(duì)于所有其他(其它記錄裝置所記錄的音頻信號(hào)的)表示具有最大相似性的(記錄裝置所記錄的音頻信號(hào)的)表示。在本發(fā)明第一方面的該第三實(shí)施方式中，參考信號(hào)可以被識(shí)別，并且延遲可以作為來(lái)自至少部分聯(lián)合進(jìn)程的結(jié)果而被獲得。在本發(fā)明第一方面的該第三實(shí)施方式中，參考信號(hào)可以例如是從記錄裝置記錄的音頻信號(hào)的表示確定，所述表示在所有表示中，相對(duì)于其它表示展現(xiàn)出相似性分析函數(shù)的各個(gè)極值(例如最大值或最小值)之和最大。這樣，在記錄裝置集中存在M個(gè)記錄裝置且每個(gè)記錄裝置一個(gè)表示的情況下，對(duì)于每個(gè)表示，可以確定相對(duì)于所有其它M-I個(gè)表示，各個(gè)相似性分析函數(shù)的各個(gè)M-I個(gè)極值(例如，互相關(guān)的最大值或差的最小值)，并將這M-I個(gè)極值求和以得到每個(gè)表示一個(gè)和值，于是可將具有最大(在形成互相關(guān)的情況下)或最小(在形成差的情況下)和值的表示看作參考信號(hào)。在本發(fā)明第一方面的該第三實(shí)施方式中，記錄裝置的相關(guān)性水平是通過(guò)將延遲分成分別表示相關(guān)性水平的組來(lái)確定的。每個(gè)相關(guān)性水平例如可以有一個(gè)組，例如，如果記錄裝置集中有M個(gè)記錄裝置，并且有K個(gè)不同的相關(guān)性水平，則每組可能有M/Κ個(gè)延遲(假設(shè)M可被K整除)。同樣可行的是，每組的延遲數(shù)在組間可以不同。相關(guān)性水平可以例如隨著延遲的增加而降低，從而小的延遲指示高相關(guān)性而大的延遲指示低相關(guān)性。根據(jù)本發(fā)明第一方面的第四實(shí)施方式，關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的信息被接收，并且所選記錄裝置集的所選記錄裝置在其上將要呈現(xiàn)所述一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)的第二設(shè)備處選擇。該選擇可以例如由用戶(hù)執(zhí)行、或自動(dòng)地例如基于選擇規(guī)則由第二設(shè)備執(zhí)行(例如由第二設(shè)備執(zhí)行的應(yīng)用執(zhí)行)。在本發(fā)明第一方面的該第四實(shí)施方式中，相關(guān)性水平可以例如由第一設(shè)備確定，并作為用于、選擇所選記錄裝置集的所選記錄裝置的至少部分基礎(chǔ)，被提供給第二設(shè)備。此夕卜，與相關(guān)性水平關(guān)聯(lián)的進(jìn)一步信息可被提供給第二設(shè)備，例如，關(guān)于各個(gè)相關(guān)性水平涉及的記錄裝置的位置(如果可用)和/或方位(如果可用)的信息。這種信息可以例如被呈現(xiàn)給用戶(hù)(或應(yīng)用)，以允許舒適的選擇記錄裝置。其中，所述選擇可以由第二設(shè)備的用戶(hù)執(zhí)行或由第二設(shè)備自動(dòng)執(zhí)行(例如由第二設(shè)備執(zhí)行的應(yīng)用執(zhí)行)。根據(jù)本發(fā)明第一方面的第五實(shí)施方式，所述一個(gè)或多個(gè)記錄裝置由第一設(shè)備選擇，以獲得所選記錄裝置集，并且相關(guān)性水平由第一設(shè)備確定。根據(jù)本發(fā)明第一方面的第六實(shí)施方式，所選記錄裝置集中的所選記錄裝置選自記錄裝置集，使得所選記錄裝置集的所選記錄裝置所記錄的音頻信號(hào)的合并提供目標(biāo)收聽(tīng)效果。相關(guān)性水平可以例如與目標(biāo)收聽(tīng)效果相關(guān)。所選記錄裝置可以例如是選自所述記錄裝置集，使得只有所選記錄裝置集的所選記錄裝置記錄的那些音頻信號(hào)的合并提供目標(biāo)收聽(tīng)效果。
在本發(fā)明的第一方面的第六實(shí)施方式中，所述所選記錄裝置集的所選記錄裝置基于相關(guān)性水平以及選擇規(guī)則來(lái)選擇，其中，所述選擇規(guī)則至少依賴(lài)于目標(biāo)收聽(tīng)效果并與相關(guān)性水平有關(guān)。所選記錄裝置可以是例如基于相關(guān)性水平和選擇規(guī)則被自動(dòng)選擇，例如由第一設(shè)備或其上要呈現(xiàn)一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)的第二設(shè)備選擇。選擇規(guī)則可以例如定義閾值，并要求具有高于或低于所述閾值的各個(gè)相關(guān)性水平的記錄裝置應(yīng)當(dāng)被選擇。選擇規(guī)則可以是例如預(yù)定義的選擇規(guī)則。對(duì)于不同的目標(biāo)收聽(tīng)效果，可以存在例如分別不同的選擇規(guī)則，這些選擇規(guī)則可以是例如預(yù)定義的。目標(biāo)收聽(tīng)效果可以是例如由用戶(hù)(例如由第二設(shè)備的用戶(hù))或由第二設(shè)備執(zhí)行的應(yīng)用等(示例不一而足)定義或者從目標(biāo)收聽(tīng)效果集選擇。可替換地，目標(biāo)收聽(tīng)效果可以是預(yù)定義的。選擇規(guī)則可以進(jìn)一步依賴(lài)于所測(cè)量/估計(jì)的記錄裝置的方位。在本發(fā)明第一方面的第六實(shí)施方式中，目標(biāo)收聽(tīng)效果可以是近端收聽(tīng)效果和遠(yuǎn)端收聽(tīng)效果之一。為了實(shí)現(xiàn)近端收聽(tīng)效果，例如只有被認(rèn)為接近音頻源的記錄裝置記錄的音頻信號(hào)才被合并，反之，為了實(shí)現(xiàn)遠(yuǎn)端收聽(tīng)效果，例如只有被認(rèn)為遠(yuǎn)離音頻源的記錄裝置記錄的音頻信號(hào)才被合并。在本發(fā)明第一方面的第六實(shí)施方式中，可以從至少兩個(gè)預(yù)定義的不同目標(biāo)收聽(tīng)效果集選擇目標(biāo)收聽(tīng)效果。目標(biāo)收聽(tīng)效果集可以例如包括至少遠(yuǎn)端和近端收聽(tīng)效果。所述選擇可以例如由其上將要呈現(xiàn)所述一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)的第二設(shè)備的用戶(hù)執(zhí)行，或由第二設(shè)備執(zhí)行的應(yīng)用執(zhí)行。根據(jù)本發(fā)明第一方面的第七實(shí)施方式，從同一記錄裝置集確定(通過(guò)選擇記錄裝置)至少部分不同的至少兩個(gè)所選記錄裝置集。所述不同的至少兩個(gè)所選記錄裝置集可以例如進(jìn)一步基于同一被記錄的音頻信號(hào)集來(lái)確定。所述不同的至少兩個(gè)所選記錄裝置集可以例如分別與不同的目標(biāo)收聽(tīng)效果關(guān)聯(lián)。設(shè)備(例如第二設(shè)備)可以例如提供關(guān)于期望哪個(gè)所選記錄裝置集的信息(例如通過(guò)提供關(guān)于期望的目標(biāo)收聽(tīng)效果的信息)，并進(jìn)而可以由例如要在該設(shè)備上呈現(xiàn)的第一設(shè)備產(chǎn)生(或者觸發(fā)產(chǎn)生)所期望的所選記錄裝置集的所選記錄裝置記錄的經(jīng)過(guò)合并的音頻信號(hào)。根據(jù)本發(fā)明的第二個(gè)方面，公開(kāi)了一種方法，包括在第二設(shè)備處接收一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)，所述音頻信號(hào)獲得自音頻場(chǎng)景中所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并，所述所選記錄裝置集的所選記錄裝置至少基于為記錄裝置集的記錄裝置確定的相關(guān)性水平選自記錄裝置集，在接收到所述音頻場(chǎng)景中所選記錄裝置記錄的音頻信號(hào)的合并之前，向第一設(shè)備提供關(guān)于所選記錄裝置集的信息和允許所述記錄裝置被所述第一設(shè)備選擇以獲得所選記錄裝置集的信息之一，其中，所述第一設(shè)備執(zhí)行產(chǎn)生對(duì)所選記錄裝置記錄的所述音頻信號(hào)的合并或引起所述合并之一。在本發(fā)明的該第二個(gè)方面，還公開(kāi)了一種計(jì)算機(jī)程序，其包括在處理器上執(zhí)行該計(jì)算機(jī)程序時(shí)用于執(zhí)行根據(jù)本發(fā)明第二方面的方法的程序代碼。所述計(jì)算機(jī)程序可以具有與已經(jīng)參照本發(fā)明第一方面的計(jì)算機(jī)程序解釋過(guò)的相同的屬性。在本發(fā)明的該第二個(gè)方面，還公開(kāi)了一種計(jì)算機(jī)可讀介質(zhì)，其上存儲(chǔ)有根據(jù)本發(fā)明第二方面的計(jì)算機(jī)程序。所述計(jì)算機(jī)可讀介質(zhì)可具有與參照本發(fā)明第一方面的計(jì)算機(jī)可讀介質(zhì)解釋過(guò)的相同的屬性。在本發(fā)明的該第二方面，還公開(kāi)了第一設(shè)備，其被配置為執(zhí)行根據(jù)本發(fā)明第二方面的方法。 在本發(fā)明的該第二方面，還公開(kāi)了第二設(shè)備，包括用于接收一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)的裝置，所述音頻信號(hào)獲得自音頻場(chǎng)景中所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并，所述所選記錄裝置集的所選記錄裝置至少基于為記錄裝置集的記錄裝置確定的相關(guān)性水平選自所述記錄裝置集，用于在接收到所述音頻場(chǎng)景中所選記錄裝置記錄的音頻信號(hào)的合并之前，向第一設(shè)備提供對(duì)所選記錄裝置記錄的音頻信號(hào)的合并的產(chǎn)生和引起之一，提供關(guān)于所選記錄裝置集的信息和關(guān)于允許所述記錄裝置被所述第一設(shè)備選擇以獲得所選記錄裝置集的信息之一的裝置。在本發(fā)明的第二方面，還公開(kāi)了第二設(shè)備，其包括至少一個(gè)處理器；以及包括計(jì)算機(jī)程序代碼的至少一個(gè)存儲(chǔ)器，所述至少一個(gè)存儲(chǔ)器和所述計(jì)算機(jī)程序代碼被配置為與所述至少一個(gè)處理器一起，引起所述第二設(shè)備至少接收一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)，所述音頻信號(hào)獲得自音頻場(chǎng)景中所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并，所述所選記錄裝置集的所選記錄裝置至少基于為記錄裝置集的記錄裝置確定的相關(guān)性水平選自所述記錄裝置集，以及在接收到所述音頻場(chǎng)景中所選記錄裝置記錄的音頻信號(hào)的合并之前，向第一設(shè)備提供對(duì)所選記錄裝置記錄的音頻信號(hào)的合并的產(chǎn)生和引起之一，提供關(guān)于所選記錄裝置集的信息和關(guān)于允許所述記錄裝置被所述第一設(shè)備選擇以獲得所選記錄裝置集的信息之一。根據(jù)本發(fā)明第二方面的第二設(shè)備可以例如是或者被包括在電子裝置(比如，舉例來(lái)講，音頻呈現(xiàn)裝置)中。這種電子裝置的非限制性示例是移動(dòng)電話(huà)、個(gè)人數(shù)字助理以及計(jì)算機(jī)。所述第二設(shè)備可以例如包括用戶(hù)接口和/或網(wǎng)絡(luò)接口(例如，用來(lái)與通信網(wǎng)絡(luò)(比如因特網(wǎng)、蜂窩通信系統(tǒng)以及WLAN，非限制性示例不一而足)對(duì)接)。應(yīng)當(dāng)注意到，本發(fā)明第二方面涉及分別用來(lái)補(bǔ)充根據(jù)本發(fā)明第一方面的方法、設(shè)備、計(jì)算機(jī)程序和計(jì)算機(jī)程序產(chǎn)品的方法、設(shè)備、計(jì)算機(jī)程序和計(jì)算機(jī)程序產(chǎn)品，從而本發(fā)明第一方面的上述描述被認(rèn)為也適用于本發(fā)明第二方面，并在此明確引用。同樣可行的是，本發(fā)明的第二個(gè)方面的描述也適用于本發(fā)明的第一個(gè)方面，并明確地被認(rèn)為也在本發(fā)明的第一個(gè)方面的上下文中予以了公開(kāi)，不過(guò)僅以非限制性的意義公開(kāi)。
在下文中，將描述本發(fā)明第二方面的具體特征和實(shí)施方式(展現(xiàn)了進(jìn)一步的特征)，它們被理解為同樣適用于上述本發(fā)明第二方面的方法、設(shè)備、計(jì)算機(jī)程序和計(jì)算機(jī)程序產(chǎn)品。這些單個(gè)的特征/實(shí)施方式被認(rèn)為是示例性的且非限制性的，并且可獨(dú)立于其他所公開(kāi)的特征/實(shí)施方式地分別可結(jié)合于上述本發(fā)明的第二方面。此外，這些特征/實(shí)施方式還應(yīng)被認(rèn)為對(duì)彼此之間以及與上述本發(fā)明第二方面所有可能的組合進(jìn)行了公開(kāi)。根據(jù)本發(fā)明第二方面，所述第二設(shè)備提供關(guān)于所述所選記錄裝置集的信息或允許所述記錄裝置被所述第一設(shè)備選擇以獲得所述所選記錄裝置集的信息，其中，所述第一設(shè)備是在其上產(chǎn)生或引起對(duì)所選記錄裝置記錄的音頻信號(hào)的合并的設(shè)備。響應(yīng)于該信息，所述第一設(shè)備于是可以產(chǎn)生或引起對(duì)所選記錄裝置記錄的音頻信號(hào)的合并，以獲得一個(gè)或多個(gè)經(jīng)過(guò)合并的音頻信號(hào)，并且這些經(jīng)過(guò)合并的音頻信號(hào)在所述第二設(shè)備處被接收。對(duì)記錄裝置的選擇以獲得所選記錄裝置集可以發(fā)生在第二設(shè)備處或第一設(shè)備處，或甚至在另外的設(shè)備處。例如，所述選擇可由第二設(shè)備的用戶(hù)執(zhí)行。同樣可行的是，所述選擇可在有或者沒(méi)有用戶(hù)輸入的情況下由第二設(shè)備自動(dòng)執(zhí)行(例如由第二設(shè)備執(zhí)行的應(yīng)用程 序執(zhí)行)。在第二設(shè)備處同樣可行的是，可以執(zhí)行(例如通過(guò)用戶(hù))從至少部分不同的至少兩個(gè)所選記錄裝置集進(jìn)行的選擇，并且關(guān)于所期望的所選記錄裝置集的信息于是可被提供給第一設(shè)備。還可能的是，在第二設(shè)備處用戶(hù)(或應(yīng)用)提供的信息，比如舉例來(lái)講關(guān)于目標(biāo)收聽(tīng)效果的信息，被作為所述選擇的基礎(chǔ)而提供給第一設(shè)備。在任何情況中，選擇是基于為記錄裝置集的記錄裝置確定的相關(guān)性水平，例如基于記錄裝置記錄的音頻信號(hào)，該音頻信號(hào)相對(duì)于被合并以獲得合并后的音頻信號(hào)的音頻信號(hào)可以相同或不同。根據(jù)本發(fā)明第二方面的第一實(shí)施方式，記錄裝置集是在至少考慮了音頻場(chǎng)景中期望的收聽(tīng)位置與所測(cè)量/估計(jì)的記錄裝置的位置間的位置關(guān)系的情況下，從多個(gè)記錄裝置得到的。對(duì)于進(jìn)一步的細(xì)節(jié)，這里明確引用對(duì)本發(fā)明第一方面的第一實(shí)施方式的描述。在本發(fā)明第二方面的第一實(shí)施方式中，關(guān)于所期望的收聽(tīng)位置的信息可以例如在第二設(shè)備處從第二設(shè)備的用戶(hù)或從第二設(shè)備執(zhí)行的應(yīng)用獲得。根據(jù)本發(fā)明第二方面的第二實(shí)施方式，相關(guān)性水平在第一設(shè)備處被確定并被提供給第二設(shè)備?？商鎿Q地，相關(guān)性水平也可以由另一設(shè)備得到并提供給第二設(shè)備。根據(jù)本發(fā)明第二方面的第三實(shí)施方式，記錄裝置的相關(guān)性水平至少基于記錄裝置記錄的音頻信號(hào)的表示間的相似性分析來(lái)確定。對(duì)于進(jìn)一步的細(xì)節(jié)，這里明確引用對(duì)本發(fā)明第一方面的第二實(shí)施方式的描述。根據(jù)本發(fā)明第二方面的第四實(shí)施方式，記錄裝置的相關(guān)性水平與記錄裝置記錄的音頻信號(hào)的表示相對(duì)于參考信號(hào)的延遲有關(guān)。對(duì)于進(jìn)一步細(xì)節(jié)，這里明確引用對(duì)本發(fā)明第一方面的第三實(shí)施方式的描述。根據(jù)本發(fā)明第二方面的第五實(shí)施方式，關(guān)于所選記錄裝置集的信息在第二設(shè)備處從第二設(shè)備的用戶(hù)或第二設(shè)備執(zhí)行的應(yīng)用獲得。用戶(hù)可以例如經(jīng)由用戶(hù)接口選擇記錄裝置，使得所選記錄裝置集在第二設(shè)備處可用并隨后提供給第一設(shè)備?？商鎿Q地，關(guān)于所選記錄裝置集的信息可以允許對(duì)不同的至少兩個(gè)所選記錄裝置集之一的標(biāo)識(shí)(例如通過(guò)第一設(shè)備進(jìn)行)，所述標(biāo)識(shí)可以例如在第一設(shè)備處確定和提供，并提供給第二設(shè)備。于是，在第一設(shè)備處，例如，可產(chǎn)生/引起關(guān)于不同的至少兩個(gè)所選記錄裝置集的音頻信號(hào)的各個(gè)合并(其可以例如分別是不同目標(biāo)收聽(tīng)效果的代表)，并且第二設(shè)備的用戶(hù)于是可通過(guò)提供關(guān)于所選記錄信號(hào)集的信息，來(lái)選擇哪些合并后的音頻信號(hào)應(yīng)當(dāng)通過(guò)第二設(shè)備而被接收(例如，根據(jù)與所選擇的那個(gè)所選再現(xiàn)裝置集關(guān)聯(lián)的目標(biāo)收聽(tīng)效果)。同樣可行的是，第一設(shè)備只產(chǎn)生/引起對(duì)所選擇的那個(gè)所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并。根據(jù)本發(fā)明第二方面的第六實(shí)施方式，所選記錄裝置集的所選記錄裝置選自所述記錄裝置集，使得對(duì)所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并提供目標(biāo)收聽(tīng)效果。對(duì)于進(jìn)一步的細(xì)節(jié)，這里明確引用對(duì)本發(fā)明第一方面的第六實(shí)施方式的描述。根據(jù)本發(fā)明第二方面的第七實(shí)施方式，在第二設(shè)備處呈現(xiàn)一個(gè)或多個(gè)合并后的音頻信號(hào)。為此，第二設(shè)備可以例如包括一個(gè)或多個(gè)揚(yáng)聲器或耳機(jī)。根據(jù)本發(fā)明第三方面，公開(kāi)了一種系統(tǒng)，其包括根據(jù)本發(fā)明第一方面的第一設(shè)備，以及根據(jù)本發(fā)明第二方面的第二設(shè)備。
應(yīng)該注意到，本發(fā)明第一和第二方面的上述描述被認(rèn)為同樣適用于本發(fā)明的第三方面，在此對(duì)其明確引用。從此后所提供的詳細(xì)描述，本發(fā)明的這些以及進(jìn)一步的概念將變得明顯，并結(jié)合此后所提供的詳細(xì)描述進(jìn)行了闡述。


附圖中示出了 圖I :其中根據(jù)本發(fā)明實(shí)施方式記錄音頻信號(hào)的音頻空間的示例；圖2 :根據(jù)本發(fā)明的一種實(shí)施方式的系統(tǒng)的示意性框圖；圖3 :根據(jù)本發(fā)明的一種實(shí)施方式的第一設(shè)備的示意性框圖；圖4 :根據(jù)本發(fā)明的一種實(shí)施方式的第二設(shè)備的示意性框圖；圖5 :根據(jù)本發(fā)明的一種實(shí)施方式有形存儲(chǔ)介質(zhì)的示意性圖示；圖6a :根據(jù)本發(fā)明的一種實(shí)施方式的第一設(shè)備執(zhí)行的方法的流程圖；圖6b :根據(jù)本發(fā)明的一種實(shí)施方式的第一設(shè)備執(zhí)行的方法的流程圖；圖6c :根據(jù)本發(fā)明的一種實(shí)施方式的第一設(shè)備執(zhí)行的方法的流程圖；圖7a :根據(jù)本發(fā)明的一種實(shí)施方式的第二設(shè)備執(zhí)行的方法的流程圖；圖7b :根據(jù)本發(fā)明的一種實(shí)施方式的第二設(shè)備執(zhí)行的方法的流程圖；圖7c :根據(jù)本發(fā)明的一種實(shí)施方式的第二設(shè)備執(zhí)行的方法的流程圖；圖8 :根據(jù)本發(fā)明的一種實(shí)施方式確定相關(guān)性水平的方法的流程圖；圖9 :根據(jù)本發(fā)明的一種實(shí)施方式的對(duì)多個(gè)信號(hào)分段的互相關(guān)的計(jì)算的示意性圖示；圖IOa :具有記錄裝置集的初始首頻場(chǎng)景的不例；圖IOb :圖IOa的音頻場(chǎng)景的經(jīng)過(guò)排列和轉(zhuǎn)換的表示；圖IOc :為了獲得近端收聽(tīng)效果而從圖IOb中選擇的記錄裝置；圖IOd :為了獲得遠(yuǎn)端收聽(tīng)效果而從圖IOb中選擇的記錄裝置；圖11 :指南針信息到角度信息的變換的慣例的示例；以及圖12 :具有方向/方位信息的經(jīng)過(guò)排列和轉(zhuǎn)換的音頻場(chǎng)景的示例。
具體實(shí)施例方式本發(fā)明與多裝置音頻捕獲有關(guān)。圖I中給出了相應(yīng)的“遠(yuǎn)程收聽(tīng)”應(yīng)用場(chǎng)景的示例。圖I描述了音頻空間I的一個(gè)示例，其中部署了多個(gè)記錄裝置10-L··· 10-12，以便記錄音頻場(chǎng)景。所述部署可以是例如任意進(jìn)行的或根據(jù)部署規(guī)則(例如根據(jù)規(guī)則網(wǎng)格)進(jìn)行的。記錄裝置10-1···10-12可以包括具有定向波束的麥克風(fēng)，但同樣可行的是，可以在部分或全部記錄裝置10-L··· 10-12中使用全向麥克風(fēng)或任何其他波束形狀。在音頻空間I中，示出了兩個(gè)聲音活動(dòng)中心11-1和11-2，它們可以例如被認(rèn)為代表音頻源。為了后文引用方便，還示出了期望的收聽(tīng)位置12以及該期望的收聽(tīng)位置周?chē)闹車(chē)鷧^(qū)域13。圖2示出了根據(jù)本發(fā)明的一個(gè)示例性實(shí)施方式的端到端系統(tǒng)2的示意性框圖。系統(tǒng)包括多個(gè)記錄裝置20 (對(duì)應(yīng)于圖I中的記錄裝置10-L··· 10-12)、音頻場(chǎng)景服務(wù)器21和呈現(xiàn)裝置22。記錄裝置20和音頻場(chǎng)景服務(wù)器21之間的信息經(jīng)由傳輸信道/網(wǎng)絡(luò)23來(lái)交換，而音頻場(chǎng)景服務(wù)器21和呈現(xiàn)裝置22之間的信息經(jīng)由傳輸信道/網(wǎng)絡(luò)24來(lái)交換。 于是每個(gè)記錄裝置20都可記錄(例如至少暫時(shí)連續(xù)地)音頻場(chǎng)景,例如響應(yīng)于被觸發(fā)(例如由音頻場(chǎng)景服務(wù)器21觸發(fā))或響應(yīng)于對(duì)其附近的音頻活動(dòng)的監(jiān)控來(lái)記錄，以及可以例如通過(guò)基于記錄裝置20和音頻場(chǎng)景服務(wù)器21都可用/接入的有線和/或無(wú)線數(shù)據(jù)網(wǎng)絡(luò)23的上傳/上行流，向音頻場(chǎng)景服務(wù)器21提供一個(gè)或多個(gè)所記錄的音頻信號(hào)。這種網(wǎng)絡(luò)的非限制性示例是WLAN、蜂窩通信系統(tǒng)或固定IP網(wǎng)絡(luò)或其組合。此外，可通過(guò)記錄裝置20將指示音頻信號(hào)在哪里被記錄以及記錄方向/方位的進(jìn)一步位置信息提供給音頻場(chǎng)景服務(wù)器21。其中，記錄裝置可每次記錄一個(gè)或多個(gè)音頻信號(hào)。于是這些音頻信號(hào)的記錄方向/方位可能不同。位置信息可以例如通過(guò)全球?qū)Ш叫l(wèi)星系統(tǒng)(GNSS)(類(lèi)似例如全球定位系統(tǒng)(GPS)或GALILEO或GL0NASS系統(tǒng))來(lái)獲得?？商鎿Q地，還可以例如基于三角測(cè)量方法來(lái)獲得位置信息，例如基于接收自具有已知位置的三個(gè)或更多源的(音頻/無(wú)線電)信號(hào)。記錄方向/方位可以例如獲得自指南針、加速計(jì)和/或陀螺儀信息。許多記錄裝置20在不同但接近的位置記錄音頻場(chǎng)景是有益的。音頻場(chǎng)景服務(wù)器21于是可以接收記錄裝置20記錄的音頻信號(hào)，并可對(duì)位置和關(guān)聯(lián)的方向/方位進(jìn)行追蹤。音頻場(chǎng)景服務(wù)器21可提供高水平坐標(biāo)，該坐標(biāo)對(duì)應(yīng)于被上傳/上行流的內(nèi)容可用于收聽(tīng)的位置。例如，這些高水平坐標(biāo)可作為地圖被提供給呈現(xiàn)裝置22的用戶(hù)，使得用戶(hù)能夠選擇期望的收聽(tīng)位置，比如圖I中的收聽(tīng)位置12。用戶(hù)或者例如用戶(hù)使用的應(yīng)用于是可負(fù)責(zé)確定所期望的收聽(tīng)位置，并且關(guān)于該期望的收聽(tīng)位置的信息于是可被提供給音頻場(chǎng)景服務(wù)器21。音頻場(chǎng)景服務(wù)器21現(xiàn)在可以基于這個(gè)期望的收聽(tīng)位置(見(jiàn)圖I中的位置12)和記錄裝置20的位置(例如圖I中的記錄裝置10-L··· 10-12)，確定哪些記錄裝置20位于該期望的收聽(tīng)位置附近(例如圖I中的記錄裝置10-6…10-12)，并且可以將這些記錄裝置記錄的音頻信號(hào)合并到合并后的音頻信號(hào)中，該合并后的音頻信號(hào)將被轉(zhuǎn)發(fā)(經(jīng)由傳輸信道/網(wǎng)絡(luò)24)給呈現(xiàn)裝置22用于呈現(xiàn)。然而，該方法可能有以下缺點(diǎn)記錄裝置20的定位(在GPS是大約I到15米的情況下)對(duì)于恰當(dāng)?shù)剡x擇真正在期望的收聽(tīng)點(diǎn)附近的記錄裝置20而言可能不準(zhǔn)確或不夠準(zhǔn)確。在對(duì)記錄裝置20的錯(cuò)誤位置測(cè)量/估計(jì)的情況下，不是位于期望的收聽(tīng)位置附近的記錄裝置20的音頻信號(hào)可能被合并到要由呈現(xiàn)裝置22呈現(xiàn)的合并后的音頻信號(hào)中，和/或?qū)嶋H處于非常接近期望的收聽(tīng)位置的記錄裝置20的音頻信號(hào)沒(méi)有被合并到要由呈現(xiàn)裝置20呈現(xiàn)的合并后的音頻信號(hào)中。此外，在一些情況下，記錄裝置20的位置信息可能根本不可用(例如，在室內(nèi)場(chǎng)景中GNSS通常不能正常工作)。此外，在不管記錄裝置20的(準(zhǔn)確的)位置信息是否可用的情況下，記錄裝置20的數(shù)量可能非常大，使得對(duì)所有這些記錄裝置20所記錄的音頻信號(hào)的合并可能變得在計(jì)算方面要求很高。復(fù)雜度可以例如通過(guò)隨機(jī)丟棄記錄裝置來(lái)降低；然而，這可能導(dǎo)致對(duì)音頻場(chǎng)景合成的非常小的控制以及極有可能導(dǎo)致合并后的音頻信號(hào)的感性降級(jí)。因而，本發(fā)明的實(shí)施方式通過(guò)確定記錄裝置的相關(guān)性水平引入了對(duì)記錄裝置的排列，相關(guān)性水平指示記錄裝置的感知重要性。至少基于相關(guān)性水平來(lái)確定所選記錄裝置集， 即，記錄裝置20的總數(shù)的一個(gè)子集，并且僅這些所選記錄裝置記錄的音頻信號(hào)被合并到要由呈現(xiàn)裝置22呈現(xiàn)(或存儲(chǔ)用于以后的呈現(xiàn))的合并后的音頻信號(hào)中。對(duì)記錄裝置的排列(相關(guān)性水平確定)使得不同的音頻場(chǎng)景合成能夠被創(chuàng)建并提供給呈現(xiàn)裝置22的用戶(hù)或呈現(xiàn)裝置22上運(yùn)行的應(yīng)用。其中，作為預(yù)處理階段，通過(guò)進(jìn)一步考慮僅僅被認(rèn)為處于接近所期望的收聽(tīng)位置——根據(jù)它們的測(cè)量/估計(jì)的位置——的那些記錄裝置20 (例如位于圖I中收聽(tīng)位置12周?chē)膮^(qū)域13內(nèi)的記錄裝置10-6…10-12)，仍然可以減少記錄裝置20 (例如，記錄裝置10-Ρ··10-12)的數(shù)量。然而，該步驟不是必須的。同樣可行的是，可以對(duì)所有可用的記錄裝置20執(zhí)行排列，并且選擇于是可基于所有這些記錄裝置20。其中，對(duì)將被包括到所選記錄裝置集中的記錄裝置的選擇(基于此，產(chǎn)生用于由呈現(xiàn)裝置22進(jìn)行呈現(xiàn)的合并后的音頻信號(hào))可以例如，由音頻場(chǎng)景服務(wù)器21執(zhí)行(例如基于目標(biāo)收聽(tīng)效果(表示具體的音頻場(chǎng)景收聽(tīng)方法)，這可以例如是預(yù)定義的、或選自不同備選的集、或呈現(xiàn)裝置22的用戶(hù)定義的)，或者由呈現(xiàn)裝置22執(zhí)行(例如基于目標(biāo)收聽(tīng)效果，這可以例如是預(yù)定義的、或選自不同備選的集、或是呈現(xiàn)裝置22的用戶(hù)定義的)，或者由呈現(xiàn)裝置22的用戶(hù)執(zhí)行。為了完成這點(diǎn)的音頻場(chǎng)景21和呈現(xiàn)裝置22間的相應(yīng)信息交換通過(guò)圖2中的雙向箭頭示出。還可能的情況是，音頻場(chǎng)景服務(wù)器向呈現(xiàn)裝置22提供多于一個(gè)的所選記錄裝置集(以及相應(yīng)地不同的收聽(tīng)效果)以便選擇。下文將提供關(guān)于該選擇過(guò)程的進(jìn)一步細(xì)節(jié)。排列(對(duì)相關(guān)性水平的確定)可以例如由音頻場(chǎng)景服務(wù)器21執(zhí)行。下文也將提供關(guān)于排列過(guò)程的進(jìn)一步的細(xì)節(jié)。由音頻場(chǎng)景服務(wù)器21執(zhí)行對(duì)所選記錄裝置記錄的音頻信號(hào)進(jìn)行的合并，并得到一個(gè)或多個(gè)合并后的音頻信號(hào)(所謂的“導(dǎo)演版”)，該合并后的音頻信號(hào)經(jīng)由傳輸信道/網(wǎng)絡(luò)(其可以例如至少部分上是基于因特網(wǎng)的)被轉(zhuǎn)發(fā)給呈現(xiàn)裝置22用于呈現(xiàn)。這些一(多)個(gè)合并后的音頻信號(hào)可以例如是單聲道、立體聲、雙耳或多聲道信號(hào)，示例不一而足。即使在記錄裝置通過(guò)音頻場(chǎng)景服務(wù)器21來(lái)選擇的情況下，相關(guān)性水平仍然可被提供給呈現(xiàn)裝置22，例如在對(duì)于端用戶(hù)來(lái)說(shuō)音頻場(chǎng)景的勘察是可行的情況下，例如為了增強(qiáng)收聽(tīng)效果。圖3是根據(jù)本發(fā)明的一種實(shí)施方式的設(shè)備3 (在權(quán)利要求中表示為“第一”設(shè)備)的示意性圖示。該設(shè)備3可以例如表示圖2中的音頻場(chǎng)景服務(wù)器21，或音頻場(chǎng)景服務(wù)器21的一部分。設(shè)備3尤其被配置為確定或接收所選記錄裝置集，以及執(zhí)行或引起對(duì)所選記錄裝置記錄的音頻信號(hào)的合并以獲得一個(gè)或多個(gè)合并后的音頻信號(hào)。設(shè)備3包括處理器30，該處理器30可以例如被實(shí)現(xiàn)為微處理器、數(shù)字信號(hào)處理器(DSP)、專(zhuān)用集成電路(ASIC)，非限制性示例不一而足。處理器30執(zhí)行存儲(chǔ)在程序存儲(chǔ)器31中的程序代碼，并使用主存儲(chǔ)器32作為工作存儲(chǔ)器，例如以便至少暫時(shí)地存儲(chǔ)中間結(jié)果，但也存儲(chǔ)例如預(yù)定義的參數(shù)。存儲(chǔ)器31和32中的一些或全部也可被包括到處理器30中。存儲(chǔ)器31和/或32可以例如被實(shí)現(xiàn)為只讀存儲(chǔ)器(ROM)、隨機(jī)訪問(wèn)存儲(chǔ)器(RAM)，非限制性示例不一而足。存儲(chǔ)器31和32中的一個(gè)或它們兩者可以被固定地連接到處理器30或可從處理器30移除，例如以存儲(chǔ)卡或棒的形式。處理器30進(jìn)一步控制被配置用于接收和/或輸出信息的通信接口 33。例如，通信接口 33可被配置為與圖2的音頻場(chǎng)景服務(wù)器21的其它組件、或與圖2的記錄裝置20、或與圖2的傳輸信道/網(wǎng)絡(luò)的組件(例如網(wǎng)絡(luò)節(jié)點(diǎn))交換信息。通信接口 33可進(jìn)一步被配置為與呈現(xiàn)裝置22或與傳輸信道/網(wǎng)絡(luò)24的組件(例如網(wǎng)絡(luò)節(jié)點(diǎn))交換信息?！?處理器30進(jìn)一步控制被配置為向設(shè)備3的用戶(hù)(例如向圖2的音頻場(chǎng)景服務(wù)器21的人員控制器)顯示信息和/或從這種用戶(hù)接收信息的可選用戶(hù)接口 34。圖4是根據(jù)本發(fā)明的一種實(shí)施方式的設(shè)備4 (在權(quán)利要求中表示為“第二”設(shè)備)的示意性圖示。該設(shè)備4可以例如表示圖2的呈現(xiàn)裝置22，或呈現(xiàn)裝置22的一部分。設(shè)備4尤其被配置為向音頻場(chǎng)景服務(wù)器21提供關(guān)于所選記錄裝置集的信息或允許記錄裝置被音頻場(chǎng)景服務(wù)器21選擇以獲得所選記錄裝置集的信息，以及被配置為從音頻場(chǎng)景服務(wù)器21接收從對(duì)所選記錄裝置記錄的音頻信號(hào)的合并獲得的合并后的音頻信號(hào)。設(shè)備4包括處理器40，該處理器40執(zhí)行存儲(chǔ)在程序存儲(chǔ)器41中的程序代碼，并使用主存儲(chǔ)器42作為工作存儲(chǔ)器，例如以便至少暫時(shí)地存儲(chǔ)中間結(jié)果，但也存儲(chǔ)例如預(yù)定義的參數(shù)。對(duì)于處理器40和存儲(chǔ)器41和42的具體實(shí)現(xiàn)，參見(jiàn)對(duì)圖3的設(shè)備3的處理器30和存儲(chǔ)器31和32的相應(yīng)描述。處理器40進(jìn)一步控制被配置為接收和/或輸出信息的通信接口 43。例如，通信接口 43可被配置為與圖2的呈現(xiàn)裝置22的其它組件、或與圖2的音頻場(chǎng)景服務(wù)器21、或與圖2的傳輸信道/網(wǎng)絡(luò)24的組件(例如網(wǎng)絡(luò)節(jié)點(diǎn))交換信息。處理器40進(jìn)一步控制被配置為向設(shè)備4的用戶(hù)(例如，向圖2的呈現(xiàn)裝置22的用戶(hù))顯示信息和/或從這種用戶(hù)接收信息的用戶(hù)接口 44。最后，處理器40進(jìn)一步控制被配置為呈現(xiàn)(例如播放)音頻信號(hào)尤其是設(shè)備4收到的合并后的音頻信號(hào)的呈現(xiàn)單元45。該呈現(xiàn)單元45可以例如包括一個(gè)或多個(gè)揚(yáng)聲器或耳機(jī)。設(shè)備3和4的組件形成的電路可被實(shí)現(xiàn)在單獨(dú)的硬件中、部分在硬件部分在軟件中、或只在軟件中，如本說(shuō)明書(shū)的結(jié)尾部分所描述的。圖5是根據(jù)本發(fā)明的一種實(shí)施方式的有形存儲(chǔ)介質(zhì)50的示意性圖示。該有形存儲(chǔ)介質(zhì)可以例如形成圖3的設(shè)備3的程序存儲(chǔ)器31的至少一部分，或圖4的設(shè)備4的程序存儲(chǔ)器41的至少一部分。該有形存儲(chǔ)介質(zhì)50可例如被實(shí)現(xiàn)為RAM或ROM存儲(chǔ)器，但同樣可以被實(shí)現(xiàn)為可移除式存儲(chǔ)器，類(lèi)似例如存儲(chǔ)卡或棒。有形存儲(chǔ)介質(zhì)50包括計(jì)算機(jī)程序51，計(jì)算機(jī)程序51包括程序代碼52。該程序代碼可以例如實(shí)施將在下文描述的圖6a-7c的流程圖100-600的方法。圖6a_6c表示根據(jù)本發(fā)明的各實(shí)施方式圖3的設(shè)備3執(zhí)行的方法的流程圖。在圖6a的流程圖100的步驟101中，記錄裝置被選擇以獲得所選記錄裝置集，或者關(guān)于所選記錄裝置集的信息被接收。在步驟102中，于是，對(duì)在步驟101中選擇或接收的所選記錄裝置記錄的音頻信號(hào)的合并被執(zhí)行或引起。圖6b的流程圖200針對(duì)記錄裝置由圖3的設(shè)備3選擇這一示例情況完善了圖6a的流程圖100的處理。在可選步驟201中，從多個(gè)記錄裝置得到記錄裝置集。該得到可以例如基于期望的收聽(tīng)位置，該期望的收聽(tīng)位置可以例如已經(jīng)接收自圖2的呈現(xiàn)裝置22 (例如，呈現(xiàn)裝置 22上正運(yùn)行的應(yīng)用或呈現(xiàn)裝置22的用戶(hù)所期望的收聽(tīng)位置)。于是，例如從圖I中示出的多個(gè)記錄裝置10-L··· 10-12，用在期望的收聽(tīng)位置周?chē)挠邢迏^(qū)域13中的記錄裝置10-6···10-12形成了記錄裝置10-6…10-12集。但是，如上文所述，該步驟201是可選的，這是因?yàn)榧词箾](méi)有位置信息可用或者即使這種信息不應(yīng)被限制性地使用，按本發(fā)明的實(shí)施方式執(zhí)行的排列和選擇對(duì)于記錄裝置的任何聯(lián)合(constellation)都起作用。如果不執(zhí)行步驟201,則所有可用的記錄裝置都被認(rèn)為構(gòu)成記錄裝置集。在步驟202中，關(guān)于記錄裝置集中的記錄裝置的各相關(guān)性水平被確定。這可通過(guò)將相似性分析函數(shù)應(yīng)用到記錄裝置記錄的音頻信號(hào)的表示來(lái)執(zhí)行。歸一化互相關(guān)是這種相似性分析函數(shù)的一個(gè)示例，其在下文的等式(2)中進(jìn)行了定義，并將在對(duì)圖8的描述中進(jìn)行進(jìn)一步的討論。G. C. Carter> A. H. Nutall 和 P. G. Cable 在題為 “The Smoothed CoherenceTransform (平滑相干變換)” (Proceedings of IEEE,第 61 卷，第 10 期,第 1497-1498 頁(yè)，1973年10月)中展現(xiàn)了相似性分析函數(shù)的一個(gè)替代性示例。該參考文獻(xiàn)中描述的平滑相干變換是加權(quán)互相關(guān)的傅里葉變換，其中，對(duì)于加權(quán)，可使用漢寧鐘形函數(shù)(Hanning bellfunction)。如上述參考文獻(xiàn)中所解釋的那樣，平滑相干變換可被用來(lái)確定兩個(gè)信號(hào)或過(guò)程(或如在本例中，對(duì)記錄裝置所記錄的音頻信號(hào)的表示)之間的延遲。R. Cusani 在題為 “Performance of Fast Time Delay Estimators (快速時(shí)間延遲估計(jì)器的性倉(cāng)泛)，，(IEEE Transactions on Acoustics, Speech, and Signal Processing,第37卷，第5期，第757-759頁(yè)，1989年5月)中展現(xiàn)了相似性分析函數(shù)的又一個(gè)可替代性示例。其中，例如，將要被互相關(guān)的兩個(gè)信號(hào)中的一個(gè)或它們兩者被其互相關(guān)中的硬限制版本替代。隨后可分析得到的函數(shù)，以確定將要在下文中參照歸一化互相關(guān)情況(見(jiàn)對(duì)圖8的討論)描述的延遲。平均幅度差函數(shù)(AMDF)是相似性分析函數(shù)的又一個(gè)可替換性示例，這例如描述在 J. Chen、J. Benesty 以及 Y. Huang 的題為 “Performance of GCC and AMDF Based TimeDelay Estimation in Practical Reverberant Environments (實(shí)際反身寸環(huán)境中基于 GCC和 AMDF 的時(shí)間延遲估計(jì)的性能)”(EURASIP Journal on Applied Signal Processing,第I卷，第25-36頁(yè)，2005年)中。AMDF對(duì)關(guān)于信號(hào)的不同移位的兩個(gè)信號(hào)之間的差的大小進(jìn)行分析。于是與AMDF的最小值關(guān)聯(lián)的移位指示兩個(gè)信號(hào)之間的延遲。在這篇文獻(xiàn)中，還展現(xiàn)了基于AMDF和互相關(guān)的組合的相似性分析函數(shù)。例如，通過(guò)AMDF的倒數(shù)對(duì)廣義互相關(guān)(GCC)函數(shù)(例如對(duì)應(yīng)于上述平滑相干變換)進(jìn)行加權(quán)。隨后可對(duì)得到的函數(shù)進(jìn)行分析，以確定將在下文參照歸一化互相關(guān)情況(見(jiàn)對(duì)圖8的討論)描述的延遲。回到圖6b的流程圖200，在步驟203中，接收關(guān)于目標(biāo)收聽(tīng)效果的信息，例如從圖2的呈現(xiàn)裝置22接收，其中，目標(biāo)收聽(tīng)效果(也可被稱(chēng)作目標(biāo)收聽(tīng)體驗(yàn))可以例如由用戶(hù)或應(yīng)用來(lái)指定。目標(biāo)收聽(tīng)效果可以例如被指定為近端或遠(yuǎn)端收聽(tīng)效果。在步驟204中，于是，來(lái)自記錄裝置集的記錄裝置被選擇，以獲得所選記錄裝置集。該選擇基于在步驟202中確定的相關(guān)性水平以及在步驟203中接收的關(guān)于目標(biāo)收聽(tīng)效果的信息。例如，依賴(lài)于目標(biāo)收聽(tīng)效果的選擇規(guī)則可在該選擇中被應(yīng)用。在步驟205中，所選記錄裝置記錄的音頻信號(hào)被合并，以獲得一個(gè)或多個(gè)合并后的音頻信號(hào)。在步驟206中，這些合并后的音頻信號(hào)于是被輸出到圖2的呈現(xiàn)裝置22以用于呈現(xiàn)。 圖6c的流程圖300針對(duì)記錄裝置由圖2的呈現(xiàn)裝置22的用戶(hù)選擇并隨后由圖3的設(shè)備3接收這一示例情況完善了圖6a的流程圖100的過(guò)程。其中，步驟301和302分別對(duì)應(yīng)于圖6b的流程圖200中的步驟201和202。在步驟303中，關(guān)于為記錄裝置確定的相關(guān)性水平的信息被提供給圖2的呈現(xiàn)裝置22。在呈現(xiàn)裝置22，用戶(hù)隨后可基于該信息執(zhí)行對(duì)記錄裝置的選擇。在步驟304中，相應(yīng)地，從圖2的呈現(xiàn)裝置22接收關(guān)于所選記錄裝置集的信息。步驟305和306分別對(duì)應(yīng)于圖6b的流程圖200的步驟205和206。圖7a_7c表示根據(jù)本發(fā)明的各實(shí)施方式圖4的設(shè)備4執(zhí)行的方法的流程圖。在圖7a的流程圖400的步驟401中，關(guān)于所選記錄裝置集的信息，或者允許記錄裝置被選擇以獲得所選記錄裝置集的信息，被提供給圖2的音頻場(chǎng)景服務(wù)器21。在步驟402中，于是，從圖2的音頻場(chǎng)景服務(wù)器21接收通過(guò)對(duì)所選記錄裝置記錄的音頻信號(hào)的合并而獲得的一個(gè)或多個(gè)合并后的音頻信號(hào)?，F(xiàn)在，圖7b的流程圖500針對(duì)記錄裝置由圖3的設(shè)備3基于圖4的設(shè)備4提供的目標(biāo)收聽(tīng)效果選擇這一示例情況完善了圖7a的流程圖400的過(guò)程。因此，流程圖500補(bǔ)充了圖6b的流程圖200。從而，在步驟501中，這種信息被提供給圖2的音頻場(chǎng)景服務(wù)器21。在步驟502中，從圖2的音頻場(chǎng)景服務(wù)器21接收一個(gè)或多個(gè)合并后的音頻信號(hào)。在步驟503中，所述一個(gè)或多個(gè)合并后的音頻信號(hào)被呈現(xiàn)。圖7c的流程圖600針對(duì)記錄裝置由圖2的呈現(xiàn)裝置22的用戶(hù)選擇并隨后通過(guò)圖3的設(shè)備3接收這一示例情況完善了圖7a的流程圖400的過(guò)程。因此，流程圖600補(bǔ)充了圖6c的流程圖300。在步驟601中，從圖2的音頻場(chǎng)景服務(wù)器21接收關(guān)于相關(guān)性水平的信息。在步驟602中，該信息被顯示給用戶(hù)(例如經(jīng)由設(shè)備4的用戶(hù)接口 44，見(jiàn)圖4)以便選擇，并且在步驟603中，從用戶(hù)(例如同樣經(jīng)由用戶(hù)接口 44)接收關(guān)于所選記錄裝置集的信息。在步驟604中，關(guān)于所選記錄裝置集的信息被提供給圖2的音頻場(chǎng)景服務(wù)器21。步驟605和606分別對(duì)應(yīng)于圖7b的流程圖500的步驟502和503。
在下文中，將詳細(xì)解釋圖6a_7c的流程圖中執(zhí)行的動(dòng)作。首先，將描述從多個(gè)記錄裝置(例如圖I的記錄裝置10-L··· 10-12)對(duì)記錄裝置集(例如圖I的記錄裝置10-6…10-12)的得到(見(jiàn)圖6b的流程圖200的步驟201和圖6c的流程圖300的步驟301)。記錄裝置集可被認(rèn)為是與期望的收聽(tīng)位置(例如圖I的收聽(tīng)位置12)關(guān)聯(lián)的“初始”音頻場(chǎng)景。它通過(guò)使用與記錄裝置關(guān)聯(lián)位置估計(jì)(例如GNSS信息)確定要被包括到音頻場(chǎng)景中的記錄裝置來(lái)形成。例如，這可根據(jù)以下步驟來(lái)執(zhí)行I.令收聽(tīng)位置為位置(X，y)2.設(shè)定 m=0 且 r=2 米3.找出被估計(jì)處于距離期望收聽(tīng)位置r米內(nèi)且尚未被包括在初始音頻場(chǎng)景中的記錄裝置。針對(duì)這些記錄裝置中的每個(gè)記錄裝置，增加變量m的值，其中變量m指示到目前為止被添加到初始音頻場(chǎng)景的記錄裝置數(shù)。 4.如果m〈M且KR，則r增加2米，回到步驟3 ;否則退出。(If m〈M and r<RIncrease r=r+2 metersGoto step 3ElseExit)。其中，對(duì)于r=2米的選擇只表示一種示例性選擇，同樣可以確定更小或更大的值，例如依賴(lài)以下描述的變量R。此外，還應(yīng)理解到，這里音頻場(chǎng)景的圓形也只是用作示例。同樣可以使用包括期望的收聽(tīng)點(diǎn)的任何其他區(qū)域形狀(例如期望規(guī)格的矩形或六角形區(qū)域)或者包括期望的收聽(tīng)點(diǎn)的任意形狀的區(qū)域，來(lái)確定與收聽(tīng)點(diǎn)關(guān)聯(lián)的音頻場(chǎng)景。變量M指示被允許進(jìn)入初始音頻場(chǎng)景的記錄裝置的最大數(shù)量(記錄裝置集)，且R指示被允許進(jìn)入初始音頻場(chǎng)景的記錄裝置距離期望的收聽(tīng)位置的最大估計(jì)距離。可替換地，例如，在選擇中僅考慮記錄裝置距離期望的收聽(tīng)位置的估計(jì)距離，即，在步驟4中只有r的值被考慮，不考慮當(dāng)前包括在音頻場(chǎng)景中的記錄裝置的數(shù)量m。應(yīng)該注意到的是，關(guān)于記錄裝置的位置信息可能并非總是可用。例如，對(duì)于室內(nèi)錄制而言，GNSS位置信息可能不可用。在該情況中，可以例如通過(guò)使用最后已知的GNSS位置(例如，記錄裝置可每T分鐘探測(cè)一次位置以保持位置總是被更新)和/或通過(guò)使用記錄裝置的用戶(hù)在對(duì)內(nèi)容進(jìn)行上傳/上行流時(shí)提供給音頻場(chǎng)景服務(wù)器的額外的元數(shù)據(jù)信息(例如記錄位置冰球中心，坦佩雷市)來(lái)確定估計(jì)位置，來(lái)形成初始音頻場(chǎng)景。一般而言，可替代性或補(bǔ)充位置估計(jì)方法可被用于主位置估計(jì)方法(例如本例中的GNSS)不能以足夠的準(zhǔn)確性/可靠性估計(jì)位置的情況中?，F(xiàn)在，將參考圖8更詳細(xì)的解釋對(duì)相關(guān)性水平的確定(見(jiàn)圖6b的流程圖200的步驟202以及圖6c的流程圖300的步驟302)，圖8示出了根據(jù)本發(fā)明用于確定相關(guān)性水平的示例性實(shí)施方式的流程圖700。在流程圖700的步驟701中，對(duì)記錄裝置集的記錄裝置記錄的音頻信號(hào)的表示被確定。就所涉及的所選記錄裝置而言，用于確定相關(guān)性水平的被記錄的音頻信號(hào)可以與被合并以獲得要由圖2的呈現(xiàn)裝置22呈現(xiàn)的一個(gè)或多個(gè)合并后的音頻信號(hào)的那些音頻信號(hào)相同。不過(guò)，也可使用分別在不同時(shí)間記錄的音頻信號(hào)。例如，如果在對(duì)音頻信號(hào)的記錄已經(jīng)完成之后，執(zhí)行對(duì)記錄裝置的選擇以便獲得所選記錄裝置集，那么對(duì)于相關(guān)性水平的確定和合并來(lái)說(shuō)，使用相同的被記錄的音頻信號(hào)是方便的(就涉及的所選記錄裝置而言)。相反的，如果期望對(duì)直播事件進(jìn)行遠(yuǎn)程收聽(tīng)，則對(duì)相關(guān)性水平的確定以及進(jìn)而對(duì)記錄裝置的選擇基于在確定/選擇之前被記錄的音頻信號(hào)，而對(duì)被記錄的音頻信號(hào)的合并是使用在確定/選擇之后被記錄的音頻信號(hào)來(lái)執(zhí)行(例如直播或僅有小延遲)是方便的。在步驟701中，如果被記錄的信號(hào)包括多個(gè)信道，則例如通過(guò)確定信道信號(hào)或信道信號(hào)的子集的平均，或通過(guò)只選擇信道信號(hào)中的一個(gè)信道信號(hào)，將信道轉(zhuǎn)換成單個(gè)信道表示。這產(chǎn)生了每個(gè)記錄裝置一個(gè)相應(yīng)的對(duì)被記錄的音頻信號(hào)的表示。形成該表示可進(jìn)一步包括將被記錄的音頻信號(hào)抽取成更低的數(shù)據(jù)率，以減少后續(xù)處理步驟的計(jì)算復(fù)雜度。例如，可通過(guò)對(duì)信號(hào)進(jìn)行低通濾波然后選取每個(gè)第F個(gè)過(guò)濾后的樣本，來(lái)實(shí)現(xiàn)抽取。在這種濾波器的一種實(shí)施方式中，帶通可以例如是大致O. 2倍的奈奎斯特頻率(也就是，被記錄的音頻信號(hào)的采樣率的一半)，而抑制頻帶可大致起始于O. 25倍的奈奎斯特頻率。在這種實(shí)施方式中，濾波器特性從而是F的值被設(shè)定為5。在流程圖700的步驟702中，于是參考信號(hào)被識(shí)別，并且記錄裝置記錄的音頻信號(hào)的表示相對(duì)于該參考信號(hào)的延遲被確定。其中，如下文解釋的那樣，通過(guò)分析在步驟701中確定的表示的所有對(duì)的互相關(guān)，來(lái)識(shí)別參考信號(hào)和獲得延遲。在該實(shí)施方式中，參考信號(hào)是對(duì)記錄裝置記錄的音頻信號(hào)的表示中的一個(gè)。通常，可計(jì)算兩個(gè)信號(hào)X和y之間的時(shí)間延遲τ xy，例如，根據(jù)下式
權(quán)利要求
1.一種方法，包括 通過(guò)第一設(shè)備選擇一個(gè)或多個(gè)記錄裝置以獲得所選記錄裝置集以及在所述第一設(shè)備處接收關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的信息兩者之一，所述所選記錄裝置集的所述所選記錄裝置至少基于為記錄裝置集的所述記錄裝置確定的相關(guān)性水平選自所述記錄裝置集，以及 通過(guò)所述第一設(shè)備執(zhí)行對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并以及通過(guò)所述第一設(shè)備引起對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并兩者之一，以獲得用于呈現(xiàn)的一個(gè)或多個(gè)合并后的音頻信號(hào)。
2.根據(jù)權(quán)利要求I所述的方法，其中，所述記錄裝置集是在至少考慮了所述音頻場(chǎng)景中期望的收聽(tīng)位置與所測(cè)量/估計(jì)的所述記錄裝置的位置之間的位置關(guān)系的情況下，從多個(gè)記錄裝置得到。
3.根據(jù)權(quán)利要求1-2中任一項(xiàng)所述的方法，其中，所述記錄裝置的所述相關(guān)性水平是至少基于對(duì)所述記錄裝置記錄的音頻信號(hào)的表示之間的相似性的分析來(lái)確定。
4.根據(jù)權(quán)利要求1-3中任一項(xiàng)所述的方法，其中，所述記錄裝置的所述相關(guān)性水平與所述記錄裝置記錄的音頻信號(hào)的表示相對(duì)于參考信號(hào)的延遲有關(guān)。
5.根據(jù)權(quán)利要求4所述的方法，其中，所述參考信號(hào)是從所述記錄裝置記錄的所述音頻信號(hào)的所述表示確定的，所述參考信號(hào)被確定為，在所有所述表示中，相對(duì)于其它表示展現(xiàn)出相似性分析函數(shù)的各個(gè)極值之和最大的那個(gè)表示。
6.根據(jù)權(quán)利要求4-5中任一項(xiàng)所述的方法，其中，所述記錄裝置的所述相關(guān)性水平是通過(guò)將所述延遲分成分別表示所述相關(guān)性水平的組來(lái)確定的。
7.根據(jù)權(quán)利要求1-6中任一項(xiàng)所述的方法，包括對(duì)關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的所述信息的所述接收，其中，所選記錄裝置集的所述所選記錄裝置是在其上將要呈現(xiàn)所述一個(gè)或多個(gè)合并后的音頻信號(hào)的第二設(shè)備處被選擇。
8.根據(jù)權(quán)利要求7所述的方法，其中，所述相關(guān)性水平通過(guò)所述第一設(shè)備來(lái)確定，并被提供給所述第二設(shè)備，作為用來(lái)選擇所選記錄裝置集的所述所選記錄裝置的至少部分基礎(chǔ)。
9.根據(jù)權(quán)利要求1-6中任一項(xiàng)所述的方法，包括對(duì)所述一個(gè)或多個(gè)記錄裝置的所述選擇，以便獲得所述所選記錄裝置集，其中，所述相關(guān)性水平通過(guò)所述第一設(shè)備來(lái)確定。
10.根據(jù)權(quán)利要求1-9中任一項(xiàng)所述的方法，其中，所述所選記錄裝置集中的所述所選記錄裝置選自所述記錄裝置集，使得對(duì)所述所選記錄裝置集的所述所選記錄裝置記錄的音頻信號(hào)的合并提供目標(biāo)收聽(tīng)效果。
11.根據(jù)權(quán)利要求10所述的方法，其中，所述所選記錄裝置集的所述所選記錄裝置基于所述相關(guān)性水平和選擇規(guī)則被選擇，其中，所述選擇規(guī)則至少依賴(lài)于所述目標(biāo)收聽(tīng)效果并與所述相關(guān)性水平有關(guān)。
12.根據(jù)權(quán)利要求10-11中任一項(xiàng)所述的方法，其中，所述目標(biāo)收聽(tīng)效果是近端收聽(tīng)效果和遠(yuǎn)端收聽(tīng)效果之一。
13.根據(jù)權(quán)利要求10-12中任一項(xiàng)所述的方法，其中，所述目標(biāo)收聽(tīng)效果選自至少兩個(gè)預(yù)定義的不同目標(biāo)收聽(tīng)效果的集合。
14.根據(jù)權(quán)利要求1-13中任一項(xiàng)所述的方法，其中，至少部分不同的至少兩個(gè)所選記錄裝置集被從同一記錄裝置集確定。
15.一種方法，包括 在第二設(shè)備處接收一個(gè)或多個(gè)合并后的音頻信號(hào)，所述音頻信號(hào)是從對(duì)音頻場(chǎng)景中所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并獲得的，所述所選記錄裝置集中的所述所選記錄裝置至少基于為記錄裝置集的所述記錄裝置確定的相關(guān)性水平，選自所述記錄裝置集， 在收到所述音頻場(chǎng)景中所選記錄裝置記錄的所述音頻信號(hào)的所述合并之前，向第一設(shè)備提供產(chǎn)生和引起對(duì)所述所選記錄裝置記錄的所述音頻信號(hào)的所述合并兩者之一，提供關(guān)于所述所選記錄裝置集的信息和允許所述記錄裝置被所述第一設(shè)備選擇以獲得所述所選記錄裝置集的信息兩者之一。
16.根據(jù)權(quán)利要求15所述的方法，其中，所述記錄裝置集是在至少考慮了所述音頻場(chǎng)景中期望的收聽(tīng)位置與所測(cè)量/估計(jì)的所述記錄裝置的位置之間的位置關(guān)系的情況下，從多個(gè)記錄裝置得到。
17.根據(jù)權(quán)利要求16所述的方法，其中，關(guān)于所述期望的收聽(tīng)位置的信息是在所述第二設(shè)備處從所述第二設(shè)備的用戶(hù)和所述第二設(shè)備執(zhí)行的應(yīng)用兩者之一獲得。
18.根據(jù)權(quán)利要求15-17中任一項(xiàng)所述的方法，其中，所述相關(guān)性水平在所述第一設(shè)備處確定，并被提供給所述第二設(shè)備。
19.根據(jù)權(quán)利要求15-18中任一項(xiàng)所述的方法，其中，所述記錄裝置的所述相關(guān)性水平是至少基于對(duì)所述記錄裝置記錄的音頻信號(hào)的表示之間的相似性的分析來(lái)確定。
20.根據(jù)權(quán)利要求15-19中任一項(xiàng)所述的方法，其中，所述記錄裝置的所述相關(guān)性水平與所述記錄裝置記錄的音頻信號(hào)的表示相對(duì)于參考信號(hào)的延遲有關(guān)。
21.根據(jù)權(quán)利要求20所述的方法，其中，所述參考信號(hào)是從所述記錄裝置記錄的所述音頻信號(hào)的所述表不確定的，所述參考信號(hào)被確定為，在所有所述表不中，相對(duì)于其它表不展現(xiàn)出相似性分析函數(shù)的各個(gè)極值之和最大的那個(gè)表示。
22.根據(jù)權(quán)利要求20-21中任一項(xiàng)所述的方法，其中，所述記錄裝置的每個(gè)記錄裝置的所述相關(guān)性水平都是通過(guò)將所述延遲分成分別表示所述相關(guān)性水平的組來(lái)確定的。
23.根據(jù)權(quán)利要求15-22中任一項(xiàng)所述的方法，其中，關(guān)于所選記錄裝置集的所述信息是在所述第二設(shè)備處從所述第二設(shè)備的用戶(hù)和所述第二設(shè)備執(zhí)行的應(yīng)用兩者之一獲得。
24.根據(jù)權(quán)利要求23所述的方法，其中，關(guān)于所述所選記錄裝置集的所述信息允許對(duì)不同的至少兩個(gè)所選記錄裝置集中的一個(gè)所選記錄裝置集進(jìn)行標(biāo)識(shí)。
25.根據(jù)權(quán)利要求15-22中任一項(xiàng)所述的方法，其中，所述所選記錄裝置集中的所述所選記錄裝置選自所述記錄裝置集，使得對(duì)所述所選記錄裝置集的所述所選記錄裝置記錄的音頻信號(hào)的合并提供目標(biāo)收聽(tīng)效果。
26.根據(jù)權(quán)利要求25所述的方法，其中，所述所選記錄裝置集的所述所選記錄裝置基于選擇規(guī)則被選擇，其中，所述選擇規(guī)則至少依賴(lài)于所述目標(biāo)收聽(tīng)效果并與所述相關(guān)性水平有關(guān)。
27.根據(jù)權(quán)利要求25-26中任一項(xiàng)所述的方法，其中，關(guān)于所述目標(biāo)收聽(tīng)效果的信息在所述第二設(shè)備處從所述第二設(shè)備的用戶(hù)和所述第二設(shè)備執(zhí)行的應(yīng)用兩者之一獲得。
28.根據(jù)權(quán)利要求25-27中任一項(xiàng)所述的方法，其中，所述目標(biāo)收聽(tīng)效果是近端目標(biāo)收聽(tīng)效果和遠(yuǎn)端目標(biāo)收聽(tīng)效果之一。
29.根據(jù)權(quán)利要求25-28中任一項(xiàng)所述的方法，其中，所述目標(biāo)收聽(tīng)效果選自至少兩個(gè)預(yù)定義的不同目標(biāo)收聽(tīng)效果的集合。
30.根據(jù)權(quán)利要求15-29中任一項(xiàng)所述的方法，其中，所述一個(gè)或多個(gè)合并后的音頻信號(hào)在所述第二設(shè)備處被呈現(xiàn)。
31.一種第一設(shè)備，包括至少一個(gè)處理器；以及包含計(jì)算機(jī)程序代碼的至少一個(gè)存儲(chǔ)器，所述至少一個(gè)存儲(chǔ)器和所述計(jì)算機(jī)程序代碼被配置為，與所述至少一個(gè)處理器一起，弓丨起所述第一設(shè)備至少 選擇一個(gè)或多個(gè)記錄裝置以獲得所選記錄裝置集以及接收關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的信息兩者之一，所述所選記錄裝置集的所述所選記錄裝置至少基于為記錄裝置集的所述記錄裝置確定的相關(guān)性水平選自所述記錄裝置集，以及 執(zhí)行對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并以及引起對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并兩者之一，以獲得用于呈現(xiàn)的一個(gè)或多個(gè)合并后的音頻信號(hào)。
32.—種第一設(shè)備,包括 用于選擇一個(gè)或多個(gè)記錄裝置以獲得所選記錄裝置集以及接收關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的信息兩者之一的裝置，所述所選記錄裝置集的所述所選記錄裝置至少基于為記錄裝置集的所述記錄裝置確定的相關(guān)性水平選自所述記錄裝置集，以及 用于執(zhí)行對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并以及引起對(duì)音頻場(chǎng)景中所述所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并兩者之一，以獲得用于呈現(xiàn)的一個(gè)或多個(gè)合并后的音頻信號(hào)的裝置。
33.根據(jù)權(quán)利要求31-32中任一項(xiàng)所述的第一設(shè)備，其中，所述記錄裝置集是在至少考慮了所述音頻場(chǎng)景中期望的收聽(tīng)位置與所測(cè)量/估計(jì)的所述記錄裝置的位置之間的位置關(guān)系的情況下，從多個(gè)記錄裝置得到。
34.根據(jù)權(quán)利要求31-33中任一項(xiàng)所述的第一設(shè)備，其中，所述記錄裝置的所述相關(guān)性水平是至少基于對(duì)所述記錄裝置記錄的音頻信號(hào)的表示之間的相似性的分析來(lái)確定。
35.根據(jù)權(quán)利要求31-34中任一項(xiàng)所述的第一設(shè)備，其中，所述記錄裝置的所述相關(guān)性水平與所述記錄裝置記錄的音頻信號(hào)的表示相對(duì)于參考信號(hào)的延遲有關(guān)。
36.根據(jù)權(quán)利要求35所述的第一設(shè)備，其中，所述參考信號(hào)是從所述記錄裝置記錄的所述音頻信號(hào)的所述表示確定的，所述參考信號(hào)被確定為，在所有所述表示中，相對(duì)于其它表示展現(xiàn)出相似性分析函數(shù)的各個(gè)極值之和最大的那個(gè)表示。
37.根據(jù)權(quán)利要求35-36中任一項(xiàng)所述的第一設(shè)備，其中，所述記錄裝置的所述相關(guān)性水平是通過(guò)將所述延遲分成分別表示所述相關(guān)性水平的組來(lái)確定的。
38.根據(jù)權(quán)利要求31-37中任一項(xiàng)所述的第一設(shè)備，其中，關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的所述信息被接收，并且其中，所選記錄裝置集的所述所選記錄裝置是在其上將要呈現(xiàn)所述一個(gè)或多個(gè)合并后的音頻信號(hào)的第二設(shè)備處被選擇。
39.根據(jù)權(quán)利要求38所述的第一設(shè)備，其中，所述相關(guān)性水平通過(guò)所述第一設(shè)備來(lái)確定，并被提供給所述第二設(shè)備，作為用來(lái)選擇所選記錄裝置集的所述所選記錄裝置的至少部分基礎(chǔ)。
40.根據(jù)權(quán)利要求31-37中任一項(xiàng)所述的第一設(shè)備，其中所述一個(gè)或多個(gè)記錄裝置被選擇，以便在所述第一設(shè)備處獲得所述所選記錄裝置集，其中，所述相關(guān)性水平通過(guò)所述第一設(shè)備來(lái)確定。
41.根據(jù)權(quán)利要求31-40中任一項(xiàng)所述的第一設(shè)備，其中，所述所選記錄裝置集中的所述所選記錄裝置選自所述記錄裝置集，使得對(duì)所述所選記錄裝置集的所述所選記錄裝置記錄的音頻信號(hào)的合并提供目標(biāo)收聽(tīng)效果。
42.根據(jù)權(quán)利要求41所述的第一設(shè)備，其中，所述所選記錄裝置集的所述所選記錄裝置基于所述相關(guān)性水平和選擇規(guī)則被選擇，其中，所述選擇規(guī)則至少依賴(lài)于所述目標(biāo)收聽(tīng)效果并與所述相關(guān)性水平有關(guān)。
43.根據(jù)權(quán)利要求41-42中任一項(xiàng)所述的第一設(shè)備，其中，所述目標(biāo)收聽(tīng)效果是近端收聽(tīng)效果和遠(yuǎn)端收聽(tīng)效果之一。
44.根據(jù)權(quán)利要求41-43中任一項(xiàng)所述的第一設(shè)備，其中，所述目標(biāo)收聽(tīng)效果選自至少兩個(gè)預(yù)定義的不同目標(biāo)收聽(tīng)效果的集合。
45.根據(jù)權(quán)利要求31-44中任一項(xiàng)所述的第一設(shè)備，其中，至少部分不同的至少兩個(gè)所選記錄裝置集被從同一記錄裝置集確定。
46.一種第二設(shè)備，包括至少一個(gè)處理器；以及包含計(jì)算機(jī)程序代碼的至少一個(gè)存儲(chǔ)器，所述至少一個(gè)存儲(chǔ)器和所述計(jì)算機(jī)程序代碼被配置為，與所述至少一個(gè)處理器一起，弓丨起所述第二設(shè)備至少 接收一個(gè)或多個(gè)合并后的音頻信號(hào)，所述音頻信號(hào)是從對(duì)音頻場(chǎng)景中所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并獲得的，所述所選記錄裝置集中的所述所選記錄裝置至少基于為記錄裝置集的所述記錄裝置確定的相關(guān)性水平，選自所述記錄裝置集， 在收到所述音頻場(chǎng)景中所選記錄裝置記錄的所述音頻信號(hào)的所述合并之前，向第一設(shè)備提供產(chǎn)生和引起對(duì)所述所選記錄裝置記錄的所述音頻信號(hào)的所述合并兩者之一，提供關(guān)于所述所選記錄裝置集的信息和允許所述記錄裝置被所述第一設(shè)備選擇以獲得所述所選記錄裝置集的信息兩者之一。
47.一種第二設(shè)備，包括 用于接收一個(gè)或多個(gè)合并后的音頻信號(hào)的裝置，所述音頻信號(hào)是從對(duì)音頻場(chǎng)景中所選記錄裝置集的所選記錄裝置記錄的音頻信號(hào)的合并獲得的，所述所選記錄裝置集中的所述所選記錄裝置至少基于為記錄裝置集的所述記錄裝置確定的相關(guān)性水平，選自所述記錄裝置集， 用于在收到所述音頻場(chǎng)景中所選記錄裝置記錄的所述音頻信號(hào)的所述合并之前，向第一設(shè)備提供產(chǎn)生和引起對(duì)所述所選記錄裝置記錄的所述音頻信號(hào)的所述合并兩者之一，提供關(guān)于所述所選記錄裝置集的信息和允許所述記錄裝置被所述第一設(shè)備選擇以獲得所述所選記錄裝置集的信息兩者之一的裝置。
48.根據(jù)權(quán)利要求46-47中任一項(xiàng)所述的第二設(shè)備，其中，所述記錄裝置集是在至少考慮了所述音頻場(chǎng)景中期望的收聽(tīng)位置與所測(cè)量/估計(jì)的所述記錄裝置的位置之間的位置關(guān)系的情況下，從多個(gè)記錄裝置得到。
49.根據(jù)權(quán)利要求48所述的第二設(shè)備，其中，關(guān)于所述期望的收聽(tīng)位置的信息是在所述第二設(shè)備處從所述第二設(shè)備的用戶(hù)和所述第二設(shè)備執(zhí)行的應(yīng)用兩者之一獲得。
50.根據(jù)權(quán)利要求46-49中任一項(xiàng)所述的第二設(shè)備，其中，所述相關(guān)性水平在所述第一設(shè)備處確定，并被提供給所述第二設(shè)備。
51.根據(jù)權(quán)利要求46-50中任一項(xiàng)所述的第二設(shè)備，其中，所述記錄裝置的所述相關(guān)性水平是至少基于對(duì)所述記錄裝置記錄的音頻信號(hào)的表示之間的相似性的分析來(lái)確定。
52.根據(jù)權(quán)利要求46-51中任一項(xiàng)所述的第二設(shè)備，其中，所述記錄裝置的所述相關(guān)性水平與所述記錄裝置記錄的音頻信號(hào)的表示相對(duì)于參考信號(hào)的延遲有關(guān)。
53.根據(jù)權(quán)利要求52所述的第二設(shè)備，其中，所述參考信號(hào)是從所述記錄裝置記錄的所述音頻信號(hào)的所述表示確定的，所述參考信號(hào)被確定為，在所有所述表示中，相對(duì)于其它表示展現(xiàn)出相似性分析函數(shù)的各個(gè)極值之和最大的那個(gè)表示。
54.根據(jù)權(quán)利要求52-53中任一項(xiàng)所述的第二設(shè)備，其中，所述記錄裝置的每個(gè)記錄裝置的所述相關(guān)性水平都是通過(guò)將所述延遲分成分別表示所述相關(guān)性水平的組來(lái)確定的。
55.根據(jù)權(quán)利要求46-54中任一項(xiàng)所述的第二設(shè)備，其中，關(guān)于所選記錄裝置集的所述信息是在所述第二設(shè)備處從所述第二設(shè)備的用戶(hù)和所述第二設(shè)備執(zhí)行的應(yīng)用兩者之一獲得。
56.根據(jù)權(quán)利要求55所述的第二設(shè)備，其中，關(guān)于所述所選記錄裝置集的所述信息允許對(duì)不同的至少兩個(gè)所選記錄裝置集中的一個(gè)所選記錄裝置集進(jìn)行標(biāo)識(shí)。
57.根據(jù)權(quán)利要求46-54中任一項(xiàng)所述的第二設(shè)備，其中，所述所選記錄裝置集中的所述所選記錄裝置選自所述記錄裝置集，使得對(duì)所述所選記錄裝置集的所述所選記錄裝置記錄的音頻信號(hào)的合并提供目標(biāo)收聽(tīng)效果。
58.根據(jù)權(quán)利要求57所述的第二設(shè)備，其中，所述所選記錄裝置集的所述所選記錄裝置基于選擇規(guī)則被選擇，其中，所述選擇規(guī)則至少依賴(lài)于所述目標(biāo)收聽(tīng)效果并與所述相關(guān)性水平有關(guān)。
59.根據(jù)權(quán)利要求57-58中任一項(xiàng)所述的第二設(shè)備，其中，關(guān)于所述目標(biāo)收聽(tīng)效果的信息在所述第二設(shè)備處從所述第二設(shè)備的用戶(hù)和所述第二設(shè)備執(zhí)行的應(yīng)用兩者之一獲得。
60.根據(jù)權(quán)利要求57-59中任一項(xiàng)所述的第二設(shè)備，其中，所述目標(biāo)收聽(tīng)效果是近端目標(biāo)收聽(tīng)效果和遠(yuǎn)端目標(biāo)收聽(tīng)效果之一。
61.根據(jù)權(quán)利要求57-60中任一項(xiàng)所述的第二設(shè)備，其中，所述目標(biāo)收聽(tīng)效果選自至少兩個(gè)預(yù)定義的不同目標(biāo)收聽(tīng)效果的集合。
62.根據(jù)權(quán)利要求46-61中任一項(xiàng)所述的第二設(shè)備，其中，所述一個(gè)或多個(gè)合并后的音頻信號(hào)在所述第二設(shè)備處被呈現(xiàn)。
63.一種被配置用于執(zhí)行根據(jù)權(quán)利要求1-30中任一項(xiàng)所述的方法的設(shè)備。
64.根據(jù)權(quán)利要求31-63中任一項(xiàng)所述的設(shè)備，進(jìn)一步包括用戶(hù)接口和網(wǎng)絡(luò)接口之一。
65.—種系統(tǒng),包括 根據(jù)權(quán)利要求31-45中任一項(xiàng)所述的第一設(shè)備，以及 根據(jù)權(quán)利要求46-62中任一項(xiàng)所述的第二設(shè)備。
66.一種計(jì)算機(jī)程序，包括 當(dāng)計(jì)算機(jī)程序在處理器上執(zhí)行時(shí)用于執(zhí)行根據(jù)權(quán)利要求1-30中任一項(xiàng)所述的方法的程序代碼。
67.一種計(jì)算機(jī)可讀介質(zhì)，其上存儲(chǔ)有根據(jù)權(quán)利要求66的計(jì)算機(jī)程序。
全文摘要
尤其公開(kāi)了通過(guò)第一設(shè)備(21)選擇一個(gè)或多個(gè)記錄裝置(20)以獲得所選記錄裝置集，或者在所述第一設(shè)備(21)處接收關(guān)于一個(gè)或多個(gè)所選記錄裝置的集的信息。所述所選記錄裝置集中的所述所選記錄裝置至少基于為所述記錄裝置集的所述記錄裝置確定的相關(guān)性水平，選自所述記錄裝置集。通過(guò)所述第一設(shè)備(21)執(zhí)行或引起對(duì)音頻場(chǎng)景中所選記錄裝置集的所述所選記錄裝置記錄的音頻信號(hào)的合并，以獲得用于呈現(xiàn)的一個(gè)或多個(gè)合并后的音頻信號(hào)。
文檔編號(hào)H04R3/00GK102763432SQ201080064131
公開(kāi)日2012年10月31日 申請(qǐng)日期2010年2月17日 優(yōu)先權(quán)日2010年2月17日
發(fā)明者J·P·奧揚(yáng)佩雷 申請(qǐng)人:諾基亞公司