本技術(shù)涉及傳感器裝置和傳感器控制系統(tǒng)中的控制方法，并且具體涉及傳感器裝置之間的處理分配技術(shù)，該傳感器裝置包括ai處理單元，該ai處理單元對(duì)拍攝圖像執(zhí)行作為使用ai模型的處理的ai處理；該傳感器控制系統(tǒng)包括多個(gè)傳感器裝置。

背景技術(shù)：

1、可以設(shè)想使用成像裝置(在下文中，稱為“ai相機(jī)”)的解決方案業(yè)務(wù)，該成像裝置對(duì)捕捉圖像執(zhí)行ai處理，該ai處理是使用人工智能(ai)模型的處理。例如，可能存在提供這樣一種系統(tǒng)的企業(yè)，在該系統(tǒng)中，在商店內(nèi)布置一個(gè)或多個(gè)ai相機(jī)，通過例如圖像識(shí)別處理獲得關(guān)于顧客的屬性(例如，性別、年齡組等)和行為模式的識(shí)別結(jié)果，并且通過互聯(lián)網(wǎng)等將識(shí)別結(jié)果呈現(xiàn)給用戶。

2、因?yàn)樵赼i相機(jī)側(cè)執(zhí)行ai處理，所以與服務(wù)器裝置側(cè)基于從各相機(jī)獲取的拍攝圖像執(zhí)行ai處理的系統(tǒng)相比，可以分配處理，并且可以減少通信數(shù)據(jù)量。

3、注意，下面的專利文獻(xiàn)1可以作為現(xiàn)有技術(shù)被引用。下面的專利文獻(xiàn)1公開了一種傳感器裝置，其中包括像素陣列單元的第一基板和包括ai處理單元的第二基板被層壓，ai處理單元對(duì)基于由像素陣列單元的光接收操作獲得的拍攝圖像執(zhí)行ai處理。

4、引用列表

5、專利文獻(xiàn)

6、專利文獻(xiàn)1：日本專利申請(qǐng)第2020-25263號(hào)

技術(shù)實(shí)現(xiàn)思路

1、本發(fā)明要解決的問題

2、這里，從降低功耗和實(shí)現(xiàn)實(shí)時(shí)ai處理的觀點(diǎn)來看，具有其中如上所述層壓包括像素陣列單元的第一基板(第一半導(dǎo)體層)和包括ai處理單元的第二基板(第二半導(dǎo)體層)的結(jié)構(gòu)的傳感器裝置(在下文中，稱為“層壓ai傳感器”)是有利的。此外，因?yàn)閷訅旱腶i傳感器在對(duì)捕捉圖像執(zhí)行ai處理時(shí)能夠使捕捉圖像難以流出到傳感器的外部，所以從保護(hù)對(duì)象的隱私并且通過在傳感器中閉合防止知識(shí)泄露的觀點(diǎn)來看也具有優(yōu)勢(shì)。

3、然而，由于包括像素陣列單元的第一半導(dǎo)體層和包括ai處理單元的第二半導(dǎo)體層被層壓的結(jié)構(gòu)，層壓的ai傳感器具有以下問題。

4、·由第二半導(dǎo)體層中的功率變化引起的電磁噪聲引起的圖像質(zhì)量劣化

5、·伴隨熱值增加的熱膨脹量的差異引起的翹曲問題

6、·由于熱值的增加而增加傳感器的熱噪聲(過熱)

7、為了減少上述問題，通常，層壓的ai傳感器趨于針對(duì)像素的能力(像素?cái)?shù))使用ai處理單元的低規(guī)格算術(shù)單元，并且對(duì)于足夠的圖像信息的可能的處理限于具有小的計(jì)算成本(諸如計(jì)數(shù)或臉部識(shí)別)的函數(shù)。此外，由于使用低規(guī)格運(yùn)算單元，所以ai處理的速度也趨于降低。

8、鑒于上述情況，提出了本技術(shù)，并且本技術(shù)的目的是通過提高用于作為層壓ai傳感器的傳感器裝置的ai處理單元的處理效率來增強(qiáng)和加速ai處理功能以及提高ai處理的穩(wěn)健性。

9、問題的解決方案

10、根據(jù)本技術(shù)的傳感器裝置包括其中第一半導(dǎo)體層包括圖像陣列單元的結(jié)構(gòu)，在圖像陣列單元中，二維地布置具有光接收元件的多個(gè)像素，以及第二半導(dǎo)體層，包括ai處理單元，所述ai處理單元對(duì)基于所述像素陣列單元的光接收操作而獲得的捕獲圖像執(zhí)行ai處理，所述ai處理是使用ai模型的處理，以及控制單元，其進(jìn)行如下控制：將上述ai處理單元的處理與具有層壓上述第一半導(dǎo)體層和上述第二半導(dǎo)體層的結(jié)構(gòu)的另一傳感器裝置進(jìn)行分配。

11、結(jié)果，在作為第一和第二半導(dǎo)體層被層壓的層壓ai傳感器的包括多個(gè)傳感器裝置的傳感器組中，由ai處理單元執(zhí)行的處理被分布。另外，由于主要利用傳感器裝置來進(jìn)行各傳感器裝置間的處理分配的控制，因此與例如服務(wù)器裝置等傳感器裝置以外的外部裝置進(jìn)行停止處理或溢出處理的情況相比，能夠提高ai處理的魯棒性。

12、此外，根據(jù)本技術(shù)的傳感器控制系統(tǒng)包括：多個(gè)傳感器裝置，具有其中第一半導(dǎo)體層包括圖像陣列單元的結(jié)構(gòu)，在圖像陣列單元中，二維地布置具有光接收元件的多個(gè)像素；以及第二半導(dǎo)體層，包括ai處理單元，所述ai處理單元對(duì)基于所述像素陣列單元的光接收操作而獲得的捕獲圖像執(zhí)行ai處理，所述ai處理是使用ai模型的處理，其中，至少一個(gè)所述傳感器裝置包括控制單元，所述控制單元執(zhí)行用于將由所述ai處理單元執(zhí)行的處理與另一傳感器裝置分發(fā)的控制。

13、同樣利用這種傳感器控制系統(tǒng)，可以獲得與根據(jù)上述本技術(shù)的傳感器裝置的功能相似的功能。

14、此外，根據(jù)本技術(shù)的控制方法是一種傳感器控制系統(tǒng)中的控制方法，該傳感器控制系統(tǒng)包括多個(gè)傳感器裝置，該多個(gè)傳感器裝置具有其中第一半導(dǎo)體層包括其中具有光接收元件的多個(gè)像素被二維地布置的圖像陣列單元的結(jié)構(gòu)，以及第二半導(dǎo)體層，包括ai處理單元，所述ai處理單元對(duì)基于所述像素陣列單元的光接收操作而獲得的捕獲圖像執(zhí)行ai處理，所述ai處理是使用ai模型的處理，其中，至少一個(gè)所述傳感器裝置進(jìn)行用于將所述ai處理單元所執(zhí)行的處理與另一傳感器裝置分發(fā)的控制。

15、同樣通過這種控制方法，可以獲得與根據(jù)上述本技術(shù)的傳感器裝置的功能相似的功能。

技術(shù)特征：

1.一種傳感器裝置，包括：

2.根據(jù)權(quán)利要求1所述的傳感器裝置，

3.根據(jù)權(quán)利要求1所述的傳感器裝置，

4.根據(jù)權(quán)利要求3所述的傳感器裝置，

5.根據(jù)權(quán)利要求3所述的傳感器裝置，

6.根據(jù)權(quán)利要求3所述的傳感器裝置，

7.根據(jù)權(quán)利要求3所述的傳感器裝置，

8.根據(jù)權(quán)利要求3所述的傳感器裝置，

9.根據(jù)權(quán)利要求1所述的傳感器裝置，

10.根據(jù)權(quán)利要求9所述的傳感器裝置，

11.根據(jù)權(quán)利要求10所述的傳感器裝置，

12.根據(jù)權(quán)利要求1所述的傳感器裝置，

13.根據(jù)權(quán)利要求12所述的傳感器裝置，

14.一種傳感器控制系統(tǒng)，包括：

15.一種傳感器控制系統(tǒng)中的控制方法，所述傳感器控制系統(tǒng)包括多個(gè)傳感器裝置，所述多個(gè)傳感器裝置具有層壓第一半導(dǎo)體層和第二半導(dǎo)體層的結(jié)構(gòu)，所述第一半導(dǎo)體層包括圖像陣列單元，在所述圖像陣列單元中，二維地布置具有光接收元件的多個(gè)像素，所述第二半導(dǎo)體層包括ai處理單元，所述ai處理單元對(duì)基于由像素陣列單元的光接收操作獲得的捕獲圖像執(zhí)行ai處理，所述ai處理是使用ai模型的處理，

技術(shù)總結(jié)
對(duì)于用作層壓AI傳感器的傳感器裝置，本發(fā)明提高了AI處理單元的處理效率，從而增強(qiáng)和加速AI處理功能，并提高AI處理的魯棒性。根據(jù)本技術(shù)的傳感器裝置具有層壓第一半導(dǎo)體層和第二半導(dǎo)體層的結(jié)構(gòu)，第一半導(dǎo)體層包括圖像陣列單元，在圖像陣列單元中，二維地布置各自具有光接收元件的多個(gè)像素，第二半導(dǎo)體層包括AI處理單元，用于使用AI模型對(duì)基于由像素陣列單元的光接收操作獲得的捕獲圖像執(zhí)行AI處理。傳感器裝置還包括用于執(zhí)行控制的控制單元，用于在傳感器裝置與具有層壓第一和第二半導(dǎo)體層的結(jié)構(gòu)的另一傳感器裝置之間分配由AI處理單元執(zhí)行的處理。

技術(shù)研發(fā)人員：高塚進(jìn),上野比呂至,鐵川弘樹
受保護(hù)的技術(shù)使用者：索尼集團(tuán)公司
技術(shù)研發(fā)日：
技術(shù)公布日：2024/11/4