本技術(shù)涉及智能樓宇，尤其涉及一種智能樓宇對(duì)講系統(tǒng)及對(duì)講控制方法。

背景技術(shù)：

1、隨著城市化進(jìn)程的加速和科技的不斷進(jìn)步，樓宇對(duì)講系統(tǒng)已成為現(xiàn)代住宅和商業(yè)建筑中不可或缺的組成部分。樓宇對(duì)講系統(tǒng)通過(guò)集成先進(jìn)的通信技術(shù)，提供了訪(fǎng)客身份確認(rèn)、實(shí)時(shí)視頻通話(huà)、遠(yuǎn)程門(mén)禁控制等功能，極大地提升了樓宇的安全性和便利性。

2、樓宇對(duì)講系統(tǒng)通過(guò)數(shù)字化、網(wǎng)絡(luò)化的方式，實(shí)現(xiàn)了住戶(hù)與訪(fǎng)客、物業(yè)管理之間的高效溝通，同時(shí)也支持了智能家居系統(tǒng)的集成，增強(qiáng)了居住的智能化體驗(yàn)。

3、然而，當(dāng)訪(fǎng)客為聾啞人士或無(wú)法說(shuō)話(huà)時(shí)，目前的樓宇對(duì)講系統(tǒng)無(wú)法為他們提供有效和暢通的方式與室內(nèi)人員進(jìn)行溝通。

技術(shù)實(shí)現(xiàn)思路

1、針對(duì)上述技術(shù)問(wèn)題和缺陷，本發(fā)明的目的是提供一種智能樓宇對(duì)講系統(tǒng)及對(duì)講控制方法，通過(guò)獲取訪(fǎng)客的人物視頻和語(yǔ)音信息，并將人物視頻中的手語(yǔ)動(dòng)作轉(zhuǎn)換為文字信息，增強(qiáng)了系統(tǒng)的無(wú)障礙交流功能，提升了訪(fǎng)客與住戶(hù)之間的溝通效率和便利性。

2、為了實(shí)現(xiàn)上述目的，第一方面，本發(fā)明提供一種智能樓宇對(duì)講系統(tǒng)，包括樓棟門(mén)口對(duì)講單元、通信單元、視頻處理單元及室內(nèi)對(duì)講單元；樓棟門(mén)口對(duì)講單元用于獲取訪(fǎng)客的訪(fǎng)客信息，該訪(fǎng)客信息包括人物視頻和第一語(yǔ)音對(duì)講信息中的至少一種；通信單元與該樓棟門(mén)口對(duì)講單元連接，用于傳輸該訪(fǎng)客信息；視頻處理單元與該通信單元連接，用于在識(shí)別出該人物視頻包含手語(yǔ)動(dòng)作時(shí)，根據(jù)該手語(yǔ)動(dòng)作生成對(duì)應(yīng)的手語(yǔ)信息；室內(nèi)對(duì)講單元與該通信單元連接，用于接收該訪(fǎng)客信息和/或該手語(yǔ)信息，并將該手語(yǔ)信息以文字的形式展示在該室內(nèi)對(duì)講單元的第一顯示屏上。

3、本發(fā)明通過(guò)視頻處理單元能夠準(zhǔn)確識(shí)別訪(fǎng)客的手語(yǔ)動(dòng)作，并將這些動(dòng)作實(shí)時(shí)轉(zhuǎn)換成文字信息，顯示在室內(nèi)對(duì)講單元的顯示屏上。這樣改善了聾啞訪(fǎng)客與室內(nèi)人員或住戶(hù)之間的溝通體驗(yàn)。當(dāng)聾啞訪(fǎng)客到達(dá)樓棟門(mén)口并使用手語(yǔ)表達(dá)訪(fǎng)問(wèn)意圖時(shí)，視頻處理單元自動(dòng)捕捉視頻流中的動(dòng)作并進(jìn)行解析，然后生成文字描述。這樣，即使住戶(hù)不熟悉手語(yǔ)，也能通過(guò)閱讀轉(zhuǎn)換后的文字了解訪(fǎng)客的訪(fǎng)問(wèn)意圖。本實(shí)施例這種智能化的解決方案不僅可以支持正常訪(fǎng)客的語(yǔ)音對(duì)講需求，也可以滿(mǎn)足聾啞人士的訪(fǎng)問(wèn)溝通需求，提高了訪(fǎng)客的便利性和舒適度，實(shí)現(xiàn)了對(duì)所有用戶(hù)很訪(fǎng)客，包括聾啞人士的包容性和無(wú)障礙訪(fǎng)問(wèn)。

4、結(jié)合第一方面的一些實(shí)施例，在一些實(shí)施例中，該智能樓宇對(duì)講系統(tǒng)還包括語(yǔ)音轉(zhuǎn)換單元，分別與該視頻處理單元和該通信單元連接，該語(yǔ)音轉(zhuǎn)換單元用于將該手語(yǔ)信息轉(zhuǎn)換為對(duì)應(yīng)的語(yǔ)音信息，并將該語(yǔ)音信息通過(guò)該通信單元發(fā)送至該室內(nèi)對(duì)講單元進(jìn)行語(yǔ)音播放。

5、采用上述實(shí)施例的技術(shù)方案，通過(guò)引入語(yǔ)音轉(zhuǎn)換單元，顯著提升了系統(tǒng)的無(wú)障礙交流能力。該單元將手語(yǔ)信息轉(zhuǎn)化為語(yǔ)音，為室內(nèi)人員提供了聽(tīng)覺(jué)信息的接收方式，增強(qiáng)了他們與訪(fǎng)客溝通的便捷性。這種雙向交流的實(shí)現(xiàn)，不僅體現(xiàn)了對(duì)特殊群體的關(guān)懷，也優(yōu)化了整體的居住體驗(yàn)，提升了智能樓宇對(duì)講系統(tǒng)的包容性和實(shí)用性。

6、結(jié)合第一方面的一些實(shí)施例，在一些實(shí)施例中，該視頻處理單元部署有經(jīng)過(guò)訓(xùn)練的手語(yǔ)識(shí)別模型，該手語(yǔ)識(shí)別模型用于判斷該人物視頻是否包含手語(yǔ)動(dòng)作，并確定該手語(yǔ)動(dòng)作對(duì)應(yīng)的手語(yǔ)信息。

7、采用上述實(shí)施例的技術(shù)方案，視頻處理單元配備經(jīng)過(guò)專(zhuān)業(yè)訓(xùn)練的手語(yǔ)識(shí)別模型，極大地提高了手語(yǔ)識(shí)別的準(zhǔn)確性和響應(yīng)速度。這種智能化的識(shí)別能力確保了系統(tǒng)能夠快速準(zhǔn)確地將手語(yǔ)轉(zhuǎn)換為文字，為聽(tīng)力障礙訪(fǎng)客提供了有效的溝通途徑，同時(shí)也強(qiáng)化了系統(tǒng)的技術(shù)先進(jìn)性和用戶(hù)友好性。

8、結(jié)合第一方面的一些實(shí)施例，在一些實(shí)施例中，該室內(nèi)對(duì)講單元還用于獲取室內(nèi)人員的第二語(yǔ)音對(duì)講信息，并將該第二語(yǔ)音對(duì)講信息通過(guò)該通信單元發(fā)送至該樓棟門(mén)口對(duì)講單元，該樓棟門(mén)口對(duì)講單元還用于將該第二語(yǔ)音對(duì)講信息，以文字的形式顯示在該樓棟門(mén)口對(duì)講單元的第二顯示屏上。

9、采用上述實(shí)施例的技術(shù)方案，通過(guò)使室內(nèi)對(duì)講單元獲取并發(fā)送第二語(yǔ)音對(duì)講信息，實(shí)現(xiàn)了訪(fǎng)客與住戶(hù)間的雙向文字交流。這一功能不僅讓訪(fǎng)客能夠通過(guò)文字了解住戶(hù)的回復(fù)，還提升了溝通的清晰度和準(zhǔn)確性，特別是對(duì)于聽(tīng)力有障礙的訪(fǎng)客，這一改進(jìn)顯著增強(qiáng)了他們的交流體驗(yàn)。

10、結(jié)合第一方面的一些實(shí)施例，在一些實(shí)施例中，該智能樓宇對(duì)講系統(tǒng)還包括門(mén)禁單元和梯控單元，該門(mén)禁單元和該梯控單元分別與該室內(nèi)對(duì)講單元連接，該室內(nèi)對(duì)講單元還用于分別向該門(mén)禁單元和該梯控單元，發(fā)送開(kāi)門(mén)指令及電梯下行指令，該門(mén)禁單元用于根據(jù)該開(kāi)門(mén)指令打開(kāi)樓棟大門(mén)，該梯控單元用于根據(jù)該電梯下行指令控制電梯下行到該樓棟大門(mén)所在的樓層。

11、采用上述實(shí)施例的技術(shù)方案，通過(guò)集成門(mén)禁單元和梯控單元，實(shí)現(xiàn)了訪(fǎng)客進(jìn)入流程的自動(dòng)化和智能化。住戶(hù)可以通過(guò)室內(nèi)對(duì)講單元遠(yuǎn)程控制門(mén)禁和電梯，使訪(fǎng)客能夠迅速進(jìn)入樓宇并到達(dá)相應(yīng)樓層。這一改進(jìn)不僅提高了訪(fǎng)客的便利性，也優(yōu)化了物業(yè)管理的效率和樓宇的安全性。

12、結(jié)合第一方面的一些實(shí)施例，在一些實(shí)施例中，該智能樓宇對(duì)講系統(tǒng)還包括云服務(wù)器，該通信單元與該云服務(wù)器連接，該云服務(wù)器與室內(nèi)人員的移動(dòng)終端連接。

13、采用上述實(shí)施例的技術(shù)方案，通過(guò)云服務(wù)器的集成，為智能樓宇對(duì)講系統(tǒng)提供了強(qiáng)大的數(shù)據(jù)支持和遠(yuǎn)程訪(fǎng)問(wèn)能力。住戶(hù)可以通過(guò)移動(dòng)終端與系統(tǒng)進(jìn)行交云，實(shí)現(xiàn)數(shù)據(jù)的云存儲(chǔ)和遠(yuǎn)程處理，提升了系統(tǒng)的靈活性和擴(kuò)展性，同時(shí)也為物業(yè)管理提供了更加高效的工具。

14、結(jié)合第一方面的一些實(shí)施例，在一些實(shí)施例中，該智能樓宇對(duì)講系統(tǒng)還包括語(yǔ)言翻譯單元，與該通信單元連接，該語(yǔ)言翻譯單元用于在識(shí)別出該第一語(yǔ)音對(duì)講信息為外語(yǔ)信息時(shí)，將該外語(yǔ)信息翻譯為中文信息，并將該中文信息通過(guò)該通信單元發(fā)送給該室內(nèi)對(duì)講單元。

15、采用上述實(shí)施例的技術(shù)方案，通過(guò)語(yǔ)言翻譯單元進(jìn)行識(shí)別并翻譯外語(yǔ)信息，打破了語(yǔ)言障礙，使得不同語(yǔ)言背景的訪(fǎng)客能夠與住戶(hù)順利溝通。這種即時(shí)的多語(yǔ)言翻譯服務(wù)，顯著提升了系統(tǒng)的國(guó)際化水平和用戶(hù)的滿(mǎn)意度。

16、結(jié)合第一方面的一些實(shí)施例，在一些實(shí)施例中，該語(yǔ)言翻譯單元還用于將該室內(nèi)對(duì)講單元采集到的室內(nèi)人員的第二語(yǔ)音對(duì)講信息，翻譯為對(duì)應(yīng)的外語(yǔ)回復(fù)信息，并將該外語(yǔ)回復(fù)信息通過(guò)該通信單元發(fā)送給該樓棟門(mén)口對(duì)講單元。

17、采用上述實(shí)施例的技術(shù)方案，進(jìn)一步擴(kuò)展了語(yǔ)言翻譯單元的功能，不僅能夠?qū)⑼庹Z(yǔ)翻譯為中文，還能將中文回復(fù)翻譯為訪(fǎng)客的母語(yǔ)，實(shí)現(xiàn)了雙向語(yǔ)言的無(wú)障礙交流。這一功能強(qiáng)化了系統(tǒng)的國(guó)際化服務(wù)能力，提升了訪(fǎng)客和住戶(hù)的溝通效率。

18、結(jié)合第一方面的一些實(shí)施例，在一些實(shí)施例中，該智能樓宇對(duì)講系統(tǒng)還包括該通信單元包括無(wú)線(xiàn)通信單元，該無(wú)線(xiàn)通信單元與派送機(jī)器人連接，用于將該派送機(jī)器人的派送請(qǐng)求發(fā)送至該室內(nèi)對(duì)講單元。

19、采用上述實(shí)施例的技術(shù)方案，通過(guò)無(wú)線(xiàn)通信單元與派送機(jī)器人的連接，為智能樓宇對(duì)講系統(tǒng)帶來(lái)了現(xiàn)代化的物流服務(wù)能力。系統(tǒng)能夠接收派送機(jī)器人的派送請(qǐng)求，并通過(guò)室內(nèi)對(duì)講單元通知住戶(hù)，提高了物流服務(wù)的效率，為住戶(hù)提供了更加便捷的生活體驗(yàn)。

20、第二方面，本發(fā)明提供一種智能樓宇對(duì)講控制方法，應(yīng)用于上述第一方面的智能樓宇對(duì)講系統(tǒng)，該方法包括：通信單元接收由樓棟門(mén)口對(duì)講單元獲取的訪(fǎng)客信息，該訪(fǎng)客信息包括人物視頻和第一語(yǔ)音對(duì)講信息中的至少一種；該通信單元將該訪(fǎng)客信息發(fā)送至視頻處理單元；該通信單元接收該視頻處理單元返回的手語(yǔ)信息，該手語(yǔ)信息是由該視頻處理單元在識(shí)別出該人物視頻包含手語(yǔ)動(dòng)作時(shí)，根據(jù)該手語(yǔ)動(dòng)作生成對(duì)應(yīng)的；該通信單元將該訪(fǎng)客信息和/或該手語(yǔ)信息發(fā)送至室內(nèi)對(duì)講單元，以使該室內(nèi)對(duì)講單元將該手語(yǔ)信息以文字的形式，展示在該室內(nèi)對(duì)講單元的第一顯示屏上。

21、本發(fā)明的智能樓宇對(duì)講控制方法的技術(shù)效果，可以參考上述第一方面智能樓宇對(duì)講系統(tǒng)所能實(shí)現(xiàn)的技術(shù)效果，此處不再贅述。

22、本技術(shù)實(shí)施例中提供的一個(gè)或多個(gè)技術(shù)方案，至少具有如下技術(shù)效果或優(yōu)點(diǎn)：

23、1.本發(fā)明的系統(tǒng)通過(guò)集成視頻處理單元和手語(yǔ)識(shí)別模型，顯著提升了對(duì)聽(tīng)力障礙訪(fǎng)客的無(wú)障礙交流能力。系統(tǒng)能夠自動(dòng)識(shí)別人物視頻中的手語(yǔ)動(dòng)作，并將其轉(zhuǎn)換為文字信息展示給住戶(hù)，同時(shí)，通過(guò)語(yǔ)音轉(zhuǎn)換單元，還能將手語(yǔ)信息轉(zhuǎn)化為語(yǔ)音輸出，為聽(tīng)力障礙住戶(hù)提供了雙重的交流保障，極大地增強(qiáng)了系統(tǒng)的包容性和訪(fǎng)客的溝通體驗(yàn)。"

24、2.本發(fā)明的系統(tǒng)通過(guò)室內(nèi)對(duì)講單元和通信單元的協(xié)同工作，實(shí)現(xiàn)了訪(fǎng)客與住戶(hù)間的雙向語(yǔ)音和文字交流。住戶(hù)可以通過(guò)室內(nèi)對(duì)講單元發(fā)送語(yǔ)音回復(fù)，系統(tǒng)自動(dòng)將這些回復(fù)轉(zhuǎn)化為文字信息，顯示在樓棟門(mén)口對(duì)講單元的顯示屏上，方便訪(fǎng)客閱讀。這一功能不僅提高了交流的便捷性，也為訪(fǎng)客提供了更加直觀和清晰的信息反饋，優(yōu)化了訪(fǎng)客的整體訪(fǎng)問(wèn)體驗(yàn)。"

25、3.本發(fā)明中智能樓宇對(duì)講系統(tǒng)具備高度的集成性和自動(dòng)化控制能力。系統(tǒng)不僅與門(mén)禁單元和梯控單元相連，實(shí)現(xiàn)遠(yuǎn)程控制門(mén)鎖和電梯，還通過(guò)云服務(wù)器與住戶(hù)的移動(dòng)終端相連，提供了遠(yuǎn)程訪(fǎng)問(wèn)和控制的可能性。此外，語(yǔ)言翻譯單元的加入，使得系統(tǒng)能夠跨越語(yǔ)言障礙，實(shí)現(xiàn)多語(yǔ)言的實(shí)時(shí)翻譯。而無(wú)線(xiàn)通信單元與派送機(jī)器人的連接，更是將智能物流服務(wù)融入到樓宇管理中，全面提升了樓宇的智能化管理和服務(wù)水平。