技術(shù)特征：

1.一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，包括以下步驟：

2.根據(jù)權(quán)利要求1所述的一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，所述s1包括：

3.根據(jù)權(quán)利要求1所述的一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，所述s2中，利用卷積矩陣對(duì)所述網(wǎng)絡(luò)統(tǒng)計(jì)信息進(jìn)行預(yù)處理，包括：

4.根據(jù)權(quán)利要求1所述的一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，所述s2中，網(wǎng)絡(luò)狀態(tài)向量表示為：

5.根據(jù)權(quán)利要求1所述的一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，所述s3中，獎(jiǎng)勵(lì)函數(shù)表示為：

6.根據(jù)權(quán)利要求1所述的一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，所述s4包括：

7.根據(jù)權(quán)利要求6所述的一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，所述s43中，累積預(yù)期回報(bào)rt表示為：

8.根據(jù)權(quán)利要求6所述的一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，所述s45包括：

9.根據(jù)權(quán)利要求1所述的一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制方法，其特征在于，所述s5包括：

10.一種基于ddpg模型的無(wú)線(xiàn)傳輸擁塞控制系統(tǒng)，其特征在于，包括：

技術(shù)總結(jié)
本發(fā)明公開(kāi)了一種基于DDPG模型的無(wú)線(xiàn)傳輸擁塞控制方法，包括以下步驟：在每個(gè)往返時(shí)延周期內(nèi)，獲取底層TCP協(xié)議棧中的擁塞窗口值和確認(rèn)數(shù)據(jù)包，生成網(wǎng)絡(luò)統(tǒng)計(jì)信息；利用卷積矩陣對(duì)所述網(wǎng)絡(luò)統(tǒng)計(jì)信息進(jìn)行預(yù)處理，并結(jié)合遞歸結(jié)構(gòu)生成網(wǎng)絡(luò)狀態(tài)向量；通過(guò)獎(jiǎng)勵(lì)函數(shù)生成與所述網(wǎng)絡(luò)狀態(tài)向量對(duì)應(yīng)的獎(jiǎng)勵(lì)值；基于所述網(wǎng)絡(luò)狀態(tài)向量和獎(jiǎng)勵(lì)值，采用DDPG模型輸出擁塞窗口的最大值；根據(jù)擁塞窗口的最大值，采用最大濾波器確定擁塞窗口的大小，并反饋至底層TCP協(xié)議棧。該方法通過(guò)DDPG模型將深度強(qiáng)化學(xué)習(xí)機(jī)制與擁塞窗口的動(dòng)態(tài)調(diào)整相結(jié)合，解決了傳統(tǒng)控制方法在復(fù)雜多變無(wú)線(xiàn)環(huán)境中的性能局限，在不損失高吞吐量的前提下，提升了無(wú)線(xiàn)傳輸?shù)膶?shí)時(shí)性。

技術(shù)研發(fā)人員：劉明,解文博,王靜,楊紫微,胡夢(mèng)晨,魏子忠
受保護(hù)的技術(shù)使用者：航天金美（重慶）通信有限公司
技術(shù)研發(fā)日：
技術(shù)公布日：2025/1/6