基于深度強(qiáng)化學(xué)習(xí)的網(wǎng)絡(luò)切片鏈路優(yōu)化方案

向浩源 張智斌

摘要：隨著5G 和物聯(lián)網(wǎng)的增長(zhǎng)，網(wǎng)絡(luò)切片已成為滿足各種服務(wù)質(zhì)量保證的關(guān)鍵技術(shù)。切片資源有限的情況下，如何有效地進(jìn)行組播資源分配，提高切片利用率，優(yōu)化服務(wù)質(zhì)量，是當(dāng)前面臨的一大挑戰(zhàn)。針對(duì)此類問(wèn)題，提出一種基于深度強(qiáng)化學(xué)習(xí)的多路徑轉(zhuǎn)發(fā)鏈路負(fù)載優(yōu)化方案。該方案針對(duì)組播類型網(wǎng)絡(luò)切片并將其切片過(guò)程抽象為SDN（software definednetwork）環(huán)境中最優(yōu)組播樹(shù)的構(gòu)建，利用double dueling DQN 算法實(shí)現(xiàn)模型訓(xùn)練，并采用基于衰減上置信界（UpperConfidence Bound，UCB）的優(yōu)先級(jí)重放機(jī)制優(yōu)化算法，更加快速準(zhǔn)確地構(gòu)造最優(yōu)組播路徑。實(shí)驗(yàn)結(jié)果表明，所提優(yōu)化方案算法與經(jīng)典Steiner 樹(shù)算法相比能夠更有效地優(yōu)化組播類型網(wǎng)絡(luò)切片過(guò)程的鏈路負(fù)載。

關(guān)鍵詞：網(wǎng)絡(luò)切片；軟件定義網(wǎng)絡(luò)；深度強(qiáng)化學(xué)習(xí)；多路徑轉(zhuǎn)發(fā)；鏈路負(fù)載優(yōu)化

中圖分類號(hào)：TN914 文獻(xiàn)標(biāo)識(shí)碼：A

文章編號(hào)：1009-3044（2024）06-0083-06