基于強化學(xué)習(xí)的自適應(yīng)編碼調(diào)制策略
2023年電子技術(shù)應(yīng)用第5期
馬穎1，王珂1，吳戈男2，邢哲2
（1.北京郵電大學(xué) 信息與通信工程學(xué)院，北京100876；2.中國空間技術(shù)研究院衛(wèi)星應(yīng)用總體部，北京100094）
摘要： NTN（Non-Terrestrial Network）是面向衛(wèi)星通信和低空通信的重要應(yīng)用場景，標(biāo)志著5G技術(shù)應(yīng)用從陸地通信走向了空間通信，可以預(yù)見衛(wèi)星網(wǎng)絡(luò)將是未來6G通信網(wǎng)絡(luò)中重要組成。為了滿足衛(wèi)星通信質(zhì)量要求、最大程度地增大系統(tǒng)容量，需要應(yīng)用自適應(yīng)編碼調(diào)制技術(shù)根據(jù)信道狀態(tài)信息在不斷變化的通信環(huán)境下動態(tài)調(diào)整調(diào)制階數(shù)和編碼碼率。人工智能在解決衛(wèi)星高動態(tài)場景下信道條件快速變化所產(chǎn)生的問題具有明顯的潛力。采用基于強化學(xué)習(xí)的低軌衛(wèi)星自適應(yīng)編碼調(diào)制策略，解決了衛(wèi)星通信環(huán)境的變化造成的門限表與實際信道不匹配的問題，與傳統(tǒng)ARIMA （Autoregressive Integrated Moving Average）算法相比提升達到20%以上。
關(guān)鍵詞：
強化學(xué)習(xí)6G自適應(yīng)編碼調(diào)制NTN
中圖分類號：TN929.5
文獻標(biāo)志碼：A
DOI: 10.16157/j.issn.0258-7998.233992
中文引用格式： 馬穎，王珂，吳戈男，等. 基于強化學(xué)習(xí)的自適應(yīng)編碼調(diào)制策略[J]. 電子技術(shù)應(yīng)用，2023，49(5)：35-40.
英文引用格式： Ma Ying，Wang Ke，Wu Genan，et al. Adaptive coding modulation strategy based on reinforcement learning[J]. Application of Electronic Technique，2023，49(5)：35-40.
文獻標(biāo)志碼：A
DOI: 10.16157/j.issn.0258-7998.233992
中文引用格式： 馬穎，王珂，吳戈男，等. 基于強化學(xué)習(xí)的自適應(yīng)編碼調(diào)制策略[J]. 電子技術(shù)應(yīng)用，2023，49(5)：35-40.
英文引用格式： Ma Ying，Wang Ke，Wu Genan，et al. Adaptive coding modulation strategy based on reinforcement learning[J]. Application of Electronic Technique，2023，49(5)：35-40.
Adaptive coding modulation strategy based on reinforcement learning
Ma Ying1，Wang Ke1，Wu Genan2，Xing Zhe2
(1.School of Information and Communication Engineering， Beijing University of Posts and Telecommunications， Beijing 100876， China； 2.Department of Satellite Application， China Academy of Space Technology， Beijing 100094， China)
Abstract： NTN (non-terrestrial network) is an important application scenario for satellite communications and low-altitude communications, marking the transition of 5G technology applications from land communications to space communications. It is foreseeable that satellite networks will be an important component of future 6G communications networks. In order to meet the quality requirements of satellite communication and maximize the system capacity, it is necessary to apply adaptive coding and modulation technology to dynamically adjust the modulation order and coding rate according to the channel state information in the changing communication environment. AI has clear potential to solve problems arising from rapidly changing channel conditions in satellite high-dynamic scenarios. This paper adopts the low-orbit satellite adaptive coding and modulation strategy based on reinforcement learning to solve the problem of the mismatch between the threshold table and the actual channel caused by the change of the satellite communication environment, which is improved by above 20% compared with the traditional ARIMA (autoregressive integrated moving average) algorithm.
Key words : reinforcement learning；6G；adaptive coding modulation；NTN
0 引言
2001年，Goldmith等學(xué)者深入研究了平坦衰落信道場景下的自適應(yīng)調(diào)制，同時考慮誤碼率和系統(tǒng)頻譜效率，有效提升了系統(tǒng)的性能，隨著自適應(yīng)技術(shù)的發(fā)展，將自適應(yīng)調(diào)制編碼應(yīng)用在衛(wèi)星通信上的研究越來越深厚。2004年，DVB-S2標(biāo)準(zhǔn)中加入了自適應(yīng)編碼調(diào)制技術(shù)，與DVB-S標(biāo)準(zhǔn)相比，傳輸信道容量至少提高了30%，在同樣的頻譜效率限制下接收到的信號質(zhì)量更高。2012年，Vassaki等學(xué)者利用陸地移動衛(wèi)星通信的陰影萊斯模型和自適應(yīng)調(diào)制方案，導(dǎo)出了最優(yōu)功率分配和有效容量的封閉表達式，證明了在特定的服務(wù)質(zhì)量約束下，系統(tǒng)的有效容量是最大的。2019年，于秀蘭等學(xué)者考慮到在Ka波段下雨衰和地面移動容易干擾衛(wèi)星信號的特點，提出了低軌衛(wèi)星自適應(yīng)傳輸方案，仿真結(jié)果表明其有效地彌補了信號衰減，并降低了系統(tǒng)誤碼率。
本文詳細(xì)內(nèi)容請下載：http://ihrv.cn/resource/share/2000005320
作者信息：
馬穎1，王珂1，吳戈男2，邢哲2
（1.北京郵電大學(xué) 信息與通信工程學(xué)院，北京100876；2.中國空間技術(shù)研究院衛(wèi)星應(yīng)用總體部，北京100094）
此內(nèi)容為AET網(wǎng)站原創(chuàng)，未經(jīng)授權(quán)禁止轉(zhuǎn)載。