呼叫接入控制的學(xué)習(xí)優(yōu)化方法.pdf

1、資源管理是網(wǎng)絡(luò)控制的重要組成部分，特別是隨著各種網(wǎng)絡(luò)新業(yè)務(wù)的出現(xiàn)，使得其在網(wǎng)絡(luò)控制中的地位日益突出。由于網(wǎng)絡(luò)資源的有限性，如何提高用戶滿意度，獲得資源的最合適配置，提高自身收益是每個網(wǎng)絡(luò)運營商追求的目標(biāo)。呼叫接入控制(Call Admission control，CAC)是網(wǎng)絡(luò)資源管理的重要手段，它可以通過對不同的類型業(yè)務(wù)實施不同的接入策略實現(xiàn)資源的合理配置，達(dá)到提高網(wǎng)絡(luò)收益和用戶滿意度的目的。論文主要使用強化學(xué)習(xí)優(yōu)化方法解決綜合業(yè)務(wù)網(wǎng)

2、絡(luò)和蜂窩無線通信網(wǎng)絡(luò)的接入控制問題。
　　 在綜合業(yè)務(wù)網(wǎng)絡(luò)中，論文分別研究了固定報酬和累計報酬方式下CAC問題，建立了系統(tǒng)的連續(xù)時間Markov決策過程(CTMDP)。通過對CAC問題特征分析，結(jié)合事件驅(qū)動優(yōu)化學(xué)習(xí)方法的思想，研究了基于后狀態(tài)Q值更新方式的事件驅(qū)動Q學(xué)習(xí)。解決了算法在CAC中的應(yīng)用問題，實驗結(jié)果表明該算法能夠有效解決CAC問題，并且節(jié)省存儲空間。
　　 在無線蜂窩網(wǎng)絡(luò)中，論文研究了切換呼叫優(yōu)先的CAC問題