呼叫接入控制的學(xué)習(xí)優(yōu)化方法.pdf

1、資源管理是網(wǎng)絡(luò)控制的重要組成部分，特別是隨著各種網(wǎng)絡(luò)新業(yè)務(wù)的出現(xiàn)，使得其在網(wǎng)絡(luò)控制中的地位日益突出。由于網(wǎng)絡(luò)資源的有限性，如何提高用戶滿意度，獲得資源的最合適配置，提高自身收益是每個(gè)網(wǎng)絡(luò)運(yùn)營(yíng)商追求的目標(biāo)。呼叫接入控制(Call Admission control，CAC)是網(wǎng)絡(luò)資源管理的重要手段，它可以通過(guò)對(duì)不同的類型業(yè)務(wù)實(shí)施不同的接入策略實(shí)現(xiàn)資源的合理配置，達(dá)到提高網(wǎng)絡(luò)收益和用戶滿意度的目的。論文主要使用強(qiáng)化學(xué)習(xí)優(yōu)化方法解決綜合業(yè)務(wù)網(wǎng)

2、絡(luò)和蜂窩無(wú)線通信網(wǎng)絡(luò)的接入控制問(wèn)題。
　　 在綜合業(yè)務(wù)網(wǎng)絡(luò)中，論文分別研究了固定報(bào)酬和累計(jì)報(bào)酬方式下CAC問(wèn)題，建立了系統(tǒng)的連續(xù)時(shí)間Markov決策過(guò)程(CTMDP)。通過(guò)對(duì)CAC問(wèn)題特征分析，結(jié)合事件驅(qū)動(dòng)優(yōu)化學(xué)習(xí)方法的思想，研究了基于后狀態(tài)Q值更新方式的事件驅(qū)動(dòng)Q學(xué)習(xí)。解決了算法在CAC中的應(yīng)用問(wèn)題，實(shí)驗(yàn)結(jié)果表明該算法能夠有效解決CAC問(wèn)題，并且節(jié)省存儲(chǔ)空間。
　　 在無(wú)線蜂窩網(wǎng)絡(luò)中，論文研究了切換呼叫優(yōu)先的CAC問(wèn)題