基于擁塞發(fā)現(xiàn)的強化學(xué)習(xí)P2P網(wǎng)絡(luò)視頻點播預(yù)取策略研究.pdf

1、視頻點播(Video On Demand)是一種交互式視頻播放與傳輸系統(tǒng)，可以滿足用戶根據(jù)自身需求任意觀看視頻節(jié)目。將P2P技術(shù)與視頻點播技術(shù)相融合，可以充分利用節(jié)點的計算和存儲能力來減輕服務(wù)器的壓力，但也存在用戶觀看視頻時緩沖等待時間過長等問題。因此研究采用視頻預(yù)取策略，即將需要播放的數(shù)據(jù)事先獲取并保存在本地，可以有效地減少用戶視頻點播中的緩沖等待時間，保證了視頻播放的流暢性。
　　本文提出了一種基于擁塞發(fā)現(xiàn)的強化學(xué)習(xí)P2P網(wǎng)絡(luò)

2、視頻點播預(yù)取策略，通過減少對網(wǎng)絡(luò)擁塞節(jié)點的視頻內(nèi)容預(yù)取，從而能夠有效的控制節(jié)點的負(fù)載，避免網(wǎng)絡(luò)視頻播放時發(fā)生擁塞，減少用戶觀看視頻的等待時間，提高視頻播放的流暢性。實驗結(jié)果驗證該方法能提高視頻播放流暢性，避免用戶在節(jié)點發(fā)生擁塞時等待時間過長，提高視頻播放效率。
　　基于以上研究內(nèi)容，本文的主要工作如下:
　　首先，介紹了P2P技術(shù)及強化學(xué)習(xí)技術(shù)的相關(guān)概念，闡述了目前的強化學(xué)習(xí)算法。
　　其次，提出了一種基于擁塞發(fā)現(xiàn)的強

3、化學(xué)習(xí)網(wǎng)絡(luò)均衡查詢方法，該方法中節(jié)點周期性重連，將具有相同資源的節(jié)點組成一個群組，并使更多的查詢消息向處理能力強的節(jié)點發(fā)送。同時通過監(jiān)測節(jié)點的狀態(tài)，特別是節(jié)點的擁塞狀況等參數(shù)，并采用Q-learning算法綜合評估網(wǎng)絡(luò)節(jié)點，有目的引導(dǎo)節(jié)點消息的轉(zhuǎn)發(fā)，從而減少了對網(wǎng)絡(luò)擁塞節(jié)點的查詢消息的轉(zhuǎn)發(fā)次數(shù)。實驗證明，本文方法能夠有效的降低查詢擁塞數(shù)量。
　　最后，進(jìn)一步提出了基于擁塞發(fā)現(xiàn)的強化學(xué)習(xí)P2P網(wǎng)絡(luò)視頻點播預(yù)取策略，將基于擁塞控制的強