SA-FQL算法在區(qū)域交通控制中的應(yīng)用研究.pdf

1、相對(duì)于單路口控制，區(qū)域交通控制能夠獲得整體最優(yōu)的效果。傳統(tǒng)的區(qū)域交通控制方法需要建立整個(gè)區(qū)域交通系統(tǒng)的模型，但由于城市交通系統(tǒng)是一個(gè)典型的非線性、動(dòng)態(tài)時(shí)變的、不確定性的復(fù)雜大系統(tǒng)，因此建立其精確的數(shù)學(xué)模型非常困難。Q學(xué)習(xí)算法無(wú)需模型且能實(shí)現(xiàn)在環(huán)境中學(xué)習(xí)控制策略，適合戰(zhàn)略控制，為區(qū)域交通控制提供了新思路。 然而，Q學(xué)習(xí)算法自身還存在一些問(wèn)題，如學(xué)習(xí)速度慢，動(dòng)作選取中的擴(kuò)張與探索之間的平衡問(wèn)題等。為使Q學(xué)習(xí)算法更好地應(yīng)用于區(qū)域交通控

2、制，論文主要在以下方面進(jìn)行了研究： 1.研究了目前幾種常見(jiàn)的Q學(xué)習(xí)改進(jìn)算法，分析了它們?cè)诮鉀Q上述Q學(xué)習(xí)算法問(wèn)題上的不足之處，并針對(duì)這些不足，提出了一種新的Q學(xué)習(xí)改進(jìn)算法--SA-FQL算法。SA-FQL算法首先將模糊推理系統(tǒng)引入Q學(xué)習(xí)，利用模糊推理系統(tǒng)能夠?qū)⑾闰?yàn)知識(shí)嵌入到模糊規(guī)則的優(yōu)點(diǎn)，提高學(xué)習(xí)速度。然后，再引入模擬退火算法的Metropolis準(zhǔn)則，通過(guò)算法進(jìn)行過(guò)程中溫度等參數(shù)的變化來(lái)自動(dòng)調(diào)節(jié)探索與擴(kuò)張的比例，從而實(shí)現(xiàn)探索和擴(kuò)

3、張之間的平衡。 2.研究SA-FQL算法在區(qū)域交通控制中的應(yīng)用，提出一種基于SA-FQL算法的區(qū)域交通控制方法。首先利用SA-FQL算法優(yōu)化區(qū)域的公共周期，然后在給定周期的基礎(chǔ)上再用SA-FQL算法優(yōu)化區(qū)域中各干線相鄰兩路口的相位差，最后根據(jù)交通流量確定各路口的綠信比。 3.介紹了交通仿真軟件TSIS，用VC++6.0編寫RTE接口程序并利用TSIS對(duì)本文控制方法、基于Q學(xué)習(xí)算法的控制方法和基于模糊Q學(xué)習(xí)算法的控制方法進(jìn)