1、隨著城市交通與經(jīng)濟(jì)發(fā)展的矛盾日趨尖銳，交通擁堵、交通安全已成為社會(huì)關(guān)注的焦點(diǎn)。城市交通控制作為組織、控制交通流的主要手段之一，在解決城市交通問(wèn)題中擔(dān)負(fù)著重要責(zé)任。如何運(yùn)用現(xiàn)代的科技手段來(lái)緩解日益嚴(yán)峻的交通壓力是目前研究的重點(diǎn)。
　　 基于目前交通問(wèn)題及交通系統(tǒng)發(fā)展的現(xiàn)狀，本文根據(jù)交通流實(shí)時(shí)變化的特征，研究了智能體在城市交通信號(hào)控制中的應(yīng)用。主要研究?jī)?nèi)容有如下幾個(gè)方面：
　　 論文首先研究了基于多智能體的城市交通信號(hào)控制的

2、架構(gòu)。采用分層遞階的智能體結(jié)構(gòu)，并給出了具體的結(jié)構(gòu)模型。
　　 論文進(jìn)一步把交通控制的最小單元——單路口作為研究對(duì)象，引入強(qiáng)化學(xué)習(xí)中的Q學(xué)習(xí)算法。針對(duì)Q 學(xué)習(xí)算法收斂速度較慢的缺點(diǎn)，充分利用學(xué)習(xí)過(guò)程中的經(jīng)驗(yàn)知識(shí)，進(jìn)而學(xué)習(xí)環(huán)境的模型，加快迭代的速度，最終實(shí)現(xiàn)Agent對(duì)路口交通流的優(yōu)化控制。在VISSIM中對(duì)單個(gè)路口采用改進(jìn)的算法進(jìn)行了仿真，并與定時(shí)控制、標(biāo)準(zhǔn)Q 學(xué)習(xí)進(jìn)行了對(duì)比，結(jié)果表明了所提出的基于模型的Q 學(xué)習(xí)算法的有效性。<