%34تخفیف

دانلود پروژه:کنترل هوشمند جریان ترافیک با استفاده از روش‌های یادگیری تقویتی

تعداد 94 صفحه فایل word

چكيده

مشکل بزرگی که در رویارویی با مسئله کنترل ترافیک وجود دارد این است که تمامی حجم ترافیک در ساعات مختلف شبانه‌روز به‌صورت استاتیک نیست. زمان‌بندی چراغ راهنمایی از پیش مشخص‌شده دیگر جوابگوی دینامیک موجود در این مسئله نیست. در این پایان‌نامه زمان‌بندی تطبیقی چراغ‌های راهنمایی ارائه شده است. قابلیت تطبیق بالای یادگیری تقویتی با تغییرات، از این نکته برای طراحی کنترل‌کننده در این پایان‌نامه استفاده شده است. با استفاده از ویژگی‌های سامانه‌های چندعامله و بهره‏گیری از یادگیری تقویتی برای مواجه شدن با مسئله زمان‌بندی چراغ‌های راهنمایی، کاهش زمان تأخیر در سفر تا حد بالایی برآورده شده است. از طرفی وجود مدلی دقیق و کارا برای آزمایش زمان‌بندی اعمال شده باعث شده است تا در این پژوهش بتوانیم نتایج یافته‌ شده را روی این بستر محیا شده اعمال و نتایج را قابل مشاهده کنیم.

كليد واژه: چراغ راهنمایی، سیستم‌های چندعامله، یادگیری تقویتی

 

 

فهرست مطالب

عنوان                                                                                                                               صفحه

فهرست علايم و نشانه‌ها ‌ه

فهرست جدول‌ها ‌و

فهرست شكل‌‌ها ‌ز

فصل 1-    مقدمه… 1

1-1- مشکل ترافیک و راه‏کارهای حل این معضل.. 1

1-2- سامانه‌های حمل‌ونقل هوشمند. 2

1-3- مدیریت لحظه‏ای جریان ترافیک در تقاطع‏ها 3

1-4- اهداف کنترل هوشمند جریان ترافیک…. 4

1-5- معرفی مسئله. 5

1-6- ساختار پایان‌نامه. 6

فصل 2-   کنترل ترافیک شهری.. 8

2-1- متغیرهای ترافیک…. 8

2-2- محرکها و حسگرهای کنترل ترافیک…. 9

2-3- محرکهای ترافیکی.. 9

2-3-1- چراغ‌راهنما 10

2-3-2- کنترل ورودی آزادراهها 10

2-4- حسگرهای ترافیکی.. 11

2-4-1- حلقه‌های القایی.. 12

2-4-2- حسگر‌های مادون‌قرمز. 12

2-4-3- حسگرهای فراصوت… 13

2-5- دسته‌بندی روش‌های کنترل ترافیک…. 14

2-5-1- ﮐﻨﺘﺮل سلسله مراتبی.. 14

2-5-2- روش ﮐﻨﺘﺮل ﻏﯿﺮﻣﺘﻤﺮﮐﺰ. 15

2-5-3- روش ﻣﺘﻤﺮﮐﺰ: 15

2-5-4- روش ﮐﻨﺘﺮل ﮔﺴﺘﺮده 16

2-5-5- روش ﮐﻨﺘﺮل غیر هماهنگ… 16

2-5-6- روش ﮐﻨﺘﺮل ﮔﺴﺘﺮده ﻫﻤﺎﻫﻨﮓ… 16

2-6- مکانیسم‌های ﮐﻨﺘﺮل ﺗﺮاﻓﯿﮏ…. 17

2-6-1- سیگنال‌های ﻣﺠﺰا 17

2-6-1-1- ﻋﻤﻠﯿﺎت ﭘﯿﺶ زمان‌بندی ‌شده: 17

2-6-1-2- عملیات واکنشی………. 18

2-6-2- سیگنال‌های ﻣﺮﺗﺒﻂ… 18

2-6-2-1- سامانه‌های ﻣﺘﻤﺮﮐﺰ ﮐﻨﺘﺮل ﺗﺮاﻓﯿﮏ: 18

2-6-2-2- سامانه‌های توزیع‌شده ﮐﻨﺘﺮل ﺗﺮاﻓﯿﮏ… 19

2-7- ﻣﺮوري ﺑﺮ ﮐﺎرﻫﺎي انجام‌شده 19

2-8- کنترل‌کننده پیش‌بین.. 20

2-8-1- ﻣﻔﺎﻫﯿﻢ ﺳﯿﺴﺘﻢﻫﺎي ترکیبی.. 21

2-8-2- ﮐﺎرﺑﺮدﻫﺎي شبکه‌های ﭘﺘﺮي ترکیب… 23

2-9- ﻣﺪلﻫﺎي ﺗﺮاﻓﯿﮏ: 24

2-9-1- مدل میکروسکوپیک… 24

2-9-2- مدل ماکروسکوپیک: 25

2-9-3- ﻣﻘﺎﯾﺴﻪ دو ﻣﺪل.. 26

2-10- ﮐﻨﺘﺮل ﺗﺮاﻓﯿﮏ از دﯾﺪ ﺳﯿﺴﺘﻢﻫﺎي وﻗﺎﯾﻊ ﮔﺴﺴﺘﻪ. 27

2-11- اﻧﮕﯿﺰه اﺳﺘﻔﺎده از MPC ﺗﻮزﯾﻊ ﺷﺪه و ﺳﻠﺴﻠﻪ ﻣﺮاﺗﺒﯽ در شبکه‌های ﺗﺮاﻓﯿﮏ: 28

2-12- ﻣﻌﺮﻓﯽ سامانه‌های ﺗﺠﺎري ﺗﺮاﻓﯿﮏ SCATS و SCOOT. 30

2-12-1- اﻧﻮاع روﺷﻬﺎي ﮐﻨﺘﺮل چراغهای راﻫﻨﻤﺎﯾﯽ.. 30

2-12-1-1- ﺳﯿﺴﺘﻢ زﻣﺎن ﺛﺎﺑﺖ… 30

2-12-1-2- ﺳﯿﺴﺘﻢ زﻣﺎن ﻣﺘﻐﯿﺮ. 31

2-12-1-3- ﺳﯿﺴﺘﻢ ﻫﻮﺷﻤﻨﺪ ﻣﺤﻠﯽ.. 31

2-12-1-4- سامانهﻫﺎي ﻫﻮﺷﻤﻨﺪ ﻣﺮﮐﺰي.. 31

2-12-2- ﺳﯿﺴﺘﻢ ﮐﻨﺘﺮل ﺗﺮاﻓﯿﮏ SCOOT: 32

2-12-3- ﺳﯿﺴﺘﻢ ﮐﻨﺘﺮل ﺗﺮاﻓﯿﮏ SCATS. 32

2-13- ارزﯾﺎﺑﯽ ﺳﯿﺴﺘﻢ ﻫﺎي ﺗﺠﺎري ﻣﻮﺟﻮد. 33

2-14- ﻣﻌﺮﻓﯽ ﺳﯿﺴﺘﻢ ﻫﻮﺷﻤﻨﺪ SCATS و ﻗﺎﺑﻠﯿﺘﻬﺎي آن.. 33

2-14-1- ﻋﻤﻠﮑﺮد ﭼﻬﺎر ﺣﺎﻟﺖ ﺳﯿﺴﺘﻢ ﮐﻨﺘﺮل ﻣﺮﮐﺰي SCATS. 34

2-14-2- قابلیت های سامانه SCATS. 34

2-14-2-1- ﻧﺘﺎﯾﺞ اﺳﺘﻔﺎده از ﺳﯿﺴﺘﻢ SCATS : 36

2-15- کنترل به روش یادگیری تقویتی.. 36

فصل 3-   مدلسازی رفتار ترافیک…. 39

3-1- مدلهای ماکروسکوپیک…. 39

3-2- مدلMETANET. 40

3-3- مدلهای میکروسکوپیک…. 41

3-4- نرم افزارهای شبیهساز ترافیک…. 41

3-5- نرمافزارAIMSUN.. 41

3-6- نرمافزارParamics 42

3-7- نرمافزار Vissim.. 42

3-8- نرمافزار CORSIM… 42

3-9- نرمافزار Green Light District 42

3-10- مدلهای مزوسکوپیک…. 43

فصل 4-   طراحی کنترل کننده. 44

4-1- مقدمه. 44

4-2- اجزای یادگیری تقویتی.. 45

4-3- سه رویکرد عمده در یادگیری تقویتی.. 47

4-3-1- رویکرد برنامه ریزی پویا 47

4-3-2- رویکرد مونت کارلو. 47

4-3-3- رویکرد اختلاف زمانی.. 47

4-4- یادگیری تقویتی پیوسته و کاربردهای آن.. 48

4-5- الگوریتم های استفاده شده 49

4-6- نرخ یادگیری تطبیقی.. 49

4-7- انتخاب عمل.. 51

4-8- سیاست به کار گرفته شده 51

4-9- پیادهسازی کنترل کننده 52

4-10- تابع پاداش…. 54

4-11- انتخاب عملهای عامل.. 55

4-12- انتخاب وضعیتهای عامل.. 56

4-13- خلاصه و نتیجهگیری.. 57

فصل 5-   نتایج شبیه‌سازی.. 58

5-1- مدل محیط موردبررسی.. 58

5-2- مدل محیط… 58

5-3- بهینه سازی.. 59

5-3-1- وسایل نقلیه‌ی ورودی به خیابان‌ها 59

5-3-2- زمان چراغ‌های راهنمایی.. 59

5-4- بازی  60

5-5- تابع هزینه. 61

5-6- نتیجهگیری.. 69

فصل 6-   نتيجه‌گيري و پيشنهادها 70

6-1- نتیجه گیری.. 70

6-1-1- ساختار فصل‌به‌فصل پایان‌نامه. 70

6-2- پیشنهاد‌ها 71

فهرست مراجع.. 72

واژه نامه‌ي فارسي به انگليسي.. 76

واژه نامه‌ي انگليسي به فارسي.. 78

فهرست علايم و نشانه‌ها

عنوان                                                                                                              علامت اختصاري

ضريب ميرايي

فركانس طبيعي                                                                                               

ورودي اغتشاش خارجي                                                                                     

تابع حساسيت                                                                                                

تابع مكمل حساسيت                                                                                        

 

فهرست جدول‌ها

عنوان                                                                                                                               صفحه

جدول ‏2‑1: درﺻﺪ ﺑﻬﯿﻨﻪ ﺳﺎزي ﻣﺘﻮﺳﻂ ﺳﯿﺴﺘﻢ SCATS. 36

جدول ‏3‑1: سه مشخصه ماکروسکوپیک بهکار برده شده در مدل METANET. 40

جدول ‏5‑1 : متوسط زمان تأخیر وسایل نقلیه با و بدون وجود کنترل‌کننده در محیط مورد آزمایش…. 62

 

فهرست شكل‌‌ها

عنوان                                                                                                                               صفحه

شکل ‏1‑1: شمای کلی حلقه کنترلی شبکه ترافیک [1] 4

شکل ‏1‑2 شمای کلی از چگونگی ارتباط کنترل‌کننده با محیط اطراف… 6

شکل ‏2‑1 نمودار اساسی ارتباط بین سه مشخصه اساسی جریان-چگالی-سرعت [6] 10

شکل ‏2‑2 نمونهای از کنترل ورودی بزرگراه به‌وسیله چراغ راهنمایی.. 11

شکل ‏2‑3 نمایی از حلقه‌های القایی نصب‌شده در خیابان.. 12

شکل ‏2‑4: نمایی از دوربین‌های مادون‌قرمز نصب‌شده در خیابان.. 13

شکل ‏2‑5: نمایی از حسگر اولتراسونیک نصب‌شده در خیابان.. 13

شکل ‏2‑6: نمایی از دوربین‌های به‌کاررفته برای اندازه‌گیری پارامترهای ترافیکی.. 14

شکل ‏2‑7: ﮐﻨﺘﺮل ﺳﻠﺴﻠﻪ ﻣﺮاﺗﺒﯽ.. 15

شکل ‏2‑8: ﮐﻨﺘﺮل ﻏﯿﺮﻣﺘﻤﺮﮐﺰ. 15

شکل ‏2‑9: روش ﻣﺘﻤﺮﮐﺰ. 16

شکل ‏2‑10: ﮐﻨﺘﺮل ﮔﺴﺘﺮده 17

شکل ‏2‑11: ﮐﻨﺘﺮل کننده پیش‌بین.. 21

شکل ‏2‑12: ﺗﻔﺎوت ﻣﺘﻐﯿﺮﻫﺎ در ﺳﯿﺴﺘﻢﻫﺎي ﮔﺴﺴﺘﻪ، ﭘﯿﻮﺳﺘﻪ و ترکیب… 23

شکل ‏2‑13: ﻣﺪل ﻣﯿﮑﺮوﺳﮑﻮﭘﯿﮏ…. 25

شکل ‏2‑14: ﻣﺪل ﻣﺎﮐﺮوﺳﮑﻮﭘﯿﮏ…. 26

شکل ‏2‑15: ﻣﺪل شبکه موازی ترکیب ﺟﺎده ﻣﺴﺘﻘﯿﻢ.. 28

شکل ‏2‑16: ﺟﺎده ﻣﺴﺘﻘﯿﻢ.. 28

شکل ‏2‑17: ﻻﯾﻪﻫﺎي ﮐﻨﺘﺮل ﺳﻠﺴﻠﻪ ﻣﺮاﺗﺒﯽ.. 29

شکل ‏2‑18: اﺟﺰاي ﮐﻨﺘﺮل ﻫﻮﺷﻤﻨﺪ. 34

شکل ‏3‑1: ساختار شبکه مورد استفاده در مدل METANET. 40

شکل ‏4‑1: شمای کلی از الگوریتم یادگیری تقویتی.. 44

شکل ‏4‑2: تصویر کلی از الگوریتم یادگیری ارائه شده بر روی یک مسئله 2 – بعدی نمونه. 53

شکل ‏4‑3: مجموعه عمل‌های عامل برای بهبود جریان ترافیک…. 56

شکل ‏4‑4: نمایش وضعیت‌های مختلفی که عامل می‌تواند در آن‌ها باشد. 57

شکل ‏5‑1: نمایی از محیط مورد آزمایش ایجاد شده در متلب… 59

شکل ‏5‑2: محیط مورد آزمایش باوجود چراغ‌های راهنمایی.. 60

شکل ‏5‑3: نتایج حاصل از انتخاب عمل‌ها پس از بهینه‌سازی.. 61

شکل ‏5‑4: زمان تأخیر بدون کنترل کننده برای 50 خودرو 63

شکل ‏5‑5: زمان تأخیر با وجود کنترل‌کننده برای 50 خودرو 63

شکل ‏5‑6: نتایج حاصل از روش کنترلی دوم [57] برای 50 خودرو 64

شکل ‏5‑7 :زمان تأخیر بدون کنترل‌کننده برای 100 خودرو 64

شکل ‏5‑8: زمان تأخیر با وجود کنترل‌کننده برای 100 خودرو 65

شکل ‏5‑9 : نتایج حاصل از روش کنترلی دوم[57] برای 100 خودرو 65

شکل ‏5‑10 : زمان تأخیر بدون کنترل‌کننده برای 500 خودرو 66

شکل ‏5‑11 : زمان تأخیر با وجود کنترل‌کننده برای 500 خودرو 66

شکل ‏5‑12: نتایج حاصل از روش کنترلی دوم [57] برای 500 خودرو 67

شکل ‏5‑13: شخصیت درونی عامل فرصت‌طلب برای تصمیم‌گیری.. 67

شکل ‏5‑14: شخصیت درونی عامل پرنوسان در تصمیم‌گیری.. 68

شکل ‏5‑15: شخصیت درونی عامل با تصمیم‌گیری نامناسب… 68

نقد و بررسی‌ها

هنوز بررسی‌ای ثبت نشده است.

اولین کسی باشید که دیدگاهی می نویسد “دانلود پروژه:کنترل هوشمند جریان ترافیک با استفاده از روش‌های یادگیری تقویتی”

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *

قبلا حساب کاربری ایجاد کرده اید؟
گذرواژه خود را فراموش کرده اید؟
Loading...
enemad-logo