원문정보
Lane Change Methodology for Autonomous Vehicles Based on Deep Reinforcement Learning
초록
영어
Several efforts in Korea are currently underway with the goal of commercializing autonomous vehicles. Hence, various studies are emerging on autonomous vehicles that drive safely and quickly according to operating guidelines. The current study examines the path search of an autonomous vehicle from a microscopic viewpoint and tries to prove the efficiency required by learning the lane change of an autonomous vehicle through Deep Q-Learning. A SUMO was used to achieve this purpose. The scenario was set to start with a random lane at the starting point and make a right turn through a lane change to the third lane at the destination. As a result of the study, the analysis was divided into simulation-based lane change and simulation-based lane change applied with Deep Q-Learning. The average traffic speed was improved by about 40% in the case of simulation with Deep Q-Learning applied, compared to the case without application, and the average waiting time was reduced by about 2 seconds and the average queue length by about 2.3 vehicles.
한국어
현재 국내에서는 자율주행차량의 상용화를 목표로 다양한 노력을 기울이고 있으며 자율주 행차량이 운영 가이드라인에 따라 안전하고 신속하게 주행할 수 있는 연구들이 대두되고 있 다. 본 연구는 자율주행차량의 경로탐색을 미시적인 관점으로 바라보며 Deep Q-Learning을 통 해 자율주행차량의 차로변경을 학습시켜 효율성을 입증하고자 한다. 이를 위해 SUMO를 사용 하였으며, 시나리오는 출발지에서 랜덤 차로로 출발하여 목적지의 3차로까지 차로변경을 통해 우회전하는 것으로 설정하였다. 연구 결과 시뮬레이션 기반의 차로변경과 Deep Q-Learning을 적용한 시뮬레이션 기반의 차로변경으로 구분하여 분석하였다. 평균 통행 속도는 Deep Q-Learning을 적용한 시뮬레이션의 경우가 적용하지 않은 경우에 비해 약 40% 향상되었으며 평균 대기 시간은 약 2초, 평균 대기 행렬 길이는 약 2.3대 감소하였다.
목차
ABSTRACT
Ⅰ. 서론
1. 연구 배경 및 목적
2. 연구 수행 과정
Ⅱ. 이론적 고찰
1. 자율주행차량의 운영 가이드라인
2. 미시적인 관점에서의 자율주행차량 경로계획
3. 차로변경을 통한 자율주행차량 경로계획
4. 강화학습 기반의 자율주행차량 경로계획
5. 심층강화학습 모델
6. 차량추종 모델
7. 차로변경 모델
Ⅲ. 연구 내용
1. 연구 범위
2. 데이터 수집 및 분석
3. 시뮬레이션 환경 구축
4. 심층강화학습 기반 시뮬레이션 수행
Ⅳ. 연구 결과
1. 평균 통행 속도
2. 평균 대기 시간
3. 평균 대기행렬 길이
Ⅴ. 결론
REFERENCES
