지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 발행연도
- 2024.12
- 수록면
- 1,671 - 1,684 (14page)
- DOI
- 10.7840/kics.2024.49.12.1671
이용수
초록· 키워드
오류제보하기
다차선 고속도로 환경에서는 다양한 교통 상황이 발생하며 교통 수칙을 준수하면서 주행해야 하며 이는 자율주행에서 매우 어려운 과제이다. motion planning에 대한 기존의 판단 방법은 규칙 기반 판단 방법으로 복잡한 환경에서 안전을 보장할 수 없으며, 이 문제를 해결하기 위해 심층 강화학습을 적용한 판단 방법에 관한 연구가 진행되고 있다. 본 논문에서는 심층 강화학습 속 하이브리드 액션을 이용한 proxiaml policy optimization(PPO)에 기반한 판단 방법을 제시한다. 심층 강화학습 모델의 상태 공간은 차선 정보, 속도를 포함한 자차량(ego)의 상태, 주변 차량의 상태를 포함하며, 연속 종 방향 액추에이터 값과 이산 횡 방향 차선 변경 판단을 출력으로 한다. 차선 변경을 위해 고정된 스티어링(steering)을 사용하는 것이 아닌 pure pursuit을 통해 액추에이터 단계의 스티어링을 제어한다. 100번의 테스트를 진행하여 충돌률을 포함한 평가 지료를 제시하며, 실험 결과는 하이브리드 액션을 이용한 에이전트가 연속 또는 이산 행동을 취하는 에이전트보다 더 안전하다는 결과를 보여준다.
목차
요약
ABSTRACT
Ⅰ. 서론
Ⅱ. 심층 강화학습 방법론
Ⅲ. 심층 강화학습 기반 주행 판단 모델
Ⅳ. 시뮬레이션 결과
Ⅴ. 결론
References
참고문헌 (24)
참고문헌 신청
H. Lee, T. Kim, H. Kim, and S.-H. Hwang, “Reinforcement learning based autonomous emergency steering control in virtual environments,” J. Drive and Control, vol. 19, no. 4, pp. 110-116, Dec. 2022. (https://doi.org/10.7839/ksfc.2022.19.4.110)
S. Malik, M. A. Khan, H. El-Sayed, J. Khan, and O. Ullah, “How do autonomous vehicles decide?” Sensors, vol. 23, no. 1, Dec. 2022. (https://doi.org/10.3390/s23010317)
J. Lee and S.-J. Yoo, “Implementation of digital virtual environment model considering obstacles and traffic lights, and research on multi-lane autonomous driving based on deep reinforcement learning,” J. KICS, vol. 49, no. 6, pp. 862-873, Jun. 2024. (https://doi.org/10.7840/kics.2024.49.6.862)
M. Zhang, K. Chen, and J. Zhu, “An efficient planning method based on deep reinforcement learning with hybrid actions for autonomous driving on highway,” Int. J. Mach. Learn. and Cybernetics, vol. 14, pp. 3483-3499, Jun. 2023. (https://doi.org/10.1007/s13042-023-01845-2)
B. R. Kiran, I. Sobh, V. Talpaert, P. Mannion, A. A. Al Sallab, S. Yogamani, and P. Pérez, “Deep reinforcement learning for autonomous driving: A survey,” IEEE Trans. Intell. Transport. System (TITS), vol. 23, no. 6, pp. 4909-4926, Jun. 2022. (https://doi.org/10.1109/TITS.2021.3054625)
S. Malik, M. A. Khan, H. El-Sayed, J. Khan, and O. Ullah, “How do autonomous vehicles decide?” Sensors, vol. 23, no. 1, Dec. 2022. (https://doi.org/10.3390/s23010317)
J. Lee and S.-J. Yoo, “Implementation of digital virtual environment model considering obstacles and traffic lights, and research on multi-lane autonomous driving based on deep reinforcement learning,” J. KICS, vol. 49, no. 6, pp. 862-873, Jun. 2024. (https://doi.org/10.7840/kics.2024.49.6.862)
M. Zhang, K. Chen, and J. Zhu, “An efficient planning method based on deep reinforcement learning with hybrid actions for autonomous driving on highway,” Int. J. Mach. Learn. and Cybernetics, vol. 14, pp. 3483-3499, Jun. 2023. (https://doi.org/10.1007/s13042-023-01845-2)
B. R. Kiran, I. Sobh, V. Talpaert, P. Mannion, A. A. Al Sallab, S. Yogamani, and P. Pérez, “Deep reinforcement learning for autonomous driving: A survey,” IEEE Trans. Intell. Transport. System (TITS), vol. 23, no. 6, pp. 4909-4926, Jun. 2022. (https://doi.org/10.1109/TITS.2021.3054625)
이 논문과 함께 이용한 논문
라이다 기반 객체 추적을 위한 실시간 통합 프레임워크
이규석
,
김가나
,
이재준
외 1명
제어로봇시스템학회 논문지
2025
.03
다양한 주행 데이터 품질을 고려한 오프라인 강화학습 기반 자율주행 연구
강구현
,
이재휘
,
엄찬인
외 1명
한국자동차공학회 추계학술대회 및 전시회
2024
.11
다중 센서를 이용한 강화학습 기반 자율주행
이경민
,
박민재
,
권남규
제어로봇시스템학회 국내학술대회 논문집
2024
.07
카메라와 라이다의 센서융합을 이용한 객체 추적 시스템 개발
백수진
,
김아현
,
최영림
외 2명
한국지능시스템학회 논문지
2022
.12
라이다를 이용한 객체 검출 및 추적
홍인준
,
박만복
한국자동차공학회 추계학술대회 및 전시회
2021
.11
최근 본 자료
댓글(0)
0
UCI(KEPA) : I410-151-25-02-091246506