지원사업
학술연구/단체지원/교육 등 연구자 활동을 지속하도록 DBpia가 지원하고 있어요.
커뮤니티
연구자들이 자신의 연구와 전문성을 널리 알리고, 새로운 협력의 기회를 만들 수 있는 네트워킹 공간이에요.
논문 기본 정보
- 자료유형
- 학술저널
- 저자정보
- 저널정보
- Korean Institute of Information Scientists and Engineers Journal of KIISE Journal of KIISE Vol.47 No.1
- 발행연도
- 2020.1
- 수록면
- 78 - 87 (10page)
- DOI
- 10.5626/JOK.2020.47.1.78
이용수
초록· 키워드
오류제보하기
연속상태공간에서 주어진 태스크의 제어를 위해 심층 신경망을 사용하여 가치함수와 정책함수를 근사하는 심층 강화학습(Deep Reinforcement Learning) 알고리즘은 최근 유망한 결과들을 보여 주었다. 그러나 함수근사를 위해 사용되는 심층 신경망의 비-컨벡스 특성이 최적화 알고리즘의 이론적 분석을 종종 어렵게 만들어 왔으며 이로 인하여 심층 강화학습 알고리즘의 점근적 전역 최적해로의 수렴과 같은 이론적 보장이 부족하다. 강화학습에서의 보상함수는 학습 에이전트의 전체적인 특성을 결정짓는 중요한 요소 중 하나라는 사실에 기인하여, 본 논문에서는 심층 강화학습 알고리즘의 비-컨벡스 최적화 과정의 이론적 수렴과 같은 측면보다는 작지만 중요한 측면 중 하나로써, 심층강화학습에서 널리 사용되는 보상함수들의 구조와 이들이 학습 알고리즘에 미치는 영향에 대해 분석한다. 심층 강화학습에서 보상함수가 흔히 시행착오법에 기반하여 설계되어온 것을 고려했을 때, 본 논문에서 제안하는 분석이 심층강화학습의 보상함수 설계에 유용한 가이드가 될 수 있을 것으로 기대한다.
목차
요약
Abstract
1. Introduction
2. Reward Functions for Goal-Oriented Tasks
3. Special Cases and Experiments
4. Conclusion
References
참고문헌 (21)
참고문헌 신청
D. P. Bertsekas and J. N. Tsitsiklis, Neuro-dynamic programming, vol. 5, Athena Scientific Belmont, MA, 1996.
R. S. Sutton, A. G. Barto and others, Introduction to reinforcement learning, volume 135, MIT press Cambridge, 1998.
E. Greensmith, P. L. Bartlett and J. Baxter, "Variance reduction techniques for gradient estimates in reinforcement learning," Journal of Machine Learning Research, volume 5, pp. 1471-1530, 2004.
L. Weaver and N. Tao, "The optimal reward baseline for gradient-based reinforcement learning," Proceedings of the Seventeenth conference on Uncertainty in artificial intelligence, pp. 538-545, 2001.
J. Schulman, P. Moritz, S. Levine, M. Jordan and P. Abbeel, "High-dimensional continuous control using generalized advantage estimation," arXiv preprint arXiv:1506.02438, 2015.
R. S. Sutton, A. G. Barto and others, Introduction to reinforcement learning, volume 135, MIT press Cambridge, 1998.
E. Greensmith, P. L. Bartlett and J. Baxter, "Variance reduction techniques for gradient estimates in reinforcement learning," Journal of Machine Learning Research, volume 5, pp. 1471-1530, 2004.
L. Weaver and N. Tao, "The optimal reward baseline for gradient-based reinforcement learning," Proceedings of the Seventeenth conference on Uncertainty in artificial intelligence, pp. 538-545, 2001.
J. Schulman, P. Moritz, S. Levine, M. Jordan and P. Abbeel, "High-dimensional continuous control using generalized advantage estimation," arXiv preprint arXiv:1506.02438, 2015.
함께 읽어보면 좋을 논문
논문 유사도에 따라 DBpia 가 추천하는 논문입니다. 함께 보면 좋을 연관 논문을 확인해보세요!
-
자율주행차량을 위한 강화학습 보상 함수에 관한 연구
한국통신학회 학술대회논문집
2025 .02
-
서로 다른 학습 기반을 적용한 강화학습에서의 보상 방법에 관한 연구
한국정보과학회 학술발표논문집
2018 .06
-
강화 학습에서 보상 함수 변화에 따른 동작의 다양성 분석
한국정보과학회 학술발표논문집
2020 .12
-
Analysis of Reinforcement Learning Rewards for Time and Energy Optimization
대한기계학회 춘추학술대회
2024 .06
-
심층 Q-네트워크 학습에서 보상 및 학습 진행률 기반 적응형 탐색
한국통신학회 학술대회논문집
2023 .02
-
산업용 사물 인터넷을 위한 프라이버시 보존 연합학습 기반 심층 강화학습 모델
정보보호학회논문지
2023 .12
-
“강화학습” 특집을 내면서
정보과학회지
2019 .11
-
자율주행을 위한 심층 강화학습 기반의 주행 제어 시스템
Proceedings of KIIT Conference
2023 .06
-
기초토목공사의 자율작업을 위한 강화학습 알고리즘의 활성함수 변화에 따른 수렴성 분석
유공압건설기계학회 학술대회논문집
2024 .10
-
다중 개체 간 네트워크 공유를 통한 심층강화학습의 학습 효율성 향상 연구
한국통신학회 학술대회논문집
2022 .02
-
강화 학습에 나타나는 희소 보상 문제를 해결하는 기법들
정보 및 제어 논문집
2021 .04
-
심층 강화 학습 기술 동향
방송과 미디어
2022 .04
-
심층강화학습을 통한 위상최적화
대한기계학회 춘추학술대회
2022 .05
-
다각적인 보상 함수를 고려한 Multi-Critic 강화학습에 관한 연구: 추천시스템으로의 적용
한국전자거래학회지
2024 .11
-
심층 강화학습 기반 교통 신호 제어
한국통신학회 학술대회논문집
2022 .06
-
상태 표현 방식에 따른 심층 강화 학습 기반 캐릭터 제어기의 학습 성능 비교
컴퓨터그래픽스학회논문지
2021 .12
-
심층 강화학습 기반 실시간 게임 인공지능 최신 동향
Proceedings of KIIT Conference
2022 .12
-
심층 강화학습을 이용한 단순 형상에 대한 설계이력 재구성
대한기계학회 춘추학술대회
2021 .11
-
심층 강화학습 기술 동향
[ETRI] 전자통신동향분석
2019 .08
-
양자 심층 강화 학습 동향
한국통신학회 학술대회논문집
2022 .06
이 논문의 저자 정보
이 논문과 함께 이용한 논문
Reward Shaping for a Reinforcement Learning Method-Based Navigation Framework
Cubahi
,
o Roland
,
Donggyu Choi
외 1명
한국정보통신학회 종합학술대회 논문집
2022
.10
자율주행을 위한 멀티에이전트 심화 강화학습
이홍석
,
박은수
,
김승일
정보과학회 컴퓨팅의 실제 논문지
2018
.12
PPO 강화학습을 이용한 온도제어의 시뮬레이션 연구
류진우
대한설비공학회 학술발표대회논문집
2021
.11
DDQN을 활용한 강화학습 기반의 다기능 레이더 임무 스케줄링 방법
주광민
한국산학기술학회 논문지
2023
.07
딥러닝을 적용한 패턴의 정렬에 관한 연구
이제민
,
김석
,
서보욱
외 3명
한국정밀공학회 학술발표대회 논문집
2021
.11
최근 본 자료
댓글(0)
0