대한전자공학회
The Institute of Electronics and Information Engineers
| 행 사 명 | 현대 강화학습 기술과 구현 단기강좌
Short Course on Modern Deep Reinforcement Learning Theory and Implementation
|
| 일 시 | 2024년 10월 28일(월) 09:30 - 17:00 |
| 장 소 | 온라인 |
| 주 최 | 대한전자공학회 통신소사이어티 |
|
초대의 말씀
연구개발에 종사하시는 귀하 및 귀사의 무궁한 발전을 기원합니다.
대한전자공학회 통신소사이어티에서는 “현대 강화학습 기술과 구현”을 주제로 한 단기강좌를 준비했습니다. 통신, 네트워크, 모빌리티 분야에서 딥러닝(Deep Learning) 기술의 활발한 적용이 이루어진 지 오래되었으며, 이를 통해 많은 발전을 이뤄왔습니다. 특히 2023년부터 거대언어모델 및 GPT 기술의 발달로 이러한 관심이 더욱 가속화되고 있습니다. 이러한 기술 발전은 통신 분야에서도 자율이동체, 분산학습 등 여러 연구 분야에서 성과로 이어지고 있습니다. 이에 따라 여러 학술 단체에서 딥러닝 관련 기술 강좌가 활발히 열리고 있으나, 대부분 응용 사례 소개에 중점을 두고 있어 통신, 네트워크, 모빌리티 연구에 종사하는 대학원생과 연구원들이 심도 있는 이해를 바탕으로 논문을 작성하는 데는 한계가 있는 것이 현실입니다. 이번 단기강좌는 이러한 요구에 부응하고자 통신, 네트워크, 모빌리티 분야의 대학원생과 연구원들에게 폭넓은 도움을 줄 수 있는 프로그램을 기획했습니다. 최근 다양한 분야에서 주목받고 있는 현대 강화학습의 핵심 기술을 심도 있게 논의하는 자리를 마련하였습니다. 이번 강좌를 통해 통신 및 네트워크 연구에서 강화학습 알고리즘 활용의 저변이 확대되고, 대학원생 및 연구원들이 인공지능을 활용한 연구 논문 작성에 큰 도움이 되기를 진심으로 바랍니다. 감사합니다. 2024년 10월
대한전자공학회 통신소사이어티 회장 신오순 프로그램 위원장 김중헌 |
< 프로그램 >
● 09:25-09:30 환영사
● 09:30-10:30 김중헌 교수(고려대)
제 목 : 탐색기반 강화학습 이론
강의개요 : 강화학습의 가장 기초적인 개념과 Markov Decision Process (MDP)로 대표되는 탐색기반 강화학습에 대해서 알아본다. 그리고 해당 강화학습 알고리즘이 가지는 장점과 한계에 대해서 알아보고 마지막으로 해당 알고리즘의 구현에 대해서 논한다.
제 목 : 심층강화학습 이론
강의개요 : 탐색기반 강화학습의 한계를 극복하기 위한 심층강화학습 이론에 대해서 다룬다. 강화학습의 개념과 인공신경망에 대해서 다룬다. 이를 위하여 선행적으로 인공신경망 기술의 기본에 대해서 논하고 이를 기반으로 강화학습으로의 응용에 대해서 논한다.
● 11:45-13:00 중 식
제 목 : 심층강화학습 구현
강의개요 : 심층강화학습 이론에 근거하여 해당 이론의 구현에 대해서 논한다. 더불어 이러한 구현을 진행함에 필요한 다양한 성능 개선 요소들에 대해서 알아보고 실제 적용에 대해서 알아본다. 마지막으로 활용 가능한 응용 분야에 대해서 논한다.
제 목 : Actor-Critic 및 관련 강화학습 알고리즘
강의개요 : 심층강화학습 이론에 있어서 대부분의 알고리즘의 이론과 구현에 중심이 되는 Actor-Critic 네트워크에 대해서 알아보고 그에 대한 구현에 대해서 논한다. PPO와 DDPG 등 대표적인 강화학습 알고리즘의 Actor-Critic 기반의 구현에 대해서도 논한다.
제 목 : 최신 강화학습 기술과 응용
강의개요 : 최근 많은 논의가 이루어지고 있는 생성망 기반 강화학습과 더불어 멀티에이전트 강화학습에 대해서 알아본다. 더불어 이러한 기술이 활용되는 분야와 앞으로 연구가 진행될 방향성에 대해서 논한다.
강사 약력
김중헌 교수 (고려대학교 전기전자공학부)
2019.09-현재 고려대학교 전기전자공학부 부교수
2016.03-2019.08 중앙대학교 소프트웨어대학 조교수
2013.09-2016.02 Intel Corporation 본사연구소, Systems Engineer
2009.09-2014.08 University of Southern California, Computer Science 박사
2006.01-2009.08 LG전자 CTO부문 멀티미디어연구소 주임연구원
2004.03-2006.02 고려대학교 컴퓨터학과 석사
1999.03-2004.02 고려대학교 컴퓨터학과 학사
김중헌 교수 (고려대학교 전기전자공학부)
2019.09-현재 고려대학교 전기전자공학부 부교수
2016.03-2019.08 중앙대학교 소프트웨어대학 조교수
2013.09-2016.02 Intel Corporation 본사연구소, Systems Engineer
2009.09-2014.08 University of Southern California, Computer Science 박사
2006.01-2009.08 LG전자 CTO부문 멀티미디어연구소 주임연구원
2004.03-2006.02 고려대학교 컴퓨터학과 석사
1999.03-2004.02 고려대학교 컴퓨터학과 학사
