- ÇöÀç À§Ä¡
- home > ÄÄÇ»ÅÍ¡¤ICT¡¤¾îÇÐ > ÄÄÇ»ÅÍ¡¤IT µµ¼ > ÄÄÇ»ÅÍ°øÇÐ > ±×·ÎÅ· ½ÉÃþ °ÈÇнÀ[ÇѺû¹Ìµð¾î]
°ÈÇнÀ°ú ½ÉÃþ °ÈÇнÀÀÌ ¹«¾ùÀÎÁö ÀÌÇØÇÏ°í ½ÇÁ¦·Î Àû¿ëÇغ¸°í ½ÍÀº »ç¶÷µéÀ» À§ÇØ ±âº» À̷кÎÅÍ ½ÇÁ¦ Àû¿ë ¹æ¹ý±îÁö Â÷·Ê·Î ¾È³»ÇÑ´Ù. ÀÚ¼¼ÇÑ ¿¹Á¦¿Í ÀûÀýÇÑ ºñÀ¯°¡ ¼¯ÀÎ °³³ä ¼³¸íÀ¸·Î ½ÃÀÛÇØ, ÇØ´ç °³³äÀ» ¼öÇÐÀûÀ¸·Î È®ÀÎÇÒ ¼ö ÀÖ´Â °ø½Äµé°ú À̸¦ Á÷Á¢ ¸¸µé¾îº¼ ¼ö ÀÖ´Â ÄÚµå±îÁö Á¦°øÇÑ´Ù.
ÀúÀÚ: ¹Ì°Ö ¸ð¶ö·¹½º (ÁöÀºÀÌ), °Âù¼® (¿Å±äÀÌ)
CHAPTER 1 ½ÉÃþ °ÈÇнÀÀÇ ±âÃÊ
1.1 ½ÉÃþ °ÈÇнÀÀ̶õ ¹«¾ùÀΰ¡?
1.2 ½ÉÃþ °ÈÇнÀÀÇ °ú°Å¿Í ÇöÀç ±×¸®°í ¹Ì·¡
1.3 ½ÉÃþ °ÈÇнÀÀÇ ÀûÀý¼º
1.4 µÎ °¡ÁöÀÇ ¸íÈ®ÇÑ ±â´ëÄ¡ ¼³Á¤
1.5 ¿ä¾à
CHAPTER 2 °ÈÇнÀÀÇ ¼öÇÐÀû ±âÃÊ
2.1 °ÈÇнÀÀÇ ±¸¼º ¿ä¼Ò
2.2 MDP: ȯ°æÀÇ ¿£Áø
2.3 ¿ä¾à
CHAPTER 3 ¼ø°£ ¸ñÇ¥¿Í Àå±â ¸ñÇ¥ °£ÀÇ ±ÕÇü
3.1 ÀÇ»ç°áÁ¤À» ³»¸®´Â ¿¡ÀÌÀüÆ®ÀÇ ¸ñÀû
3.2 ÀÌ»óÀûÀÎ Çൿµé¿¡ ´ëÇÑ °èȹ
3.3 ¿ä¾à
CHAPTER 4 Á¤º¸ÀÇ ¼öÁý°ú »ç¿ë °£ÀÇ ±ÕÇü
4.1 Æò°¡°¡´ÉÇÑ Çǵå¹é Çؼ®ÀÇ ¾î·Á¿ò
4.2 Àü·«ÀûÀΠŽ»ö
4.3 ¿ä¾à
CHAPTER 5 ¿¡ÀÌÀüÆ®ÀÇ Çൿ Æò°¡
5.1 Á¤Ã¥µéÀÇ °¡Ä¡¸¦ ÃßÁ¤ÇÏ´Â ÇнÀ
5.2 ¿©·¯ ´Ü°è¸¦ ÅëÇؼ ÃßÁ¤ÇÏ´Â ÇнÀ
5.3 ¿ä¾à
CHAPTER 6 ¿¡ÀÌÀüÆ®ÀÇ Çൿ °³¼±
6.1 °ÈÇнÀ ¿¡ÀÌÀüÆ®ÀÇ ±¸Á¶
6.2 Çൿ¿¡ ´ëÇÑ Á¤Ã¥À» °³¼±Çϱâ À§ÇÑ ÇнÀ
6.3 ÇнÀ¿¡¼ ÇൿÀ» ºÐ¸®Çϱâ
6.4 ¿ä¾à
CHAPTER 7 Á¶±Ý ´õ È¿À²ÀûÀÎ ¹æ¹ýÀ¸·Î ¸ñÇ¥¿¡ µµ´ÞÇϱâ
7.1 °°ÇÇÑ ¸ñÇ¥¸¦ È°¿ëÇÑ Á¤Ã¥ °³¼± ÇнÀ
7.2 »óÈ£ÀÛ¿ë, ÇнÀ ±×¸®°í °èȹÇÏ´Â ¿¡ÀÌÀüÆ®
7.3 ¿ä¾à
CHAPTER 8 °¡Ä¡ ±â¹Ý ½ÉÃþ °ÈÇнÀ °³¿ä
8.1 ½ÉÃþ °ÈÇнÀ ¿¡ÀÌÀüÆ®°¡ »ç¿ëÇÏ´Â Çǵå¹éÀÇ À¯Çü
8.2 °ÈÇнÀÀ» À§ÇÑ ÇÔ¼ö ±Ù»çÈ
8.3 NFQ: °¡Ä¡ ±â¹Ý ½ÉÃþ °ÈÇнÀÀ» À§ÇÑ Ã¹ ¹ø° ½Ãµµ
8.4 ¿ä¾à
CHAPTER 9 Á¶±Ý ´õ ¾ÈÁ¤ÀûÀÎ °¡Ä¡ ±â¹Ý ÇнÀ ¹æ¹ýµé
9.1 DQN: °ÈÇнÀÀ» ÁöµµÇнÀó·³ ¸¸µé±â
9.2 ÀÌÁß DQN: Çൿ-°¡Ä¡ ÇÔ¼ö¿¡ ´ëÇÑ °úµµÃßÁ¤ ±Øº¹
9.3 ¿ä¾à
CHAPTER 10 »ùÇà ȿÀ²ÀûÀÎ °¡Ä¡ ±â¹Ý ÇнÀ ¹æ¹ýµé
10.1 µà¾ó¸µ DDQN: °ÈÇнÀ¿¡ ÃÊÁ¡À» ¸ÂÃá ½Å°æ¸Á ±¸Á¶
10.2 PER: À¯ÀǹÌÇÑ °æÇè ÀçÇö¿¡ ´ëÇÑ ¿ì¼±¼øÀ§ ºÎ¿©
10.3 ¿ä¾à
CHAPTER 11 Á¤Ã¥-°æ»ç¹ý°ú ¾×ÅÍ-Å©¸®Æ½ ÇнÀ¹ý
11.1 REINFORCE: °á°ú±â¹Ý Á¤Ã¥ ÇнÀ
11.2 VPG: °¡Ä¡ÇÔ¼ö ÇнÀÇϱâ
11.3 A3C: º´·ÄÀû Á¤Ã¥ °»½Å
11.4 GAE: °·ÂÇÑ ÀÌÁ¡ ÃßÁ¤
11.5 A2C: µ¿±âÈµÈ Á¤Ã¥ °»½Å
11.6 ¿ä¾à
CHAPTER 12 ¹ßÀüµÈ ¾×ÅÍ-Å©¸®Æ½ ÇнÀ¹ý
12.1 DDPG: °áÁ¤Àû Á¤Ã¥¿¡ ´ëÇÑ ±Ù»çÈ
12.2 TD3: DDPG¸¦ ³Ñ¾î¼± ¼º´ÉÀ» º¸ÀÌ´Â °³¼±Á¡µé
12.3 SAC: ±â´ë ¹Ýȯ°ª°ú ¿£Æ®·ÎÇǸ¦ ÃÖ´ëÈÇϱâ
12.4 PPO: ÃÖÀûÈ °úÁ¤À» Á¦ÇÑÇϱâ
12.5 ¿ä¾à
CHAPTER 13 ¹ü¿ë ÀΰøÁö´ÉÀ» ÇâÇÑ ±æ
13.1 ´Ù·é ³»¿ë°ú ´Ù·çÁö ¸øÇÑ ³»¿ë
13.2 ¹ü¿ë ÀΰøÁö´É¿¡ ´ëÇÑ Á¶±Ý ´õ ¹ßÀüµÈ °³³äµé
13.3 ÀÌÈÄÀÇ ³»¿ëµé
13.4 ¿ä¾à
ºÎ·Ï A ±¸±Û ÄÝ·¦¿¡¼ÀÇ ½Ç½À ȯ°æ
1.1 ½ÉÃþ °ÈÇнÀÀ̶õ ¹«¾ùÀΰ¡?
1.2 ½ÉÃþ °ÈÇнÀÀÇ °ú°Å¿Í ÇöÀç ±×¸®°í ¹Ì·¡
1.3 ½ÉÃþ °ÈÇнÀÀÇ ÀûÀý¼º
1.4 µÎ °¡ÁöÀÇ ¸íÈ®ÇÑ ±â´ëÄ¡ ¼³Á¤
1.5 ¿ä¾à
CHAPTER 2 °ÈÇнÀÀÇ ¼öÇÐÀû ±âÃÊ
2.1 °ÈÇнÀÀÇ ±¸¼º ¿ä¼Ò
2.2 MDP: ȯ°æÀÇ ¿£Áø
2.3 ¿ä¾à
CHAPTER 3 ¼ø°£ ¸ñÇ¥¿Í Àå±â ¸ñÇ¥ °£ÀÇ ±ÕÇü
3.1 ÀÇ»ç°áÁ¤À» ³»¸®´Â ¿¡ÀÌÀüÆ®ÀÇ ¸ñÀû
3.2 ÀÌ»óÀûÀÎ Çൿµé¿¡ ´ëÇÑ °èȹ
3.3 ¿ä¾à
CHAPTER 4 Á¤º¸ÀÇ ¼öÁý°ú »ç¿ë °£ÀÇ ±ÕÇü
4.1 Æò°¡°¡´ÉÇÑ Çǵå¹é Çؼ®ÀÇ ¾î·Á¿ò
4.2 Àü·«ÀûÀΠŽ»ö
4.3 ¿ä¾à
CHAPTER 5 ¿¡ÀÌÀüÆ®ÀÇ Çൿ Æò°¡
5.1 Á¤Ã¥µéÀÇ °¡Ä¡¸¦ ÃßÁ¤ÇÏ´Â ÇнÀ
5.2 ¿©·¯ ´Ü°è¸¦ ÅëÇؼ ÃßÁ¤ÇÏ´Â ÇнÀ
5.3 ¿ä¾à
CHAPTER 6 ¿¡ÀÌÀüÆ®ÀÇ Çൿ °³¼±
6.1 °ÈÇнÀ ¿¡ÀÌÀüÆ®ÀÇ ±¸Á¶
6.2 Çൿ¿¡ ´ëÇÑ Á¤Ã¥À» °³¼±Çϱâ À§ÇÑ ÇнÀ
6.3 ÇнÀ¿¡¼ ÇൿÀ» ºÐ¸®Çϱâ
6.4 ¿ä¾à
CHAPTER 7 Á¶±Ý ´õ È¿À²ÀûÀÎ ¹æ¹ýÀ¸·Î ¸ñÇ¥¿¡ µµ´ÞÇϱâ
7.1 °°ÇÇÑ ¸ñÇ¥¸¦ È°¿ëÇÑ Á¤Ã¥ °³¼± ÇнÀ
7.2 »óÈ£ÀÛ¿ë, ÇнÀ ±×¸®°í °èȹÇÏ´Â ¿¡ÀÌÀüÆ®
7.3 ¿ä¾à
CHAPTER 8 °¡Ä¡ ±â¹Ý ½ÉÃþ °ÈÇнÀ °³¿ä
8.1 ½ÉÃþ °ÈÇнÀ ¿¡ÀÌÀüÆ®°¡ »ç¿ëÇÏ´Â Çǵå¹éÀÇ À¯Çü
8.2 °ÈÇнÀÀ» À§ÇÑ ÇÔ¼ö ±Ù»çÈ
8.3 NFQ: °¡Ä¡ ±â¹Ý ½ÉÃþ °ÈÇнÀÀ» À§ÇÑ Ã¹ ¹ø° ½Ãµµ
8.4 ¿ä¾à
CHAPTER 9 Á¶±Ý ´õ ¾ÈÁ¤ÀûÀÎ °¡Ä¡ ±â¹Ý ÇнÀ ¹æ¹ýµé
9.1 DQN: °ÈÇнÀÀ» ÁöµµÇнÀó·³ ¸¸µé±â
9.2 ÀÌÁß DQN: Çൿ-°¡Ä¡ ÇÔ¼ö¿¡ ´ëÇÑ °úµµÃßÁ¤ ±Øº¹
9.3 ¿ä¾à
CHAPTER 10 »ùÇà ȿÀ²ÀûÀÎ °¡Ä¡ ±â¹Ý ÇнÀ ¹æ¹ýµé
10.1 µà¾ó¸µ DDQN: °ÈÇнÀ¿¡ ÃÊÁ¡À» ¸ÂÃá ½Å°æ¸Á ±¸Á¶
10.2 PER: À¯ÀǹÌÇÑ °æÇè ÀçÇö¿¡ ´ëÇÑ ¿ì¼±¼øÀ§ ºÎ¿©
10.3 ¿ä¾à
CHAPTER 11 Á¤Ã¥-°æ»ç¹ý°ú ¾×ÅÍ-Å©¸®Æ½ ÇнÀ¹ý
11.1 REINFORCE: °á°ú±â¹Ý Á¤Ã¥ ÇнÀ
11.2 VPG: °¡Ä¡ÇÔ¼ö ÇнÀÇϱâ
11.3 A3C: º´·ÄÀû Á¤Ã¥ °»½Å
11.4 GAE: °·ÂÇÑ ÀÌÁ¡ ÃßÁ¤
11.5 A2C: µ¿±âÈµÈ Á¤Ã¥ °»½Å
11.6 ¿ä¾à
CHAPTER 12 ¹ßÀüµÈ ¾×ÅÍ-Å©¸®Æ½ ÇнÀ¹ý
12.1 DDPG: °áÁ¤Àû Á¤Ã¥¿¡ ´ëÇÑ ±Ù»çÈ
12.2 TD3: DDPG¸¦ ³Ñ¾î¼± ¼º´ÉÀ» º¸ÀÌ´Â °³¼±Á¡µé
12.3 SAC: ±â´ë ¹Ýȯ°ª°ú ¿£Æ®·ÎÇǸ¦ ÃÖ´ëÈÇϱâ
12.4 PPO: ÃÖÀûÈ °úÁ¤À» Á¦ÇÑÇϱâ
12.5 ¿ä¾à
CHAPTER 13 ¹ü¿ë ÀΰøÁö´ÉÀ» ÇâÇÑ ±æ
13.1 ´Ù·é ³»¿ë°ú ´Ù·çÁö ¸øÇÑ ³»¿ë
13.2 ¹ü¿ë ÀΰøÁö´É¿¡ ´ëÇÑ Á¶±Ý ´õ ¹ßÀüµÈ °³³äµé
13.3 ÀÌÈÄÀÇ ³»¿ëµé
13.4 ¿ä¾à
ºÎ·Ï A ±¸±Û ÄÝ·¦¿¡¼ÀÇ ½Ç½À ȯ°æ
¼öÇÐ °ø½ÄºÎÅÍ ÄÚµå ¿¹Á¦±îÁö ¸ðµç °É °®Ãá ½ÉÃþ °ÈÇнÀ Ç® ÄÚ½º ÀÌ Ã¥Àº °ÈÇнÀ°ú ½ÉÃþ °ÈÇнÀÀÌ ¹«¾ùÀÎÁö ÀÌÇØÇÏ°í ½ÇÁ¦·Î Àû¿ëÇغ¸°í ½ÍÀº »ç¶÷µéÀ» À§ÇØ ±âº» À̷кÎÅÍ ½ÇÁ¦ Àû¿ë ¹æ¹ý±îÁö Â÷·Ê·Î ¾È³»ÇÕ´Ï´Ù. ÀÚ¼¼ÇÑ ¿¹Á¦¿Í ÀûÀýÇÑ ºñÀ¯°¡ ¼¯ÀÎ °³³ä ¼³¸íÀ¸·Î ½ÃÀÛÇØ, ÇØ´ç °³³äÀ» ¼öÇÐÀûÀ¸·Î È®ÀÎÇÒ ¼ö ÀÖ´Â °ø½Äµé°ú À̸¦ Á÷Á¢ ¸¸µé¾îº¼ ¼ö ÀÖ´Â ÄÚµå±îÁö Á¦°øÇÏ¸ç °ÈÇнÀÀ» ¶°¸Ô¿©ÁÝ´Ï´Ù. ´«°ú ¼ÕÀ» ÅëÇØ µé¾î¿À´Â ¼³¸íÀ» Çϳª¾¿ Â÷·Ê´ë·Î ¼ÒÈÇسª°¡´Ù º¸¸é ¾î·Æ°Ô¸¸ ´À²¸Á³´ø ½ÉÃþ °ÈÇнÀÀÌ ¾î´À»õ ¿©·¯ºÐÀÇ °ÍÀÌ µÇ¾î ÀÖÀ» °Ì´Ï´Ù. ´ë»ó µ¶ÀÚ ÀΰøÁö´ÉÀ̶õ ¿¬±¸ ¿µ¿ª¿¡ Àͼ÷ÇÏ°í ÆÄÀ̽ã Äڵ带 º¼ ÁÙ ¾Ë¾Æ¾ß ÇÕ´Ï´Ù. ¿©±âÀú±â ÀÖ´Â ¼öÇаú ¼ö¸¹Àº Á÷°üÀûÀÎ ¼³¸íÀ» ÀÌÇØÇϸç Àç¹ÌÀÖ°í ÀÚ¼¼ÇÑ ¿¹Á¦¸¦ ¹ÙÅÁÀ¸·Î ÇнÀÇÏ°íÀÚ ÇÏ´Â »ç¶÷À̶ó¸é ÀÌ Ã¥À» Àç¹ÌÀÖ°Ô º¼ ¼ö ÀÖ½À´Ï´Ù. ÀΰøÁö´É¿¡ ´ëÇØ ¸ð¸£´õ¶óµµ, ÆÄÀ̽ã Äڵ带 ÀÐÀ» ÁÙ ¾Ë°í ÇнÀ¿¡ ´ëÇÑ Èï¹Ì¸¸ ÀÖ´Ù¸é ¸¹Àº ³»¿ëÀ» ¾ò¾î°¥ ¼ö ÀÖ½À´Ï´Ù. ±âº»ÀûÀÎ µö·¯´× Áö½ÄÀÌ ¿ä±¸µÇ±ä ÇÏÁö¸¸, ÀÌ Ã¥Àº ½Å°æ¸Á°ú ¿ªÀüÆÄ ¹æ½Ä ¹× °ü·Ã ±â¹ýÀ» °£´ÜÇÏ°Ô º¹½ÀÇÕ´Ï´Ù. °á·ÐÀûÀ¸·Î ÀÌ Ã¥ ÇÑ ±Ç¿¡¼ ¿øÇÏ´Â Áö½ÄÀ» ¸ðµÎ ¾ò¾î°¥ ¼ö ÀÖÀ¸¸ç ÀΰøÁö´É ¿¡ÀÌÀüÆ®¸¦ °¡Áö°í ³î°í ½ÍÀº »ç¶÷À̳ª ½ÉÃþ °ÈÇнÀÀ» ±í°Ô ÀÌÇØÇÏ·Á´Â »ç¶÷¿¡°Ô ÁÁ½À´Ï´Ù. ÁÖ¿ä ³»¿ë ¡Ü½ÉÃþ °ÈÇнÀÀÇ ±âº» ¿ø¸® ¡ÜÃֽŠ½ÉÃþ °ÈÇнÀ ±â¹ý ¡ÜÀΰ£Ã³·³ ÇнÀÇÏ´Â ½ÉÃþ °ÈÇнÀ ¿¡ÀÌÀüÆ® °³¹ß¹ý ¡Üº¹ÀâÇÑ »óȲ¿¡ Àû¿ëÇÒ ¼ö ÀÖ´Â ½ÉÃþ °ÈÇнÀ Á¢±Ù¹ý