»ó¼¼Á¤º¸
Ã¥¼Ò°³
»ç¶÷ó·³ ÇнÀÇÏ´Â ÀΰøÁö´É, ½ÉÃþ °ÈÇнÀÀÇ ¸ðµç °Í»ç¶÷Àº ½ÃÇàÂø¿À¸¦ ÅëÇØ ÇнÀÇÑ´Ù. ¾ÆÇ ½ÇÆи¦ ¾È°ÜÁØ »óȲÀ» ÇÇÇÏ°í, Áñ°Å¿ü´ø ¼º°øÀÇ °æÇèÀ» µÇÇ®ÀÌÇÏ·Á ÇÑ´Ù. ½ÉÃþ °ÈÇнÀµµ ¸¶Âù°¡ÁöÀÌ´Ù. ½ÉÃþ °ÈÇнÀÀº µö·¯´× ±â¹ýÀ» È°¿ëÇØ È¯°æÀÇ ¹ÝÀÀÀ» ±â¹ÝÀ¸·Î Ž»öÇÏ°í ÇнÀÇÏ´Â ¸Ó½Å·¯´× ½Ã½ºÅÛÀ» ¸¸µå´Â °ÍÀ» ¸ñÇ¥·Î ÇÑ´Ù. ÀúÀÚ´Â ½ÉÃþ °ÈÇнÀÀ» ÀÌÇØÇÏ´Â ¹Ø¹ÙÅÁÀÌ µÇ¾îÁÙ °ÈÇнÀ¿¡ °üÇÑ °³³äºÎÅÍ ¾Ë°í¸®Áò°ú ½ÉÃþ °ÈÇнÀÀÇ ±â¹ý, ÃֽŠ±â¼ú µ¿Çâ±îÁö ½ÉÃþ °ÈÇнÀ¿¡ ´ëÇÑ ¸ðµç °É ¼Ò°³ÇÑ´Ù. ¶ÇÇÑ, °¢ À帶´Ù ¼³¸í¿¡ »ç¿ëµÇ´Â ¿¹½Ã¿Í »ðÈ, ½Ç½À, ¸íÈ®ÇÑ ¼³¸íÀ» ¼ö·ÏÇÏ¿© ¸Ó½Å·¯´× Á¢±Ù¹ý¿¡ ´ëÇØ µ¶ÀÚµéÀÌ ½±°Ô »ìÆ캼 ¼ö ÀÖµµ·Ï ÇØÁØ´Ù.
ÀúÀÚ¼Ò°³
·ÏÈ÷µå ¸¶Æ¾ÀÇ ¹Ì»çÀÏ È±â ÅëÁ¦ ¹× ÀÚÀ² ½Ã½ºÅÛ ºÎ¼¿¡¼ °ÈÇнÀÀ» È°¿ëÇϸç ÀÏÇÏ°í ÀÖ´Ù. Á¶Áö¾Æ °ø°ú´ëÇб³¿¡¼ °ÈÇнÀ ¹× ÀÇ»ç °áÁ¤°ú °ü·ÃµÈ °ÀǸ¦ ÇßÀ¸¸ç, À¯´Ù½ÃƼ¿¡¼ ¸Ó½Å·¯´× ÇÁ·ÎÁ§Æ® ¸®ºä¾î ¹× ÀÚÀ² ÁÖÇà °ÀÇ¿¡¼ ¸àÅä·Î È°µ¿ÇßÀ¸¸ç, ½ÉÃþ °ÈÇнÀ °ÀǸ¦ °³¹ßÇß´Ù. Á¶Áö¾Æ °ø°ú´ëÇб³¿¡¼ ÄÄÇ»ÅÍ°úÇÐ ¼®»ç °úÁ¤À» ¼ö·áÇß°í, À¯±âÀû Áö´É¿¡ ´ëÇØ ¿¬±¸Çß´Ù.
¸ñÂ÷
CHAPTER 1 ½ÉÃþ °ÈÇнÀÀÇ ±âÃÊ1.1 ½ÉÃþ °ÈÇнÀÀ̶õ ¹«¾ùÀΰ¡?1.2 ½ÉÃþ °ÈÇнÀÀÇ °ú°Å¿Í ÇöÀç ±×¸®°í ¹Ì·¡1.3 ½ÉÃþ °ÈÇнÀÀÇ ÀûÀý¼º1.4 µÎ °¡ÁöÀÇ ¸íÈ®ÇÑ ±â´ëÄ¡ ¼³Á¤1.5 ¿ä¾àCHAPTER 2 °ÈÇнÀÀÇ ¼öÇÐÀû ±âÃÊ2.1 °ÈÇнÀÀÇ ±¸¼º ¿ä¼Ò2.2 MDP: ȯ°æÀÇ ¿£Áø2.3 ¿ä¾àCHAPTER 3 ¼ø°£ ¸ñÇ¥¿Í Àå±â ¸ñÇ¥ °£ÀÇ ±ÕÇü3.1 ÀÇ»ç°áÁ¤À» ³»¸®´Â ¿¡ÀÌÀüÆ®ÀÇ ¸ñÀû3.2 ÀÌ»óÀûÀÎ Çൿµé¿¡ ´ëÇÑ °èȹ3.3 ¿ä¾àCHAPTER 4 Á¤º¸ÀÇ ¼öÁý°ú »ç¿ë °£ÀÇ ±ÕÇü4.1 Æò°¡°¡´ÉÇÑ Çǵå¹é Çؼ®ÀÇ ¾î·Á¿ò4.2 Àü·«ÀûÀΠŽ»ö4.3 ¿ä¾àCHAPTER 5 ¿¡ÀÌÀüÆ®ÀÇ Çൿ Æò°¡5.1 Á¤Ã¥µéÀÇ °¡Ä¡¸¦ ÃßÁ¤ÇÏ´Â ÇнÀ5.2 ¿©·¯ ´Ü°è¸¦ ÅëÇؼ ÃßÁ¤ÇÏ´Â ÇнÀ5.3 ¿ä¾àCHAPTER 6 ¿¡ÀÌÀüÆ®ÀÇ Çൿ °³¼±6.1 °ÈÇнÀ ¿¡ÀÌÀüÆ®ÀÇ ±¸Á¶6.2 Çൿ¿¡ ´ëÇÑ Á¤Ã¥À» °³¼±Çϱâ À§ÇÑ ÇнÀ6.3 ÇнÀ¿¡¼ ÇൿÀ» ºÐ¸®Çϱâ6.4 ¿ä¾àCHAPTER 7 Á¶±Ý ´õ È¿À²ÀûÀÎ ¹æ¹ýÀ¸·Î ¸ñÇ¥¿¡ µµ´ÞÇϱâ7.1 °°ÇÇÑ ¸ñÇ¥¸¦ È°¿ëÇÑ Á¤Ã¥ °³¼± ÇнÀ7.2 »óÈ£ÀÛ¿ë, ÇнÀ ±×¸®°í °èȹÇÏ´Â ¿¡ÀÌÀüÆ®7.3 ¿ä¾àCHAPTER 8 °¡Ä¡ ±â¹Ý ½ÉÃþ °ÈÇнÀ °³¿ä8.1 ½ÉÃþ °ÈÇнÀ ¿¡ÀÌÀüÆ®°¡ »ç¿ëÇÏ´Â Çǵå¹éÀÇ À¯Çü8.2 °ÈÇнÀÀ» À§ÇÑ ÇÔ¼ö ±Ù»çÈ8.3 NFQ: °¡Ä¡ ±â¹Ý ½ÉÃþ °ÈÇнÀÀ» À§ÇÑ Ã¹ ¹ø° ½Ãµµ8.4 ¿ä¾àCHAPTER 9 Á¶±Ý ´õ ¾ÈÁ¤ÀûÀÎ °¡Ä¡ ±â¹Ý ÇнÀ ¹æ¹ýµé9.1 DQN: °ÈÇнÀÀ» ÁöµµÇнÀó·³ ¸¸µé±â9.2 ÀÌÁß DQN: Çൿ-°¡Ä¡ ÇÔ¼ö¿¡ ´ëÇÑ °úµµÃßÁ¤ ±Øº¹9.3 ¿ä¾àCHAPTER 10 »ùÇà ȿÀ²ÀûÀÎ °¡Ä¡ ±â¹Ý ÇнÀ ¹æ¹ýµé10.1 µà¾ó¸µ DDQN: °ÈÇнÀ¿¡ ÃÊÁ¡À» ¸ÂÃá ½Å°æ¸Á ±¸Á¶10.2 PER: À¯ÀǹÌÇÑ °æÇè ÀçÇö¿¡ ´ëÇÑ ¿ì¼±¼øÀ§ ºÎ¿©10.3 ¿ä¾àCHAPTER 11 Á¤Ã¥-°æ»ç¹ý°ú ¾×ÅÍ-Å©¸®Æ½ ÇнÀ¹ý11.1 REINFORCE: °á°ú±â¹Ý Á¤Ã¥ ÇнÀ11.2 VPG: °¡Ä¡ÇÔ¼ö ÇнÀÇϱâ11.3 A3C: º´·ÄÀû Á¤Ã¥ °»½Å11.4 GAE: °·ÂÇÑ ÀÌÁ¡ ÃßÁ¤11.5 A2C: µ¿±âÈµÈ Á¤Ã¥ °»½Å11.6 ¿ä¾àCHAPTER 12 ¹ßÀüµÈ ¾×ÅÍ-Å©¸®Æ½ ÇнÀ¹ý12.1 DDPG: °áÁ¤Àû Á¤Ã¥¿¡ ´ëÇÑ ±Ù»çÈ12.2 TD3: DDPG¸¦ ³Ñ¾î¼± ¼º´ÉÀ» º¸ÀÌ´Â °³¼±Á¡µé12.3 SAC: ±â´ë ¹Ýȯ°ª°ú ¿£Æ®·ÎÇǸ¦ ÃÖ´ëÈÇϱâ12.4 PPO: ÃÖÀûÈ °úÁ¤À» Á¦ÇÑÇϱâ12.5 ¿ä¾àCHAPTER 13 ¹ü¿ë ÀΰøÁö´ÉÀ» ÇâÇÑ ±æ13.1 ´Ù·é ³»¿ë°ú ´Ù·çÁö ¸øÇÑ ³»¿ë13.2 ¹ü¿ë ÀΰøÁö´É¿¡ ´ëÇÑ Á¶±Ý ´õ ¹ßÀüµÈ °³³äµé13.3 ÀÌÈÄÀÇ ³»¿ëµé13.4 ¿ä¾àºÎ·Ï A ±¸±Û ÄÝ·¦¿¡¼ÀÇ ½Ç½À ȯ°æ