行者AI＆硬壳＆AWS | 足球AI夏令营，与孩子一起走进游戏AI的世界

从上世纪80年代的吃豆人到AlphaGo总比分3:0战胜世界排名第一的柯洁，再到OpenAI Five战胜DOTA2世界冠军OG，AI在游戏中得到广泛的应用。而近十年来，人工智能技术的重要研究方向 ——深度强化学习的不断发展，也推动着游戏行业的不断创新。

本次足球AI夏令营，行者AI携手硬壳编程、AWS，与孩子们共同探索游戏AI的世界。行者AI团队为在场同学带来专业的强化学习算法培训，对深度强化学习在游戏中的应用展开具体讲解，激发孩子们对人工智能的兴趣。

强化学习的本质是不断试错、不断探索环境，然后通过环境反馈进行学习。行者AI将足球游戏与强化学习结合，引导同学们自己动手，用键盘去控制一个机器人。同学们通过对机器人射线的观察，理解机器人所处环境，形成自己的状态空间，并控制机器人与AI进行比赛。

此外，行者AI团队还为同学们提供了现场指导，以足球竞赛为例，为大家讲解动作空间、状态空间、奖励函数等专业知识，带领大家完成算法直觉小实验，帮助同学们理解训练步数、神经元个数、折扣率gamma、算法对AI运动员的影响，进而让大家对强化学习在足球游戏中的应用产生更具体的认识。

足球AI竞赛分为闯关模式、自由模式、杯赛模式三种类型，用户可选择自己感兴趣的模式进行比赛。本次夏令营活动，现场同学先在自由模式中练习对打，熟悉比赛流程，再于最后一天的小组竞赛中，应用自己已经训练好的机器人，分小组进行PK，进行最终的冠军角逐。

除竞技类游戏外，行者AI也将强化学习等人工智能技术应用于卡牌、角色扮演、休闲益智等各类游戏中，并希望能够将游戏AI融入教育、医疗、交通等各行各业。游戏是有趣的，游戏AI与各行业的结合，也将使得这些领域的工作更具有趣味性，更令人愉悦。