AlphaGo中的AI技术 ——给ATM研究的一些启示 人工智能AlphaGo全文共40页，当前为第1页。 AlphaGo的成长之路 AlphaGo中的核心AI技术 AI在ATM中的应用实例及启示 人工智能AlphaGo全文共40页，当前为第2页。 AlphaGo的成长之路 人工智能AlphaGo全文共40页，当前为第3页。 这是什么狗？ AlphaGo的成长之路 人工智能AlphaGo全文共40页，当前为第4页。 阿尔法围棋（AlphaGo）是第一个击败人类职业围棋选手、第一个战胜围棋世界冠军的人工智能程序，由谷歌（Google）旗下DeepMind公司戴密斯·哈萨比斯领衔的团队开发。其主要工作原理是"深度学习"。 AlphaGo的成长之路 人工智能AlphaGo全文共40页，当前为第5页。 这狗搞了多大的事？ AlphaGo的成长之路 人工智能AlphaGo全文共40页，当前为第6页。 2016年1月27日，以5:0完胜欧洲围棋冠军、职业二段选手樊麾。 2016年3月，以4:1战胜围棋世界冠军、职业九段棋手李世石。 2016年末2017年初，在中国棋类网站上以"大师"（Master）为注册帐号与中日韩数十位围棋高手进行快棋对决，战绩60:0，未尝一败。 2017年5月，以3:0战胜排名世界第一的世界围棋冠军柯洁。 2017年5月26日，战胜了由陈耀烨、唐韦星、周睿羊、时越、芈昱廷五位世界冠军组成的围棋团队。随后宣布退役。 2017年10月18日，DeepMind团队公布了最强版AlphaGo ，代号AlphaGo Zero。经过短短3天的自我训练，AlphaGo Zero以100:0战胜旧版AlphaGo AlphaGo的成长之路 人工智能AlphaGo全文共40页，当前为第7页。 AlphaGo的成长之路 学习能力哪家强？ 人工智能AlphaGo全文共40页，当前为第8页。 AlphaGo的成长之路 美国Google找Zero 人工智能AlphaGo全文共40页，当前为第9页。 AlphaGo的成长之路 人工智能AlphaGo全文共40页，当前为第10页。 AlphaGo的成长之路 人工智能AlphaGo全文共40页，当前为第11页。 II. AlphaGo中的核心AI技术 人工智能AlphaGo全文共40页，当前为第12页。 II. AlphaGo中的核心AI技术 狗中有乾坤 人工智能AlphaGo全文共40页，当前为第13页。 II. AlphaGo中的核心AI技术 每个人工神经网络在使用的时候，都分为两步：训练与使用。 AlphaGo也不例外。 Zero之前，AlphaGo的基本过程，就是用人类棋谱来训练决策网络然后自我对弈来强化学习，然后用强化学习后的决策网络（落子选择器）来训练价值网络（棋局评估器）。都训练成功后，就可以在实际比赛中结合蒙特卡洛树搜索来进行下棋决策了。 人工智能AlphaGo全文共40页，当前为第14页。 II. AlphaGo中的核心AI技术 而然并没有听懂 ORZ 人工智能AlphaGo全文共40页，当前为第15页。 II. AlphaGo中的核心AI技术 举个栗子 人工智能AlphaGo全文共40页，当前为第16页。 II. AlphaGo中的核心AI技术 一开始，郭靖跟着江南七怪学功夫，被各种教育各种折磨，这就是照着人类经验深度学习训练的决策网络。 学到一定程度后，江南七怪看郭靖实在太笨，自己能教的都教完了，他只学会了怎么猜别人出拳，于是只能叹一口气走了。这就是快速走棋。 人工智能AlphaGo全文共40页，当前为第17页。 II. AlphaGo中的核心AI技术 人工智能AlphaGo全文共40页，当前为第18页。 II. AlphaGo中的核心AI技术 接着，郭靖遇到了周伯通，教他怎么左右手互博。于是郭靖开始不断和自己对打，功力逐步增强。这就是自我对弈强化学习训练的决策网络。 人工智能AlphaGo全文共40页，当前为第19页。 II. AlphaGo中的核心AI技术 人工智能AlphaGo全文共40页，当前为第20页。 II. AlphaGo中的核心AI技术 然后，郭靖在和自己对打的时候，逐渐形成了超强的武感，看一个人抬手就知道他要出什么招，看一个人吐纳就知道自己这一拳胜算几何。这就是价值网络。 某一天，郭靖终于出山了，开始和18届天下第一武道会冠军金轮法王，以及人类世界第一人王重阳交手，对方每一次出招前郭靖都能预判，该怎么应对，每种方案胜率多少，怎么引诱对方露出破绽，这就是蒙特卡洛树搜索。 至此，天资愚笨的郭靖终于成为了一代巨侠。 人工智能AlphaGo全文共40页，当前为第21页。 II. AlphaGo中的核心AI技术 不服来咬我啊 人工智能AlphaGo全文共40页，当前为
