谷歌alphago是什么?作为一种人工智能的alphago，和ibm在上个世纪打败国际象棋大师卡斯帕罗夫的深蓝超级计算机，以及当代的苹果siri、googlenow有着显著的区别。要解读alphago，首先我们需要了解alphago背后到底是一个什么东西。
其实谷歌alphago背后是一套神经网络系统，由google2014年收购的英国人工智能公司deepmind开发。这个系统和深蓝不同，不是一台超级计算机，而是一个由许多个数据中心作为节点相连，每个节点内有着多台超级计算机的神经网络系统。就像人脑，是由50-100亿个神经元所组成的，这也是为什么这种机器学习架构被称为神经网络。
你可以将alphago理解为《超验骇客》(transcendence)里约翰尼地的大小决定胜负。
alphago背后的系统还借鉴了一种名为深度强化学习(deepq-learning，dqn)的技巧。强化学习的灵感来源于心理学中的行为主义理论，即有机体如何在环境给予的奖励或惩罚的刺激下，逐步形成对刺激的预期，产生能获得最大利益的习惯性行为。不仅如此，alphago借鉴了蒙特卡洛树搜索算法(montecarlotreesearch)，在判断当前局面的效用函数(valuefunction)和决定下一步的策略函数(policyfunction)上有着非常好的表现，远超过上一个能够和人类棋手旗鼓相当的围棋程序。
deepmind训练alphago的步骤说明：10万盘高手棋谱作为初始数据，进行分类后用于训练策略函数；然后跟自己下棋；强化学习训练策略函数，继续下棋；下了3000万步后进行回归分析，整合蒙特卡洛树搜索模型，训练效用函数。
效用函数和策略函数，分别对应alphago的两个思考维度：目前棋盘的现状，和自己/对手下一步的走向。
alphago所采用的dqn是一种具有广泛适应性的强化学习模型，说白了就是不用修改代码，你让它下围棋它能下围棋，你让它在红白机上玩超级玛丽和太空侵略者，它也不会手生。作为一个基于卷积神经网络、采用了强化学习模型的人工智能，alphago的学习能力很强，往往新上手一个项目，玩上几局就能获得比世界上最厉害的选手还强的实力。
2014年，已经被google收购的deepmind，用五款雅达利(atari)游戏pong、打砖块、太空侵略者、海底救人、beamrider分别测试了自己开发的人工智能的性能，结果发现：在两三盘游戏后，神经网络的操控能力已经远超世界上任何一位已知的游戏高手。
deepmind用同样的一套人工智能，不调整代码就去测试各种各样的智力竞技项目，取得了优异的战绩，足以证明今天坐在李世石面前的alphago，拥有多强的学习能力。
李世石执黑子，alphago执白子。大约进行了85分钟时进入休息阶段
在此之前，deepmind进行过的无数虚拟棋局训练，以及去年击败欧洲围棋冠军樊麾二段的经验让alphago已经训练出了顶尖的弈技，极有可能高于世界上任何已知的围棋高手。
alphago的水平大约在专业六段左右。再和其他围棋程序的495盘较量中胜494盘；在让4子的前提下仍有75%的胜率。
尽管棋盘上风云变化，早在本次开战前，alphago跟李世石就已不在同一起跑线上了。根据deepmind透露的情况，从去年10月5-0击败樊麾二段到现在，alphago已经在神经网络容量(数据容量)以及自己跟自己下棋用于训练的数据质量上有了较大的提升。而且神经网络的分布式计算延迟也得到了优化，最终使得alphago能够在两小时的限定时间内击败了李世石九段。
alphago只是deepmind证明自己的一个工具。你也可以将这次和李世石的对局理解为google的公关策略。
2014年，这家公司曾经在其官网上写道：deepmind致力于用研究深度学习的方式去真正了解智慧(solveintelligence)。但对于deepmind和google来说，打造alphago以及其他人工智能神经网络不是终点
将机器学习和神经科学进行结合，打造出一种一般用途的学习算法。通过这种算法，deepmind和google希望能够将智能定型化，理解智能是什么，进而更好的帮助人类理解大脑。deepmind联合创始人之一的demishassabis曾经写道：
用算法将智慧提炼出来，有可能成为理解人类思维最神秘原理的最佳方式。
attemptingtodistilintelligenceintoanalgorithmicconstructmayprovetobethebestpathtounderstandingsomeoftheenduringmysteriesofourminds.
在google收购deepmind前，收购条款中的一项就是google必须成立人工智能道德委员会。因此，在目前阶段人们不必担心这样的人工智能最终杀死或统治人类。但至少，人工智能在围棋这样的智力类竞技项目上击败人类，是已经注定的事情。
作为一种决策树巨大的游戏，围棋本来适合人脑思考，不适合机器运算。但deepmindai的方向就是模仿人脑思考，用神经网络重现智慧。
