嗨, 伙计们
欢迎学习Breakout的最终教程｡
嘿, 伙计们, 超级兴奋有你在这里和超级高兴大家再次在一起后, 厄运｡
所以这次我们要看《突围》的结果, 我提醒你, 它比《毁灭战士》更具挑战性｡
所以希望我们能得到一些好的结果｡
好吧, 那我们现在怎么办？
这是主代码｡
所以我们有几个代码｡
所有的代码都在这里, 这是主代码｡
这意味着将执行所有其他代码的代码｡
因此, 建立一个神经网络, 并训练代理人的批评｡
因此, 基本上我们要做的就是执行, 看看进展如何, 但我们不会等待结果,
因为实际上这需要几个小时｡
是的, 我知道
因此, 我们在此测试文件夹中准备了结果｡
我们已经有了视频, 我们将在那之后给你看｡
好吧, 我会的
所以要执行, 基本上, 我们只要在这里选择整个代码, 然后开始｡
好吧, 我会的
正如你所看到的, 视频已经被填充｡
好吧, 我会的
所以现在, 我们已经有了两个视频, 然后特工们正在训练, 但这需要很长时间｡
现在我们要做的是观察结果, 我还没有看到结果｡
你还没看过呢
好吧, 我会的
因此, 在SES网站上的模板文件夹中, 您将找到两个文件夹代码､ 无注释和带注释的代码｡
所以即使你错过了任何细节, 你仍然可以看看这个代码｡
你对所有的评论都解释得很好｡
所以每一行都是欢迎输入的, 这样你就能理解了｡
然后, 在此文件夹中, 您将找到此测试文件夹, 该文件夹将填充视频｡
好吧, 我会的
所以录像带就在那里｡
这是我们之前培训的视频｡
我们对模型进行了几个小时的训练, 并获得了这些视频｡
所以我们要一个一个看, 从第一个开始｡
我们将看看是否有人工智能在发挥作用, 我们是否能解决问题｡
好吧, 我们来看看｡
我们来看第一段视频｡
所以这第一个视频, 你知道, 实际上是我们要做的｡
是的, 我们要做的是停止训练, 因为它正在减慢我的电脑现在｡
是这样｡
好吧, 被打断了, 但一切都好｡
是的, 我知道
让我们看第一段视频｡
这将是非常糟糕的, 因为这真的是第一个｡
踏板甚至可能不会移动｡
我们走吧｡
它不动了｡
他为什么一动不动？
因为, 你知道, 这才刚刚开始｡
那家伙不知道该怎么办｡
它仍然是一个预处理的图像｡
所以, 是的, 没什么｡
第二个视频甚至可能是这样｡
如果我们看第二个, 专家组可能不会｡
可能还是不会动｡
好吧, 我会的
那么到目前为止, 你对这个人工智能有什么看法？
是的, 我知道
所以这才是一个耗费了如此多能量的地球｡
好了, 下一个视频, 我们可能会有一些东西｡
好吧, 也许有点什么｡
一点点人工智能泄露了太多信息｡
甚至不是甚至不是无用地｡
我们是要突围还是｡
不, 不, 不, 不
好吧, 我会的
来吧, 来吧
我们来做点酷的吧｡
我们走吧｡
希望下一次能有所收获｡
是的, 我知道
我想我们得到了一些东西, 因为现在是11秒｡
我们走吧｡
好点了｡
好了, 现在眼睛有眼睛了｡
它能看见｡
能感觉到它在做什么｡
是的, 我知道
但还不是很快｡
没什么聪明的｡
我抓住你了｡
但更好｡
所以四个｡
四个｡
下一个视频｡
现在看起来好多了｡
是的, 我知道
多点时间｡
是的, 我知道
你准备好了吗？
是的, 我知道
我们来看看｡
是的, 我知道
好吧, 我会的
我知道了｡
抓到你了
还有吗？
不, 他弄丢了｡
是的, 我知道
还不完美, 但绝对｡
就像人类在演奏一样｡
不太擅长打破, 但仍然, 这就像｡
喜欢｡
就像人类在玩耍一样｡
就像一个五岁､ 两岁的人类在玩耍｡
好吧, 我会的
哇哦｡
它真的在抓他们｡
是的, 我知道
很高兴见到你们｡
是的, 我知道
但它就像是在做一个, 你知道, 试图用一些奇怪的策略抓住船｡
是的, 我知道
这不像是一个完美的预测球会在哪里｡
好吧, 我会的
我希望我们能好起来｡
27岁更好｡
好吧, 下一个｡
又是37号｡
那是27次｡
这是30
是这样｡
好吧, 我会的
不, 我是说时间｡
好吧, 我会的
哦, 好吧｡
现在, 我会说这是一个五岁｡
好吧, 我会的
嗯嗯嗯
不错吧？
是的, 我知道
现在那个女孩, 公牛跑得更快了｡
所以, 当然, 这要困难得多, 但仍然, 它做得很好｡
看看这次能不能打败27号｡
23.
24.
28.
我们走吧｡
看到了吗？
越来越好了｡
这是个好兆头｡
下一个是93号指挥官
哇, 哇｡
1分10秒｡
让我想想｡
就在那儿
那很酷｡
这绝对是个代名词, 不是吗？
是的, 我知道
你可以看出这不是一架人类的飞机, 因为它像是在零星地移动, 像是超快｡
是的, 我知道
它在节省不必要的动作方面做了很多, 但它仍然在达到目标｡
让我们看看当球飞得很快时它会怎么做｡
唉, 到底是什么牛旋靠？
我不知道我不知道
我想是的｡
它是否取决于它破坏的块的颜色？
也许吧｡
或者只是随机的？
看起来是随机的, 但是, 呃, 我们应该看看越狱规则｡
是啊, 但现在真的很好｡
是的, 我知道
34.
得分｡
很好｡
好吧, 我知道了
它真的, 真的做得很好｡
所以, 是的, 我们肯定有一些a3c发挥爆发了｡
很好｡
移动列表｡
是啊, 这是很好的｡
就像我们有一个有记忆的大脑｡
是的, 我知道
不仅用眼睛｡
它的眼睛很好｡
你知道, 这是一个快速, 相当快的接球｡
但它也有一些记忆, 但是｡
我不知道我不知道
你会用你的记忆力来玩突围游戏吗？
当然可以了｡
是的, 我知道
好吧, 我会的
干得好｡
干得漂亮｡
来了三个｡
最后一个是什么？
最后一个｡
哦, 我的天
五十五秒｡
所以少了一点｡
你还记得上一场比赛的比分吗？
他们把它摇了摇, 看我们是否有所改进｡
我们可能得不到什么改善｡
每一个视频｡
是的, 我知道
那是78次｡
好吧, 我会的
是的, 我知道
正如你所说, 那是由于探索｡
好吧, 我会的
我们走吧｡
为｡
好吧, 我会的
我觉得我们应该在催眠的时候放点音乐｡
你能做到的
她就像打了类固醇｡
一直在左右点击｡
但它做得好吗？
是啊, 但我们可能无法解决整个游戏的突破, 但我们只是需要有它的训练更多｡
是的, 我知道
真的很棒｡
真的很好吃
哦, 好吧｡
哦, 是的｡
有点太快了｡
60.
所以再次击败比分｡
有78个不是吗｡
是的, 我知道
于是我们就这样一点也没停下来｡
绝对是一些玩突破｡
是的, 我知道
很好｡
很不错｡
太棒了｡
所以我希望你喜欢｡
最重要的是, 我希望你喜欢这个, 呃, 强大的a3c实现, 是的, 你可以看到它是如何,
如何做得很好的列表｡
M是的, 没错｡
比如, 在论文的最后, 他们对不同的算法进行了比较, 这是目前为止最好的一种｡
不仅他们有最好的其他比较这些模型, 但我也经历了他们中的几个,
所以我经历了一个没有STM和去与｡
当然, 系统改进了算法｡
有多好？
好多了｡
像我一样｡
我几乎没有一些人工智能之前, 发挥突破它持续像15秒或20秒, 但肯定不会超过一分钟,
因为我们在这里看到的｡
是啊, 是啊, 这很好｡
那就好｡
好吧, 酷｡
好的, 谢谢
谢谢, 伙计们｡
谢谢你, 谢谢你
这是第三单元的结尾, 因此也是本课程的结尾｡
恭喜你完成了三个模块, 主要是a3c, 这是一个相当大的, 相当大的｡
是的, 我知道
当然, 我们还可以探索a3c的不同修改,
也许在您观看这段视频时, 3C中有一些非常酷的新改进,
您可能会拥有甚至是一款比a3c更好的新型号？
是的, 当然｡
我们来看看2018年的情况｡
好吧, 我会的
谢谢大家｡
-谢谢—谢谢
-再见—再见