人工神经网络
一个最重要的创新：人工神经网络
1、为什么需要神经网络？
简单来讲，神经网络意味着理论上它可以学习任何用户动作的映射！
为了介绍一会儿将使用的一些术语，从状态到行动的映射将被称为“策略”。
为了让拳手的神经网络学习策略，AI Arena将采取模拟学习和强化学习。其中神经网络架构存储在IPFS上。
2、权值
在上图中，神经元之间的连接称为“权值”。当你的神经网络正在“学习”时，所发生的是它正在改变权值的值。
权值最终将决定状态如何映射到动作，这意味着我们可以将权值解释为“智能”。
神经网络权值对于每个NFT都是唯一的，并存储在以太坊上。
AI设计机制全攻略
-
状态
（1）什么是状态？
状态是环境在某个时间点的表示。它并没有包含所有信息——只包含了其中必要的信息。
例如：研究人员使用屏幕上的所有像素作为状态，让AI计算出像素代表什么。然后根据他们认为对决策过程重要的因素进行人工调试。
AI Arena一再强调其关心的是为所有人提供平等的机会——团队希望奖励能够更多地给予坚持训练AI的用户，而不是奖励拥有更多资源的用户。
（2）游戏将使用哪些变量？
下面是状态中包含的变量列表。需要注意的是，AI Arena将使用下标1表示用户自己的AI，下标2表示对手。
此外，竞技场的左边界的X位置为0，右边界的X位置为1。
-
训练
（1）训练概述
这是改变神经网络中权值的过程，以使AI能够起作用。
例如：如果我们在对手面前，我们可能希望我们的战士出击。
有一系列的权值可以实现这一点，训练的重点是让AI学会在特定场景中采取特定的行动。
AI Arena在应用程序中嵌入了以下培训计划：
-
模仿学习
为了学习如何战斗，你的AI将观察你并学习模仿你的动作。
-
自我学习
为了学习你无法教给它的技能，你的AI将与自己的副本对抗，以不断提高。
（2）为什么需要训练？
1·随机初始化
首次创建NFT拳手时，神经网络权值也随之生成。一开始它会随机采取行动，因为它不知道在什么情况下应该采取什么行动。
因此为了准备战斗，我们必须训练它，使它学会一个好的作战策略。
2·随机策略
正如上文“神经网络”部分中提到的，从状态到动作的映射称为策略。
换句话说，策略定义了代理在某些情况下的行为方式。在训练之前，NFT拳手还没有学会一个好的战斗策略，所以只是随机行动。
-
模仿学习
（1）通过观察学习
理解模仿学习的最好方法是想象你是一个师父，你的AI是一个你正在准备战斗的战士。
你用你的人工智能进行搏击，它学习模仿你在特定场景中的动作。
我们正在写一篇关于模仿学习的综合博文，到时候会将其链接到这里。
（2）演示
实际情况：你实际操控的是左边的灰色拳手，而你的AI在右边。你可以测试一些动作，观察AI如何模仿你。
请注意：它不会立即复刻你的动作，因为神经网络需要一点时间来学习，所以在AI学会之前，你可能需要多重复几次你的动作。
为简单演示，目前AI Arena只允许用户使用这些操作：向左跑、向右跑、单拳、双拳和防守。
测试链接:
//docs.aiarena.io/#/training/imitation-learning
-
自我学习
（1）完美匹配
最完美的拳击搭档就是用户自己。通过自我学习，你的AI总是在不断地挑战自己，不断地改进。
（2）不同的学习范式
通过模仿学习，AI通过观看演示进行学习。在自我学习中，AI像对手一样学习和战斗没有多大意义，因为对手是人工智能本身的克隆。
但是如果没有专家向人AI展示如何战斗，那么它如何学习该做什么呢？——通过奖励。
AI将学会采取给予它更多正向奖励的行动，而减少采取给予它负面奖励的行动。
-
定制训练
Python环境【正在准备中】
AI Arena计划为玩家引入一个python环境来训练他们自己的模型。
目前，用户仅限于使用团队在应用程序中提供的两种培训方法；但不久的将来，应用程序将可以允许玩家导入其自定义培训模型并上链。
游戏模式探索
-
战斗
AI Arena目前有两种可用的作战模式：模拟赛和排位赛。除此之外，团队计划在不久后整合另外两种作战模式。
1）模拟赛
玩家可以在对抗竞技场测试他们的拳手来预先训练的AI。在这种模式下将没有任何奖励。
2）排位赛
玩家将让他们的拳手去对抗来自世界各地的拳手。玩家的唯一目标就是努力攀登排行榜，成为竞技场的冠军！
玩家在排行榜上的排名越高，赢得一场战斗的回报奖励就越高。
3）目标
虽然每种战斗模式都有其独特之处，但它们都有一个共同的胜利目标：在指定的时间内消耗对手所有生命值。
链金交易员总结
目前AI Arena尚处在早期，很适合提前埋伏观察。据官方透露，游戏正式版本大概率于明年推出，而今年年末推出的测试版本将只有白名单用户可以参与体验。
白名单用户名额的获取方式是参与团队即将推出的解密游戏，通过游戏后的用户将会被随机选择是否进入白名单。
有兴趣的玩家可以加入他们的Discord尝试体验，大概率后期会有早鸟空投奖励。
相关链接:
官网：
https://aiarena.io/#/
Twitter：
https://twitter.com/aiarena_crypto
Discord：
https://discord.com/invite/aiarena
投资有风险，本文观点和意见仅代表作者本人，并不构成任何建议。
