拥抱AI，造福研究者！Unity推出Machine Learning Agents

雷锋网的读者或许还记得，在上个月的The International比赛上， OpenAI的DotA 2游戏人工智能在 1V1 中击败了人类玩家 的消息。

但在未来，人工智能游戏选手或许将会面临新的对手：另一个人工智能。今天，全球最大的3D游戏引擎Unity宣布发布Unity Machine Learning Agents，通过将其游戏引擎与TensorFlow等机器学习框架相连接，游戏中的NPC有望通过机器学习的方式变得更有策略性，从而增加游戏的对抗性和可玩性。

但Unity的意图不仅如此。在其 博客 中，Unity这样写道：

“Unity正处于机器学习与游戏之间的十字路口。我们的使命是 使机器学习研究人员获得最强大的训练场景 ，将他们最新的机器学习技术的应用通过我们回馈给游戏界。 作为这项努力的第一步，我们很高兴推出Unity Machine Learning Agents（ML-Agents）。”

同时，Unity负责AI和机器学习的副总裁Danny Lange表示：

机器学习是一种颠覆性的技术。这是AI的一个令人兴奋的新篇章，因为我们正在使一个可以广泛访问的、端到端的机器学习环境，并向开发者提供让游戏和系统更加智能化的工具、Unity的物理引擎和3D逼真渲染环境。不仅如此，我们的AI工具包还为快速增长的AI爱好者群体探索深度学习提供了一个研究平台，最终将改变游戏行业。“

据雷锋网了解，Unity3D是由Unity Technologies开发的一个让玩家轻松创建诸如三维视频游戏、建筑可视化、实时三维动画等类型互动内容的多平台的综合型游戏开发工具。通过Unity3D可以极高精度地模拟真实世界的场景合物理规则，例如各种3D模型、纹理、光影效果、甚至橡胶轮胎与混凝土地面的摩擦， 而这样的游戏场景可以帮助人工智能研究人员更好地模拟和训练用于真实世界的机器人和AI应用 。

（由Unity创建的一个RL/ML模拟训练环境示例）

这种模拟训练的方法在工业机器人、无人机、无人驾驶车辆和游戏角色设计中均有着广泛应用。目前对用机器学习方法开发智能代理的需求日益增长，Unity希望为这些开发者设计一个更灵活和更易于使用的系统，该系统的典型用户包括：

• 研究现实场景中复杂的多代理竞争/合作行为的学术研究者；

• 机器人、无人驾驶及其他工业应用中需要进行大规模并行训练机制的行业研究者；
  

• 希望通过智能代理提升游戏AI和可玩性的游戏开发人员。

（如何在Unity的ML-Agent中配置学习环境的示意图）

ML-Agent的学习环境包含三类对象：代理（Agent）、大脑（Brain）和学院（Academy）。每个代理可以拥有一组独特的状态和观察值，在环境中采取独特的操作，并为环境中的事件获得独特的奖励。代理的行为由与之相关的大脑决定；大脑定义一个特定的状态和行动空间，并负责决定每个联系的代理人将采取哪些行动，并汇总到“学院”中。“学院”对象对环境的范围进行定义，包括引擎配置、速度和渲染质量、代理频度、场景长度等。所有由大脑设置为外部的代理状态和观察值由外部接口收集并传送给Python API，开发者可使用相应的机器学习库进行处理。

据雷锋网 (公众号：雷锋网) 统计，全球销量前1000名的手机游戏中，与Unity有关的作品超过50%，75%与AR/VR相关的内容为Unity引擎创建，采用Unity制作的游戏已经在30亿部设备上使用。Unity对机器学习的转型始于2016年，在2016年，NVIDIA因为在AI上的成功转型成为一家千亿美元公司，对于同样在3D模型和图像渲染领域颇有经验的Unity来说，自然也希望通过拥抱AI获取更大的收益。

目前Unity已经发布了测试版ML-Agent SDK。ML-Agents SDK可以让研究人员和开发人员将使用Unity Editor所创建的游戏和模拟场景转换为可以使用Python API，通过深度增强学习等机器学习方法对智能代理进行训练的环境。对Unity的ML-Agent SDK感兴趣的开发者，可以访问 其Github页面 获得更详细的消息。

。