英伟达开发AI系统SimOpt，可将模拟转移到现实任务中
英伟达开发AI系统SimOpt，可将模拟转移到现实任务中
编译 | 明知不问
发布 | ATYUN订阅号
英伟达人工智能研究人员公开了SimOpt，一个人工智能系统，经过训练可以将模拟工作转移到实际行动中，从而完成一些任务，比如把钉子插进孔里，打开和关上抽屉等。
SimOpt模型依赖于强化学习，是使用英伟达的FleX物理模拟引擎和超过9600个模拟创建的，每个模拟最多需要两个小时才能完成。
该方法采用FleX中捕获的在现实世界中无法工作的合成数据，并在模拟器中调整其参数，希望该算法在下一阶段能够减少错误。
研究员Ankur Handa表示，“这样做的目的实际上是在模拟器中创建真实世界的准确副本。有了这些参数，你就可以重新训练强化学习。然后回到现实世界，检查参数范围是否有效。”
如果没有效，你再回过头来，找出与现实世界相匹配的轨迹，并找出另一个范围。然后你在这个范围内训练一个RL，你不断地重复这个过程，直到你不能分辨这是真实世界还是模拟器。
微调参数和比较模拟器和实际任务的轨迹的迭代过程依赖于深度传感器，该传感器跟踪现实世界中的3D模型并进行性能估计。
Handa说，“我们的意思是，不要把这些负面数据丢掉。这仍然是非常有用的数据，因为它允许你在模拟器中创建真实世界的准确副本，并调整参数的范围，你一直这样做，直到它起作用为止。”
今天推出的研究是继去年推出英伟达的Isaac机器人系列以及1月份在西雅图推出英伟达机器人实验室之后推出的。该实验室用于训练机器人在实际环境中工作，如宜家厨房。
Dieter Fox于2017年被任命为英伟达机器人实验室的负责人。从那时起，研究人员已经开发出可以在实验室环境中观察人类活动的学习系统，以及学习如何从合成数据中获取物体。
在接下来的几个月里，SimOpt将在更多条件下进行测试，以模拟真实环境。
视频演示：
youtu.be/SRupIVknV-A
End
推荐阅读
Recommended reading
专治BUG
据说在看的没有BUG