Google正测试乒乓球机器人i-Sim2Real 已能连续对打340次

据TechCrunch报道，Google日前正在测试一个乒乓球机器人项目。这个项目被称为i-Sim2Real，不仅仅是关于乒乓球，而是关于建立一个机器人系统，可以与快节奏和相对不可预测的人类行为一起工作。乒乓球，具有相当严格的限制（相对于打篮球或板球而言）和复杂与简单的平衡的优势。   　　“Sim2Real”是描述人工智能创造过程的一种方式，其中机器学习模型被教导在虚拟环境或模拟中做什么，然后在现实世界中应用这些知识。当需要多年的试验和错误才能得出一个有效的模型时，这是很有必要的--在模拟中进行，可以在几分钟或几小时内完成多年的实时训练。

  　　但是，在模拟中做一些事情并不总是可能的；例如，如果一个机器人需要与人互动呢？这不是那么容易模拟的，所以你需要真实世界的数据来开始。你最终会遇到一个鸡和蛋的问题：你没有人类的数据，因为你需要它来制造人类将与之互动的机器人，并首先产生这些数据。   　　Google的研究人员通过简单的开始和制造一个反馈回路来解决这个难题。   　　[i-Sim2Real]使用一个简单的人类行为模型作为近似的起点，在模拟训练和在现实世界中部署之间交替进行。在每次迭代中，人类行为模型和政策都会得到完善。   　　从人类行为的近似值开始是可以的，因为机器人也只是刚刚开始学习。每场比赛都会收集到更多真实的人类数据，从而提高准确性，让人工智能学习更多。   　　这种方法足够成功，该团队的乒乓球机器人已能够连续对打340次。   　　它还能够将球送回不同的区域，当然不是准确的数学精度，但是好到可以开始执行策略。   　　该团队还尝试了一种不同的方法，以实现更多的目标行为，比如从不同的位置将球返回到一个非常具体的地方。同样，这并不是要创造终极乒乓球机（尽管这很可能是一个结果），而是要找到有效训练人类互动的方法，而不是让人们重复成千上万次的相同动作。