机器之能报道
编辑：Sia
又一个加速家用机器人“ ChatGPT ”时刻到来的玩家，出现了。
目前，网络上关于这家名叫 Fauna Robotics 的机器人公司的消息几乎为零，甚至找不到公司官网， X 平台官方账户也仅有一句简单介绍，他们 “正在创造一个人类与机器人物种群落共生、协作与共同繁荣的世界。” 不过，我们还是可以从 “ Fauna ”这个词以及关键人物之一 Lerrel Pinto 的背景资料中窥得这家公司的一些线索。
迄今为止，Roomba 和其他机器人吸尘器是唯一真正成功的商业家用机器人。它们之所以如此成功是因为不需要与人类和其所在的环境交互——事实上，它们只要学会避开它们就可以了。Fauna 意思是动物志，看来这家初创希望描述、记录新机器人物种群落的历史，也就是能在不同家庭环境中执行日常家务，与人类共同生活的机器人。这和特斯拉擎天柱、Figure AI 、Digit 到 1 X 等一众人形机器人公司的野心并无二致，大家都在加速家用机器人“ ChatGPT ”时刻到来。
另外，从公司创始人之一 Lerrel Pinto 研究背景来看，这家公司的宗旨也应该与通用的家用机器人有关。Lerrel Pinto 今年 31 岁， CMU 机器人研究所博士，一直从事着让机器人适应人类生活世界的研究，曾入选《麻省理工学院技术评论》2023 年 35 岁以下创新者之一。目前，Lerrel Pinto 在纽约大学 Courant 计算机系担任助理教授，也是纽约大学计算智能、视觉和机器人实验室（ CILVR，由 Yann LeCun 创建）成员。
Linkedin 资料显示，Lerrel Pinto 在一个月前（也就是 2 月）入职 Fauna（这也可能是公司的成立时间）。巧合的是，1 月份，纽约大学与 Meta 联合发布了一个新型开放知识型机器人框架 OK-Robot。这是一种新的通用机器人，集成了大型语言模型（ LLMs ）、视觉语言模型（ VLM ）与机器人，能够在真实的家庭环境中完成拾取、移动和放下物体的任务，无需任何额外培训（这些训练通常耗时又昂贵）。
你只需要对这个机器人说，把桌子上的玉米片拿到床头柜上，机器人就能自己找到玉米片，并规划出路线和相应的动作，顺利完成任务。除此之外，它还能帮你整理东西或扔垃圾。
10 个真实家庭环境中的运行测试结果表明，OK-Robot 拾取和放置任务的成功率达到 58.5%，如果家庭环境比较干净整洁，成功率可以提升到 82%。
视频链接：https://mp.weixin.qq.com/s/Zn6-Fct-m8aH_Fd3GC6ZnA
要让机器人在一个完全陌生的环境中从事日常家务，一个巨大挑战就是训练它们需要大量数据，我们可以从互联网上抓取海量数据训练 LLMs，但机器人很难做到这点——训练机器人的数据需要收集真实物理世界的数据，这也导致构建和扩展训练数据集更加困难。
Pinto 和团队想出了一种简单、易于复制的方法来扩大机器人的训练数据集 —— 将苹果手机和常见的垃圾拾取器接起来，用户就能用它来录制自己抓取家中各种物品的视频， iPhone 内置硬件（比如激光雷达、运动传感器和陀螺仪）会记录视频里任务的重要数据，比如运动、深度和旋转等——对于训练机器人自行复制动作而言，这些数据非常重要。积累一定时长的数据后，它们会被用来与高效的学习算法相结合，训练模型，教会机器人如何完成家务 。
除了 OK-Robot，Pinto 和团队还开源过 Dobb-E ——也是使用从真实家庭收集的数据训练模型，机器人学会了打开空气炸锅、关门或拉直坐垫等家务。10 个纽约家庭中的 30 天测试结果发现，机器人完成了 109 项家务任务，总体成功率为 81% ，掌握新技能仅需 20 分钟。
