您的位置:首页 > 互联网

斯坦福家务机器人,看似全能,实际靠遥控_斯坦福机器人结构图

发布时间:2024-01-08 15:49:28  来源:互联网     背景:

作者|杨逍

斯坦福机器人学

编辑|苏建勋

近日,斯坦福华人团队的Mobile ALOHA“全能家务机器人”在网上爆火,它展示了做饭、铺床、浇花等多种家务技能,可谓是全复合“保姆人才”。

它能够煮虾,可以擦拭桌子上的红酒,能洗盘子,还可以自动打开电梯。

还可以打开窗帘为窗台上的花浇水,将衣服放到洗衣机里、撒上洗衣液洗衣。这让网友直呼机器人时代已来,它难能可贵在“眼里有活儿”。

不过,Mobile ALOHA所展示的复杂技能,其实是背后由人遥控操作的。

1月6日清晨,发现网友为Mobile ALOHA所呈现的自主化、智能化能力倾倒后,Mobile ALOHA的两位研发人员连忙“辟谣”,称部分动作是机器人自主展示的,部分则由人遥控完成。

为了如实呈现机器人的能力,他们还专门放出了Mobile ALOHA在全自动状态下的“蠢笨”动作合集,称 “机器人尚未准备好接管世界”。

当你以为机器人能丝滑优雅地举起一杯红酒时,它只能颤颤巍巍地握住杯子,看着酒杯倾倒碎在地上,将红酒洒满桌;

红酒洒满桌

表现颇佳时,机器人能熟悉地端起左手颠锅、右手拿铲,完成一道菜肴的制作;但多是几次,原本挥洒自如的锅铲就不是对着铁锅底部一顿操作,就是在锅中挥舞但碰不到菜。

失败的炒菜案例

斯坦福机器人dh参数

全自动状态下,它无法有力地控制住一把平底锅,将锅端起后,整个平锅便不可避免地掉落,为了拯救翻到的铁锅,守在旁边的研究人员还被烫伤了;

倒菜失败

甚至一根红色圆珠笔,Mobile ALOHA也无法拾起。

拿记号笔

现实和理想还有差距,但Mobile ALOHA所呈现出的完成精细和复杂的任务的运动操作能力,仍值得关注,这让未来机器人更具有想象空间。

遥控的叠被子、做菜、洗衣技能

Mobile ALOHA到底可以做到什么?

经过20~50轮演示和模仿学习,机器人可以自主完成一些复杂的移动操控任务。

它能够按照人类做菜的顺序,将油倒入锅中,再放入一粒虾仁,并翻转锅铲将其炒熟,并拿起锅,转身将虾倒入背后已备好的盘子里。

卧龙吟卧龙陨落

炒虾

它可以自动按下电梯按钮,并成功进入电梯中;

自动开电梯

还可以精准打开一扇两门柜子,并抬手将一个3磅重的锅放入柜子中,再关上柜门。

将锅放入柜门

还可以在与人相遇后伸出“手”击掌。

与人击掌

目前,机器人可以连续9次完成端起酒杯擦桌子的动作;连续5次自主呼叫电梯,具有学会技能的能力。

但这个技能并非100%精准、智能,会出现错误,呈现出前文所展示的“失败状态”。

对于一款想要进入家庭场景的机器人而言,比起技能丰富度,安全是更重要的前提。一款身体笨重、由钢铁材料制成的机器人,会给家带来远超狗等宠物的杀伤力。

机器人尚未做好准备接管世界,但拥有潜力。

为了探索Mobile ALOHA的潜力,符博士将机器人带回家中,并遥控机器人完成了一些复杂动作。

它能完成做滑蛋虾仁、干贝烧鸡、蚝油生菜厨艺,这里面涉及到了切蒜、洗生菜、打鸡蛋等细致动作。

做干贝烧鸡

小米4a40寸电视测评

在遥控状态下,它能拉开窗帘布、打开窗子,握着水壶浇水;

浇水

可以握着戴森吸尘机,进行全屋清洁;

用吸尘器打扫房间

它能在主人站着不动的情况下,捏着圆形的剃须刀完成整个刮胡子动作。

剃胡子

可以将衣服赛道洗衣机里,并转动洗衣液的圆形瓶盖,将洗衣液倒入洗衣机,再操作完成洗衣动作。

洗衣服

也能从抽纸盒中抽出一张纸,并揉成一团,再擦去玻璃上的灰,且控制机械与玻璃接触时,不伤害玻璃表面。

拿纸擦玻璃

虽然上述家务能力是由人遥控操作完成的,但机器人呈现的完成复杂、精细动作的物理可能,是一个巨大的进步。

它还解决了人形机器人领域的一大技术难题——面对布料这种柔软又单薄的材质,机器人要如何完成叠被子、叠衣服等人手可以简单完成的动作。

在遥控状态下,它可以完成铺平床单、为枕头套上枕套的动作,且机器人铺平的床可谓一丝不苟,远超当代年轻人的床物收纳能力范畴。

换床单

它还可以将一件衣服展开,捏着拉链头,拉上衣服拉链,再用衣服撑将其撑起,并放入衣柜中。

收纳衣服

在机器人世界,人手能简单完成的动作,对机器便越难。机器人还做不到“眼中有活”,但手能干细致活。

Mobile ALOHA的联合研发者Tony Z.Zhao还引用了2015年的DARPA机器人挑战大赛上的失败汇集,戏谑称希望特斯拉机器人的摔倒视频。

对于Mobile ALOHA的失败集锦,网友也格外宽容,称他们“愚蠢又可爱”,也有人称“比起远程操控,自主果然困难很多”。

软硬件开源,全套机器人仅需3.2万美元

Mobile ALOHA的最大价值是物理操作能力的进步,它展示了机器人做重复性精细操作任务的潜力。

为了实现双手操作技巧,符博士团队基于谷歌Deepmind的ALOHA遥操作系统生成,设计出了一款低成本的全身远程操作系统“Mobile ALOHA”。

Mobile ALOHA是一个开源的操作系统,其学习原理是遥操作和模仿学习,即通过对人类重复动作的学习掌握技能,它是一种全身远程操作的双手移动操作系统。

谷歌的ALOHA遥操作系统更多是在桌面上进行思考,Mobile ALOHA在底部上增加了移动底盘,增加了对机器人移动性和灵活性的训练。

借助集成的移动底座和全身远程操作界面,Mobile ALOHA可以收集更多的机器人与现实世界交互的数据,并在交互过程中学习、模仿人类动作。

研究团队发现,只需对每项任务进行 50 次演示,Mobile ALOHA学会动作的成功率能高达90%,如可以实现连续9次擦红酒,连续5次成功使用电梯。

据符博士表示,之所以能在50个演示之内便实现上述效果,是因为Mobile-ALOHA 将模仿学习和静态操作数据结合协同训练。

协同训练效果

通过这种联合训练方式,机器人训练成功率可以显著提高,尤其是在执行需要精确操作的任务时。如在擦拭红酒任务中,举起酒杯和擦拭是最重要的子动作,在没有联合训练时,其成功率只有58%,但联合训练后,成功率可以提高到95%。

训练效果差别1

这种联合数据训练的方式,在VINN、扩散策略和ACT等不同的模拟学习方法上都有着不错的效果。如扩散策略下,整个任务的成功率原本只有35%,但经过联合训练后,可以提高到65%。

训练效果差别2

此外,协同训练在不同数据组合情况下,鲁棒性、稳定性在不同维度上都得到了提高。

训练效果差别3

在硬件上,它的外在形象并非最火的人形机器人形态,整个身体由一个移动底盘、一个操作界面,两个机械臂,反馈驱动,两个腕部相机及1个顶部相机构成。整个机器采用反向驱动结构的设计,控制者能通过操作台控制机械臂,指导Mobile ALOHA完成动作。它的底部安装有电池包,可断电使用。

Mobile ALOHA的硬件设计

这款机器人和操作系统由斯坦福的三人团队研究而成——计算机科学博士生Zipeng Fu和Tony Z.Zhao,和二人的指导老师是Chelsea Finn。

他们在软硬件上都进行了开源,公布了代码、硬件结构和数据,团队还专门列出了具体的硬件清单,包括整套机器人下来成本只需要3.2万美元,即22.7万人民币。

这意味着,只要有兴趣,任何人都可以基于他们的研究成果,对机器人进行试验,去训练自己想实现的动作。

该硬件的运动底盘厂家松灵机器人已在官网表示,可以定制同款斯坦福Mobile Aloha机器人。

Mobile Aloha机器人

2024年被认为是人形机器人元年,无论是特斯拉、波士顿动力等具身智能玩家,还是如谷歌的AutoRT 控制系统,又或 RT-2机器人大模型,都在从不同维度推动人形机器人发展。在最长远的想象力,进入家庭的人形机器人将会带来巨大的市场空间。

原本以特斯拉、智元机器人等人形机器人都将to B场景看作最先落地的未来,To C家庭场景则更具有难度,但Mobile ALOHA的机器人让To C场景看到曙光。

全自动的机器人时代虽尚未来到,但Mobile ALOHA仅通过两指夹具,便完成了洗衣、做饭等高难度动作,这让家务机器人、人形机器人有了更加具象的想象空间。


返回网站首页

本文评论
15999 元起,苹果发布 2023 款 MacBook Pro:搭载全新 M2 Pro / Max 芯片,支持 8K HDMI、Wi-Fi 6E
(原标题:15999 元起,苹果发布 2023 款 MacBook Pro:搭载全新 M2 Pro / Max 芯片,支持 8K HDMI、Wi-Fi 6E) IT之家1月17日消息,苹果...
日期:01-17
当代年轻人为何不卷改“拼”了?
声明:本文来自于微信公众号 螳螂财经(ID:TanglangFin),作者|陈小江,授权转载发布。“今天开始给自己立个flag,放下手机,用阅读替代短视频。”9月15日,网友@努力搬砖的欧尼,在小红书...
日期:09-30
英特尔同意IMS业务独立,估值约43亿美元
近日英特尔发布新闻稿,宣布已同意将 IMS 业务约 20%的股权出售给贝恩资本(Bain Capital Special Situations),此次交易对 IMS 的估值约为43亿美元。淘宝大战工商总局事件华为hic...
日期:06-25
百度云解决城市治理难题 ABC与IoT技术落地建设城市智慧运营
据《超级智慧城市报告》显示,目前我国在建的智慧城市达到500个。根据计划,2016年到2020年期间,我......
日期:09-30
苹果A16芯片造价曝光:达A15的2.4倍_苹果A16芯片
中关村在线消息:近日,有外媒曝光了iPhone 14 Pro/Pro Max两款机型内搭载的A16芯片的信息,称其造价高达110美元(折合人民币约782元),是上代A15仿生芯片的2.4倍有余。根据介绍,A16仿...
日期:10-17
好丽友回应天猫旗舰店暂停运营:运营商更换 明年1月重启_好丽友天猫旗舰店怎么了
12月25日 消息:日前,好丽友天猫旗舰店“orion好丽友旗舰店”发布闭店公告称,该旗舰店于12月24日暂停运营,于12月23日下架店铺所有产品。腾讯云saas千帆面试闭店公告显示:亲爱的...
日期:12-25
文心大模型4.0发布 李彦宏:综合水平与GPT-4相比毫不逊色
10月17日消息,百度创始人、董事长兼首席执行官李彦宏宣布文心大模型4.0正式发布,开启邀请测试。他表示,这是迄今为止最强大的文心大模型,实现了基础模型的全面升级,在理解、生成...
日期:10-17
沙尘暴席卷埃及!苏伊士运河上空出现沙墙:已致1死5伤_苏伊士运河堵塞挖掘
快科技6月3日消息,本月初,埃及首都开罗遭遇了严重的沙尘暴,整座城市都被笼罩在漫天黄沙中,像是《西游记》黄风怪出厂时的场景,能见度急非常差。而据外媒报道,沙尘暴吹倒了首都开罗...
日期:06-03
1799元买5G 鸿蒙  Hi畅享60 Pro开售「畅想 鸿蒙」
WIKO今天正式开始销售另一款新机Hi 畅享60 Pro,这款手机也加入了鸿蒙生态。它有两种版本可供选择,分别是8GB 128GB和8GB 256GB,售价分别为1799元和1999元。这些配置和价格使得H...
日期:07-15
雷军盛赞小米12S Ultra 公布2022年小米手机电商首月好评率超98%_小米11 Ultra深度评测 半年之内几乎不会被超越
小米13发布会正式开启,雷军公布了2022小米新品电商首月好评率,小米12S好评率为98.37%,小米12S Pro好评率为98.39%,小米12S Ultra好评率98.68%,小米 MIX Fold2折叠屏手机好评率为9...
日期:12-12
腾讯教育应用平台获2022年《新快报》·新动力3C大奖年度创新产品奖
  近日,以“电商直播•智造中国”为主题的《新快报》·新动力3C大奖获奖名单正式揭晓,多家科技公司因在技术、产品、商业模式等方面突出的综合创新能力,而获得“年度创新品...
日期:07-10
linux设置默认编辑器_Linux Fedora 计划将默认文本编辑器从 Vi 更改为 Nano
  Fedora计划在默认的Fedora Workstation安装中添加Nano文本编辑器,作为对Vi的补充,但其利益相关者打算提交一个系统范围内的提案,该提案会将默认安装的编辑器从Vi更改为Nan...
日期:12-10
除了AI,谷歌I/O开发者大会还有哪些看点?
自从微软支持的ChatGPT出现后,谷歌一夜之间从机器学习领域的引领者沦为追随者,仓促间推出的Bard没能在市场掀起水花。面对对手步步紧逼,谷歌必须拿出更能打的产品,而眼下,没有比...
日期:05-07
不必召回!苹果已为iPhone 12发布更新「苹果12.48更新了什么」
据界面新闻报道,比利时数字化国务秘书马蒂厄?米歇尔近日表示,已要求苹果公司在欧盟各国更新iPhone 12软件。米歇尔表示,根据比利时监管机构的初步审查,这款手机不会对用户造成危...
日期:09-16
华为发布P60系列「华为P60外观全曝光 设计已无悬念」
中关村在线消息:近日,外媒曝光了华为P60的相关消息,同时新机的渲染图也被放出。华为P60后置摄像头模组采用万象双环设计,配色为土豪金,四角边采用弧形处理,正面屏幕为居中挖孔,看起...
日期:11-12
骁龙助力小米打造轻薄全能真旗舰小米MIX Fold 3和小米平板6 Max 14超大屏平板
通信世界网消息(CWW)8月14日,小米新品发布会在北京国家会议中心举行,小米集团创始人、董事长兼CEO雷军第四次做年度公开演讲,正式宣布小米科技战略升级,并发布搭载第二代骁龙8移动...
日期:08-17
语音微博 拯救单身的你(语音微博 拯救单身的你小说)
  看着身边的朋友们一个个紧挨着跟你炫耀手指上的那枚钻戒,看着家中那一张张红色罚款单堆砌起的小山,你会不会想45度抬头望天,抒发下心中浓浓的忧伤:为什么没有对象啊!家中的...
日期:07-24
红米k60i「Redmi K60至尊版超级内存版明天首销!王化:24GB 1TB超过电脑配置」
快科技8月21日消息,上周Redmi推出了今年最重磅旗舰之一K60至尊版。这是Redmi今年的性能天花板、设计天花板、影像天花板等,综合实力是同档位最强的产品之一。特斯拉什么时候推...
日期:08-21
Steam将停止支持Win7、8、8.1系统_steam停止工作怎么办win7
12月28日 消息:Steam近日发布通知,宣布将于2024年1月1日起正式停止对Windows7、Windows8和Windows8.1操作系统的支持。ios14打开微信闪退余承东说未来手机只有三家可穿戴设备...
日期:12-28
学校+泛微OA系统,实现家校内外协同,档案数据一体化
  对大型教育集团而言,旗下有多所不同类型的学校,管理模式、收费标准不同,需要通过信息化手段帮助管理者解决各类管理难题。   为了规范学生管理、推动学校各部门协同管...
日期:07-16