当前位置:首页 > 科技  > 网络

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白

来源: 责编: 时间:2024-06-11 08:35:57 70观看
导读 马斯克部下跳槽,把人形机器人技术开源了。不少创业公司的估值,一夜被打了骨折。新成果已正式发布——它能像大白一样,听懂并正确执行人类发出的指令,比如放杯子、拿水果。可以自己打开笔帽,在白板上写

马斯克部下跳槽,把人形机器人技术开源了。不少创业公司的估值,一夜被打了骨折。CGh28资讯网——每日最新资讯28at.com

新成果已正式发布——CGh28资讯网——每日最新资讯28at.com

它能像大白一样,听懂并正确执行人类发出的指令,比如放杯子、拿水果。CGh28资讯网——每日最新资讯28at.com

可以自己打开笔帽,在白板上写名字。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

或者是叠衣服。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

把钥匙准确插进锁眼。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

这些操作,全都是机器人自己搞定。没有人远程操控,完全端到端实现。CGh28资讯网——每日最新资讯28at.com

关键的是,它使用的算法、数据集完全开源!CGh28资讯网——每日最新资讯28at.com

这意味着,你完全可以在家自己改造一个小机器人,让它完成同样的事。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

如上进展,来自Hugging Face今年新成立的机器人项目Le Robot。CGh28资讯网——每日最新资讯28at.com

团队领军人物Remi Cadene(雷米·卡德内),1月才从特斯拉Optimus机器人团队离职,才过了几个月就带来如上新成果。CGh28资讯网——每日最新资讯28at.com

这立马引发业内关注,谷歌DeepMind科学家都来围观表示:CGh28资讯网——每日最新资讯28at.com

开源哆啦A梦才是出路嘛。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

网友们更是amazing刷屏了。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

所以,这个开源机器人,究竟如何而来?CGh28资讯网——每日最新资讯28at.com

训练只用2个小时CGh28资讯网——每日最新资讯28at.com

完成这些动作的,是花粉机器人公司新的机器人Reachy2。CGh28资讯网——每日最新资讯28at.com

不过,Reachy2并不是一开始就实现自主操作的,而是先经历了一段遥控操作的过程。CGh28资讯网——每日最新资讯28at.com

该阶段中,开发人员会佩戴VR装备,控制机器人完成一系列任务。CGh28资讯网——每日最新资讯28at.com

VR遥控的过程被记录成了50段视频,每段约15秒,与Reachy2机器人内的不同传感器相关联。CGh28资讯网——每日最新资讯28at.com

这些视频成为了ML算法的学习素材,用于研究如何自行完成并指导Reachy2完成一系列任务。CGh28资讯网——每日最新资讯28at.com

训练一共持续了2个小时,之后作者测试了所有的checkpoint,发现机器人果然学习到了新的概念——CGh28资讯网——每日最新资讯28at.com

在2万步时,它学会了将杯子可靠地放在碗碟架上;CGh28资讯网——每日最新资讯28at.com

在4万步时,它学会了旋转底座并交出苹果;CGh28资讯网——每日最新资讯28at.com

在6万步时,它学会了旋转手臂回到初始位置。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

这其中的数据集和使用的模型,现在都已开源,就连VR操作时用的程序,也同样是开源的。CGh28资讯网——每日最新资讯28at.com

在抱抱脸上,Reachy训练用的50段视频都可以直接下载,开源框架和工具也放在了GitHub。CGh28资讯网——每日最新资讯28at.com

包括机器人ML框架LeRobot,采用了Apache-2.0协议,可免费商用,据作者称达到了SOTA水准,在GitHub上已经斩获了3.4k+星标。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

LeRobot基于PyTorch实现,包括了预训练模型、人工采集的数据集,还有一套模拟环境,无需真实的机器人硬件也能观察效果。CGh28资讯网——每日最新资讯28at.com

值得一提的是,斯坦福知名开源机器人项目ALOHA中的数据,也被囊括进了其中。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

此外,Reachy2机器人还用到了华人软件工程师、开源AI解决方案平台1ms.ai创始人Haixuan Xavier Tao开源的面向数据流的机器人应用DORA。CGh28资讯网——每日最新资讯28at.com

除了用DORA帮助HuggingFace完善机器人框架,1ms.ai还曾帮助清华大学完成了一套机器人工程的教程。CGh28资讯网——每日最新资讯28at.com

说回DORA,它提供了低延迟、可组合和分布式数据流功能,可以简化机器人程序的创建,目前已获1.2k星标。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

DORA的目标是将硬件、算法和人工智能模型结合在一起,并使它们相互通信,让硬件和软件的集成变得容易。CGh28资讯网——每日最新资讯28at.com

DORA提供了Python、Rust、C/C++等多种语言版本,其中在Python上速度比ROS2快了17倍。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

在Python上,DORA还具备热重载功能,意味着可以在运行过程中也可以随时修改Python代码。CGh28资讯网——每日最新资讯28at.com

未来,如果把检索增强生成(RAG)技术和热重载功能结合,还能创建出自编码机器人,根据提示自动生成代码。CGh28资讯网——每日最新资讯28at.com

作者表示,有了LeRobot和Dora,自己在家也能复刻出一个Reachy2的小号仿品。CGh28资讯网——每日最新资讯28at.com

把具身智能成本打下来CGh28资讯网——每日最新资讯28at.com

那么,这个机器人价格到底多少呢?这还是大家关注的问题。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

其实主要取决于硬件。CGh28资讯网——每日最新资讯28at.com

作者雷米表示,目前能接入LeRobot便宜的机械臂,只需250美元(折合人民币约1800元)。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

目前展示的这款Reachy2,价格还没公布,参考它的上一代,起售价为9750美元(折合人民币约7万元)。CGh28资讯网——每日最新资讯28at.com

有网友表示,看来几年内把机器人助手价格打到5000美元以内有希望了(大约3.6万,不到一辆车的价格)。CGh28资讯网——每日最新资讯28at.com

这也是为啥Hugging Face入局具身智能会引发轰动的关键所在。CGh28资讯网——每日最新资讯28at.com

要知道,具身智能研发成本一直居高不下,这个火爆赛道如今已经吸金几十亿。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

而将所有算法数据集开源,意味着人形机器人的成本(起码在软件算法层面)大幅降低,会给业内其他布局机器人领域的玩家带来不小压力。CGh28资讯网——每日最新资讯28at.com

与此同时,Hugging Face还挖来了一流工程师。CGh28资讯网——每日最新资讯28at.com

领衔项目的Remi Cadene(雷米·卡德内)曾是特斯拉Autopoilot和Optimus机器人研究项目的成员。CGh28资讯网——每日最新资讯28at.com

入职时雷米还调侃了OpenAI,表示要做真正意义上的开源。CGh28资讯网——每日最新资讯28at.com

具体动作上,雷米的脚步走得也确实很快。上个月刚刚发布了Le Robot开源代码库,如今首个具身智能成果也来了。CGh28资讯网——每日最新资讯28at.com

不过能快速在人形机器人上部署训练,也少不了花粉机器人公司出力。CGh28资讯网——每日最新资讯28at.com

这是一家来自法国的机器人公司,他们也强调开源理念。在2013年发布了据称是第一个开源的3D打印机器人。CGh28资讯网——每日最新资讯28at.com

此前已经推出了开源全遥控机器人Reachy1。CGh28资讯网——每日最新资讯28at.com

马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白CGh28资讯网——每日最新资讯28at.com

雷米介绍,在Hugging Face团队正留意人形机器人硬件时,花粉机器人这边也在找端到端方案,所以两家一拍即合。CGh28资讯网——每日最新资讯28at.com

而且还有地理上的优势,他们的办公地点相隔只有2小时的路程。CGh28资讯网——每日最新资讯28at.com

从目前雷米透露的动向来看,他们还会开源一系列工作,比如语音命令控制等,大家可以期待一下。CGh28资讯网——每日最新资讯28at.com

By the way,Hugging Face近正在招人哦,岗位是Post-Sales Machine Learning Solutions Engineer – Asia Remote,感兴趣的童鞋可以尝试下~CGh28资讯网——每日最新资讯28at.com


文章出处:量子位

本文链接:http://www.28at.com/showinfo-17-92810-0.html马斯克擎天柱大将跳槽 在抱抱脸开源机器人技术:会做家务的大白

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。邮件:2376512515@qq.com

上一篇: 华为联合中山眼科发布ChatZOC眼科大模型:效率暴增75%

下一篇: 女子不慎落入西湖:机智躺平求救

标签:
  • 热门焦点
Top