专栏名称: 量子位
վ'ᴗ' ի 追踪AI行业和技术动态,这里更快一步!关注我们,回复“今天”,更多大新闻等你来发现
今天看啥  ›  专栏  ›  量子位

3B模型打通机器人任督二脉!冲咖啡叠衣服都能干,7种形态适配,OpenAI也投了

量子位  · 公众号  · AI  · 2024-11-02 14:59
    

主要观点总结

初创公司Physical Intelligence开发的机器人控制模型π0,只需3B参数就能控制机器人完成各种家务任务,包括叠衣服、装鸡蛋等。π0模型基于视觉模型改造,使用条件流匹配方法建模连续动作分布。公司在A轮融资中获得7000万美元资金支持,目标是通过通用模型将AI带入物理世界。公司创始人背景强大,包括前谷歌大脑机器人操作研究主管和斯坦福大学教授等。

关键观点总结

关键观点1: 机器人控制模型π0

具有通用性,能控制不同种类的机器人;只需3B参数就能让机器人完成各种家务任务,如叠衣服、装鸡蛋等;通过视觉模型改造而来,结合条件流匹配方法建模连续动作分布。

关键观点2: 初创公司Physical Intelligence

获得了7000万美元的A轮融资,投资者包括OpenAI;目标是通过通用模型将AI带入物理世界,不生产机器人硬件,只负责训练模型。

关键观点3: π0的技术特点

模型结合了投影层、多层感知机和动作专家模块;使用条件流匹配方法高精度地建模复杂多峰分布,适合高频灵巧操作任务;模型能在大型机器人交互数据集上进行训练,并结合高层语言策略模块进行微调。


文章预览

克雷西 发自 凹非寺 量子位 | 公众号 QbitAI 只要一个 3B参数 的大模型,就能控制机器人,帮你搞定各种家务。 叠衣服冲咖啡都能轻松拿捏,而且全都是由模型自主控制,不需要遥控。 关键是,这还是个 通用型的机器人控制模型 ,不同种类的机器人都能“通吃”。 请看VCR: 这些操作背后的大模型叫做 π0 ,参数量只有3B,来自今年刚成立的初创公司 Physical Intelligence (简称π) 。 创立之后不久,π公司就获得了7000万美元 (约5亿人民币) 的A轮融资, 投资者中还包括OpenAI 。 而公司的目标,就是开发 通用的机器人控制模型 ,现在的π0,就是其首项成果。 有网友直言,π0控制的机器人,是他见过最接近真正的通用机器人的。 关键是,参数量只有3B,算力消耗非常小,如果和同规模的模型性能特征相近,廉价显卡就能带动。 Hugging Face的机器人团队领 ………………………………

原文地址:访问原文地址
快照地址: 访问文章快照
总结与预览地址:访问总结与预览