![591](/Public/shangwuzgw/img/591.png)
![5620亿参数!谷歌发布史上最大“通才”AI模型PaLM-E,可让机器人](/pic/1/cj_zdeg00439l.jpg)
,周一,来自谷歌和柏林工业大学的一组人工智能研究人员推出了史上最大的视觉语言模型 ——PaLM-E,参数量高达 5620 亿。
PaLM-E 是迄今为止已知的最大 VLM。作为一种多模态具身 VLM,它不仅可以理解图像,还能理解、生成语言,执行各种复杂的机器人指令而无需重新训练。它还展示出了强大的涌现能力(模型有不可预测的表现)。
据谷歌称,当得到一个高级命令,如“把抽屉里的米片拿给我”,PaLM-E 可以为带有手臂的移动机器人平台生成一个行动计划,并自行执行这些行动。
PaLM-E 通过分析来自机器人摄像头的数据来实现这一目标,而无需对场景进行预处理。这消除了人类对数据进行预处理或注释的需要,使机器人控制更加自主。
PaLM-E 还很有弹性,能够对环境做出反应。例如,PaLM-E 模型可以引导机器人从厨房里拿一袋薯片,由于 PaLM-E 集成到了控制回路中,它对任务中可能发生的中断有了抵抗力。在一个视频例子中,一名研究人员从机器人手中抓起薯片并移动它们,但机器人找到了薯片并再次抓起它们。
另外,PaLM-E 模型也可控制机器人自主完成原需人类指导的复杂任务。除了机器人技术外,谷歌研究人员还观察到使用大型语言模型作为 PaLM-E 核心的几个有趣效果,其中一个是 PaLM-E 能表现出“正向转移”,这意味其可将从一个任务中学到的知识和技能转移到另一个任务中,相较单任务机器人模型能有更好的表现。
谷歌研究人员计划未来将探索 PaLM-E 在现实世界中有更多应用,例如家庭自动化或工业机器人,也希望 PaLM-E 能够激发更多关于多模态 AI 的应用。
IT之家曾报道,身为谷歌 AI 劲敌的微软近期也发表了「ChatGPT for Robotics」的论文,以类似的方式结合视觉数据和大型语言模型来控制机器人。
声明:本网转发此文章,旨在为读者提供更多信息资讯,所涉内容不构成投资、消费建议。文章事实如有疑问,请与有关方核实,文章观点非本网观点,仅供读者参考。
- 券商再融资步入注册制新跑道,中原证券、国联证券合计140亿定增获上交所受理2023-03-09 16:55:00
- 赛诺菲旗下消费者健康药业宣布完成对凯辉基金旗下消费共创基金战略投资2023-03-09 16:32:00
- 室温超导概念高开低走,游资热炒背后科学届态度谨慎2023-03-09 16:03:00
- 华硕ROG6游戏手机《暗黑破坏神:不朽》典藏限量版限时降价1000元:售2023-03-09 15:41:00
- 海底捞供应商鲜美来冲刺IPO,依赖鱼虾大单品有这两大风险2023-03-09 15:19:00
- 农发行赫山区支行:爱在春天拥抱美好2023-03-09 11:40:00
- 飞利浦34M2C8600显示器上架:34英寸OLED带鱼屏,首发79992023-03-09 10:49:00
- 农发行沅江市支行:魅力巾帼、花样芳华2023-03-09 10:40:00