模型信息
【模型公司】 月之暗面
【模型名称】 moonshot-v1-32k
【摘要评分】 ★★★★★
文章摘要
【关 键 词】 AI、机器人、DeepMind、英伟达、GEAR
摘要：
AI与机器人技术的结合正在成为时代的新风口。谷歌DeepMind和英伟达等AI巨头在机器人领域取得了新的进展。Jim Fan与Yuke Zhu合作创立了GEAR研究小组，致力于开发具有通用能力的人工智能，使机器人和模拟代理能够像iPhone一样普及。他们预测2024年将是机器人年、游戏AI年和模拟年，并将其比作登月任务，预示着巨大的学习和突破。
GEAR研究小组的官方页面展示了四个项目：Eureka、Voyager、MineDojo和VIMA。Eureka是一个开放式Agent，旨在提高机器人的灵巧性，通过GPT-4优化奖励函数，实现了在多个任务上超越专家的表现。Voyager是一个终身学习代理，通过编写和完善代码来玩游戏，代表了一种新的训练范式。MineDojo是一个开放框架，将Minecraft变成AGI研究的游乐场，获得了NeurIPS 2022的最佳论文奖。VIMA是第一款带有机械臂的多式联运LLM，引入了多模态提示，使任务规范更加容易和灵活。
DeepMind的研究则聚焦于人机交互，将交互视为部分可观察的马尔可夫决策过程，并通过对Palm 2-S的微调，使机器人能够更快地从人类互动中学习。他们的研究提高了机器人的可教性，并在多个任务上实现了改进。
详细总结：
1. GEAR研究小组的成立：Jim Fan和Yuke Zhu共同创立了GEAR研究小组，专注于开发能够自主行动的通用人工智能。他们的目标是让机器人和模拟代理在各种虚拟和现实世界中熟练行动，预测2024年将是机器人技术的重要一年。
2. Eureka项目：Eureka是一个开放式Agent，旨在提高机器人的灵巧性。通过GPT-4优化奖励函数，Eureka在多个任务上实现了超越专家的表现，支持一种新形式的上下文RLHF，能够将人类操作员的反馈纳入自然语言中。
3. Voyager项目：Voyager是一个终身学习代理，以GPT-4为驱动，专注于在Minecraft游戏中不断改进自己。它通过编写、完善和检索代码来构建技能库，实现了一种新的训练范式。
4. MineDojo框架：MineDojo将Minecraft游戏转变为AGI研究的游乐场，通过收集大量视频、Wiki页面和Reddit帖子来培训Minecraft代理。这一工作获得了NeurIPS 2022的最佳论文奖。
5. VIMA项目：VIMA是第一款带有机械臂的多式联运LLM，引入了多模态提示，使得任务规范更加容易和灵活。VIMA通过Transformer模型对多模态token进行编码，并自回归地解码机械臂控制。
6. DeepMind的人机交互研究：DeepMind的研究聚焦于将人机交互视为部分可观察的马尔可夫决策过程。通过对Palm 2-S的微调，他们提高了机器人的可教性，并在多个任务上实现了改进。研究还探讨了微调策略在提高可教性方面的效果，以及如何通过自然语言反馈交互式地教授机器人新任务。
这些进展展示了AI和机器人技术如何相互促进，共同推动技术的发展。随着这些研究的深入，我们有望看到更加智能和自主的机器人在未来的应用。
原文信息
【原文链接】 阅读原文
【阅读预估】 2123 / 9分钟
【原文作者】 新智元
【作者简介】 智能+中国主平台，致力于推动中国从互联网+迈向智能+新纪元。重点关注人工智能、机器人等前沿领域发展，关注人机融合、人工智能和机器人革命对人类社会与文明进化的影响，领航中国新智能时代。
