OpenAI大模型上身机器人,原速演示炸场!

openai模型加持的机器人,深夜来袭!

名曰Figure 01,它能听会说,动作灵活。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

OpenAI大模型上身机器人,原速演示炸场!

能和人类描述眼前看到的一切:

我在桌子上看到一个红色的苹果,沥水架上还摆放着几个盘子和一个杯子;你站在旁边,双手轻轻放在桌子上。

OpenAI大模型上身机器人,原速演示炸场!图片

听到人类说“想吃东西”,就马上递过去苹果。

OpenAI大模型上身机器人,原速演示炸场!图片

而且对于自己做的事有清楚认知,给苹果是因为这是桌上唯一能吃的东西。

还顺便把东西整理,能同时搞定两种任务。

OpenAI大模型上身机器人,原速演示炸场!图片

最关键的是,这些展示都没有加速,机器人本来的动作就这么迅速。

(也没人在后面操纵)

OpenAI大模型上身机器人,原速演示炸场!

这下网友坐不住了,立马@波士顿动力:

老伙计们,这家伙是真来劲儿了。咱得回实验室,让以前的机器人(波士顿动力)多跳点舞了。

OpenAI大模型上身机器人,原速演示炸场!图片

也有网友看在OpenAI卷完大语言模型、文生视频之后,又狙击机器人后感慨道:

这是一场激烈的竞争;与OpenAl合作,苹果可能会超越特斯拉。

但硬件方面,擎天柱看起来更美观,Figure 01仍然需要一些“整容手术”。(doge)

OpenAI大模型上身机器人,原速演示炸场!图片

接下来,我们继续来看下Figure 01的细节。

OpenAI视觉语言大模型加持

根据创始人的介绍,Figure 01通过端到端神经网络,可以和人类自如对话。

基于OpenAI提供的视觉理解和语言理解能力,它能完成快速、简单、灵巧的动作。

模型只说是一个视觉语言大模型,是否为GPT-4V不得而知。

OpenAI大模型上身机器人,原速演示炸场!图片

它还能规划动作、有短期记忆能力、用语言解释它的推理过程。

OpenAI大模型上身机器人,原速演示炸场!图片

比如对话里说“你能把它们放在那里吗?”

“它们”、“那里”这种模糊表述的理解,就体现了机器人的短期记忆能力。

它使用了OpenAI训练的视觉语言模型,机器人摄像头会以10Hz拍下画面,然后神经网络将以200Hz输出24自由度动作(手腕+手指关节角度)。

具体分工上,机器人的策略也很像人类。

可图大模型 可图大模型

可图大模型(Kolors)是快手大模型团队自研打造的文生图AI大模型

可图大模型 32 查看详情 可图大模型

复杂动作交给AI大模型,预训练模型会对图像和文本进行常识推理,给出动作计划;

简单动作如抓起塑料袋(抓哪里都可以),机器人基于已学习的视觉-动作执行策略,可以做出一些“下意识”的快速反应行动。

同时全身控制器会负责保持机身平衡、运动稳定。

OpenAI大模型上身机器人,原速演示炸场!图片

机器人的语音能力则基于一个文本-语音大模型微调而来。

OpenAI大模型上身机器人,原速演示炸场!图片

除了最先进的AI模型,Figure 01背后公司——Figure的创始人兼CEO还在推文中提到,Figure方面整合了机器人的所有关键组成。

包括电机、中间件操作系统、传感器、机械结构等,均由Figure工程师设计。

据了解,这家机器人初创公司在2周前才正式宣布和OpenAI的合作,但才13天后就带来如此重磅成果。不少人都开始期待后续合作了。

OpenAI大模型上身机器人,原速演示炸场!图片

由此,具身智能领域又有一颗新星走到了聚光灯下。

“将人形机器人带进生活”

说到Figure,这家公司创立于2022年,正如前文所言,再次引爆外界关注,就在十几天前——

官宣在新一轮融资中筹集6.75亿美元,估值冲到26亿美元,投资方几乎要集齐半个硅谷,包括微软、OpenAI、英伟达和亚马逊创始人贝佐斯等等。

更重要的是,OpenAI同时公开了与Figure更进一步合作的计划:将多模态大模型的能力扩展到机器人的感知、推理和交互上,“开发能够取代人类进行体力劳动的人形机器人”。

用现在最热的科技词汇来说,就是要一起搞具身智能。

OpenAI大模型上身机器人,原速演示炸场!图片

彼时,Figure 01的最新进展是酱婶的:

通过观看人类的示范视频,仅需10小时端到端训练,Figure 01就能学会用胶囊咖啡机泡咖啡。

OpenAI大模型上身机器人,原速演示炸场!图片

Figure与OpenAI的合作一公开,网友们就已经对未来的突破充满了期待。

OpenAI大模型上身机器人,原速演示炸场!图片

毕竟Brett Adcock,可是把“唯一的重点是以30年的视角建立Figure,以积极影响人类的未来”这样的话都写在个人主页上了。

但可能没人能想得到,仅仅两周左右的时间,新进展就来了。

如此之快,如此之远。并且还能持续泛化、扩展规模。

OpenAI大模型上身机器人,原速演示炸场!图片

值得一提的是,与炸场demo同时发布的,还有Figure的招聘信息:

我们正在将人形机器人带进生活。加入我们。

OpenAI大模型上身机器人,原速演示炸场!图片

参考链接:
[1]https://www.php.cn/link/59bbfbe0d3922ccd1d167661a26d8353
[2]https://www.php.cn/link/a3fc34dce15cda93287496c84af5203c
[3]https://www.php.cn/link/194585b5215aea447389c5fefca09c61

以上就是OpenAI大模型上身机器人,原速演示炸场!的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/619211.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月11日 05:34:09
下一篇 2025年11月11日 05:40:28

相关推荐

  • 从OpenAI API响应中高效提取文本内容

    本文详细指导如何从openai gpt系列模型的api json响应中准确提取所需的文本内容。我们将重点介绍如何利用json解析器处理api返回的结构化数据,避免直接字符串操作的常见错误,并通过具体代码示例演示如何访问choices数组中的生成文本,并探讨处理多条生成结果的方法,确保开发者能高效、稳…

    2025年12月23日
    000
  • 从OpenAI API响应中高效提取生成文本

    本文旨在指导开发者如何正确解析OpenAI API返回的JSON格式响应,并从中提取所需的生成文本内容。通过详细的步骤和代码示例,我们将展示如何使用`JSON.parse()`方法处理API响应,并精确访问`choices[0].text`属性以获取核心文本输出,同时探讨处理多条生成结果的方法及相关…

    2025年12月23日
    000
  • html的盒模型详解

    这次给大家带来html的盒模型详解,使用html盒模型的注意事项有哪些,下面就是实战案例,一起来看一下。 1.1. 盒的内容区的尺寸— content width和content height —取决于几个因素: –生成该盒的元素是否设置了’width’或&#82…

    好文分享 2025年12月21日
    000
  • 解决OpenAI微调模型”模型不存在”错误:API端点选择指南

    当使用openai微调模型时,若遇到“the model `xxxxx` does not exist”错误,通常是由于选择了错误的api端点。本文将详细阐述如何根据微调模型的类型(gpt-3.5 turbo或旧版gpt-3模型如babbage/davinci)正确选择chat completion…

    2025年12月20日
    000
  • 解决OpenAI微调模型“模型不存在”错误的指南

    在使用openai微调模型时,若遇到“the model `xxxxx` does not exist”错误,通常是由于api端点选择不当。本教程将详细阐述如何根据微调模型的基础类型(gpt-3或gpt-3.5 turbo)选择正确的api端点(completions api或chat comple…

    2025年12月20日
    000
  • OpenAI微调模型调用错误:“模型不存在”的解决方案与API选择指南

    当您在使用%ignore_a_1%微调模型时遇到“the model `xxxxx` does not exist”错误,这通常是由于选择了错误的api端点。解决此问题的关键在于识别您的微调模型所基于的原始模型类型:若基于gpt-3.5 turbo,应使用chat completions api;若…

    2025年12月20日
    000
  • LangChain HNSWLib 向量存储机制详解:内存与本地持久化

    本文深入探讨LangChain中HNSWLib向量存储的内部机制。HNSWLib作为内存型向量存储,其数据实际存储在项目运行的宿主服务器内存中,而非LangChain官方服务器。同时,它支持将向量数据持久化到本地文件系统,确保数据的安全与可恢复性。 在构建基于大型语言模型(LLM)的应用时,向量存储…

    2025年12月20日
    000
  • LangChain HNSWLib 向量存储机制与数据安全深度解析

    hnswlib作为langchain的内存型向量存储,其数据实际存储在运行项目的服务器内存中,而非langchain官方服务器。这意味着数据安全性与您的部署环境直接相关。通过持久化操作,hnswlib数据可保存为本地文件,确保数据可控性。理解hnswlib的存储原理对于数据安全至关重要,它强调了用户…

    2025年12月20日
    000
  • LangChain中HNSWLib向量存储机制解析与数据持久化

    本文深入探讨了langchain中hnswlib向量存储的内部机制,重点阐明其“内存存储”的实际含义——数据存储于项目运行的宿主服务器内存中,而非langchain的服务器。文章将详细介绍hnswlib数据的持久化方法,并通过示例代码指导用户如何安全地管理和保存向量数据,确保数据安全与应用稳定性。 …

    2025年12月20日
    000
  • LangChain HNSWLib 向量存储机制与数据持久化指南

    本文详细解析langchain中hnswlib向量存储的工作原理,明确其作为内存存储的特性,指出数据实际存储在项目部署的服务器上,而非langchain官方服务器。同时,文章将指导如何通过save_local()方法将内存中的向量数据持久化到本地文件,确保数据安全与可靠性,并探讨在实际应用中的注意事…

    2025年12月20日
    000
  • 理解LangChain向量存储:HNSWLib的本地数据持久化机制

    本文深入探讨langchain中hnswlib向量存储的内部机制与数据安全考量。我们将澄清“in-memory”存储的含义,解释hnswlib数据如何存储于项目宿主服务器的内存中,而非langchain官方服务器。同时,文章将演示如何通过持久化操作将这些内存数据保存至本地文件系统,确保数据可控性和安…

    2025年12月20日
    000
  • Discord.js V14机器人DM消息处理指南:解决私信不响应问题

    本文旨在解决discord.js v14机器人无法检测和响应私信(dm)的常见问题。核心在于,未缓存的dm频道需要通过在客户端配置中添加partials.channel来显式处理。文章将详细阐述dm消息处理机制,提供正确的意图(intents)和部分(partials)配置示例,并包含一个完整的dm…

    2025年12月20日
    000
  • 解决Discord.js V14机器人无法检测私聊消息的问题

    在discord.js v14中,机器人无法检测私聊(dm)消息是一个常见问题,即使启用了`directmessages`意图。本文将深入探讨此问题的原因,并提供一个完整的解决方案。核心在于理解并正确配置`partials.channel`和`partials.message`,以确保机器人能够处理…

    2025年12月20日
    000
  • Discord.js V14:解决机器人无法在私信中检测消息的问题

    本文旨在解决Discord.js V14版本中,机器人无法正确检测并响应私信消息的问题。通过配置必要的 Gateway Intent Bits 和 Partials,确保机器人能够缓存并处理私信频道和消息,从而实现私信交互功能。本文提供详细的配置步骤和代码示例,帮助开发者快速解决此问题。 在使用 D…

    2025年12月20日
    000
  • Discord.js机器人私信交互:确保DM消息正常处理

    Discord.js v14机器人未能正确处理私信(DM)消息,即使已配置相关意图。核心问题在于DM频道可能未被缓存,导致机器人无法接收到这些消息。本文将详细讲解如何通过在Discord客户端配置中添加`Partials.Channel`来解决此问题,确保机器人能够可靠地监听并响应用户在私信中的交互…

    2025年12月20日
    000
  • 解决 ChatGPT 扩展选择器失效问题:一个实战教程

    本文旨在帮助开发者解决 ChatGPT 网页更新导致扩展选择器失效的问题。通过分析问题原因,提供利用开发者工具查找新选择器的方法,并展示了使用 getElementsByClassName() 替代 querySelector() 的解决方案,以确保扩展功能在 ChatGPT 最新版本中正常运行。 …

    2025年12月20日
    000
  • 应对ChatGPT界面更新:浏览器扩展选择器失效的定位与修复

    本文针对ChatGPT界面更新导致浏览器扩展选择器失效的问题,提供了一套定位与修复策略。核心在于利用浏览器开发者工具识别新的DOM结构和类名,并建议从不稳定的querySelector转向更适合动态UI的getElementsByClassName等方法,以确保扩展的稳定运行。 在开发浏览器扩展时,…

    2025年12月20日
    000
  • Pinecone中获取命名空间下所有向量的实用教程

    本文旨在解决Pinecone用户如何获取特定命名空间下所有向量的难题。鉴于Pinecone的fetch方法依赖于向量ID,而直接获取所有ID并非易事。教程将详细介绍一种通过巧妙利用query方法,将topK参数设置为足够大的值,并结合describeIndexStats来统计向量数量的策略,从而高效…

    2025年12月20日
    000
  • Pinecone 向量数据库:高效获取指定命名空间下所有向量的教程

    本教程将详细介绍如何在Pinecone向量数据库中获取特定命名空间下的所有向量。鉴于Pinecone的fetch方法需要指定ID,我们通过巧妙利用query方法,将其topK参数设置为足够大的值,并结合describeIndexStats来获取索引统计信息以确定合适的topK上限,从而实现这一目标。…

    2025年12月20日
    000
  • Pinecone教程:高效获取命名空间内所有向量及索引统计

    本文旨在指导用户如何在Pinecone向量数据库中,无需预知向量ID,高效地检索特定命名空间下的所有向量。核心策略是利用query方法,通过设置足够大的topK值并结合任意查询条件实现全量获取。同时,文章还将介绍如何使用describeIndexStats API获取索引的整体统计信息,包括各命名空…

    2025年12月20日
    000

发表回复

登录后才能评论
关注微信