三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5

该团队的新模型在多个基准测试中都与 Gemini Pro 、GPT-3.5 相媲美。
如果你经常读 AI 大模型方向的论文,Yi Tay 想必是一个熟悉的名字。作为前谷歌大脑高级研究科学家,Yi Tay 为许多知名的大型语言模型和多模态模型做出了贡献,包括 PaLM、UL2、Flan-U-PaLM、LaMDA/Bard、ViT-22B、PaLI、MUM 等。
根据 Yi Tay 个人资料统计,在谷歌大脑工作的 3 年多的时间里,他总共参与撰写了大约 45 篇论文,是其中 16 篇的一作。一作论文包括 UL2、U-PaLM、DSI、Synthesizer、Charformer 和 Long Range Arena 等。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5

和大多数离开谷歌自主创业的 Transformer 作者一样,Yi Tay 在去年 3 月份宣布离开谷歌,并参与创办了一家名为 Reka 的公司,Yi Tay 担任该公司的首席科学家,主攻大型语言模型。
随着时间的推移,刚刚,Yi Tay 宣布他们发布了新模型:
三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5
「很高兴与大家分享 Reka Flash,这是一种具有 SOTA 性能的、全新的 21B 多模态模型,该模型在语言和视觉基准方面可与 Gemini Pro 和 GPT 3.5 相媲美。我们用相对有限的资源从零开始训练这个模型…… 与此同时,我们规模最大、功能最强的模型 Reka-Core 也即将完成,大家可以对我们接下来的工作期待一下。」
Reka Flash:一个高效的多模态语言模型
Reka Flash 参数量为 21B,完全从头开始训练,其性能可与更大规模的模型相媲美,在众多语言和视觉基准测试中,Reka Flash 与 Gemini Pro 和 GPT-3.5 具有竞争力。
此外, Reka 团队还提出了一个更紧凑的模型变体 Reka Edge,该模型参数量更少,只有 7B,并且效率更高,使其在资源受限(例如,在设备上、本地)的场景下也能运行。
值得一提的是,这两种模型均处于公开测试阶段,感兴趣的读者可以前去尝试。
试用地址:https://chat.reka.ai/auth/login
与此同时,Reka 团队宣布他们最大、功能最强的 Reka Core 模型将在未来几周内向公众推出。
至于开源问题,该团队表示还在考虑当中。
三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5
评估:语言
评估基准包括 MMLU(基于知识的问答)、GSM8K(推理和数学)、HumanEval(代码生成)和 GPQA(Google-proof graduate-level question answering)。
结果显示,Reka Flash 在这些基准测试中取得了非常出色的成绩:在 MMLU 和 GPQA 上优于 Gemini Pro,在 GSM8K 和 HumanEval 上取得了具有竞争力的结果。此外,在这些评估中,Reka Flash 明显优于许多较大的模型(例如 Llama 2 70B、Grok-1、GPT-3.5)。
三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5
评估:多语言推理
Reka Flash 在超过 32 种语言(包括英语,德语,中文,日语,法语,韩语,西班牙语,意大利语,阿拉伯语等)的文本上进行了预训练,因此 Reka Flash 可以看做是一个强大的多语言模型。研究者比较了不同模型在多语言基准上的性能,包括多语言常识推理、因果推理和问答。结果表明,Reka Flash 在所有这些任务上均优于 Llama-2 70B 和 Mixtral。
三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5
评估:视觉和视频
此外,该研究还在多模态基准上对 Reka Flash 进行了评估,包括视觉问答(MMMU、VQA-v2)、视频字幕(VATEX)和视频问答(Perception Test)。结果表明 Reka Flash 在所有四个基准测试中都比 Gemini Pro 具有竞争力。
三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5
该研究还进行了一系列人工评估来评估基于 Reka Flash 的聊天模型。研究者考虑了两种设置,1)纯文本聊天模型和 2)多模态聊天模型。评估过程中他们按照 Askell 等人的方法计算 ELO 分数和总体胜率。
纯文本聊天:研究者以 GPT-4、Claude 2.1 和 Gemini Pro(API 版本)等领先模型为基准。此外研究者还比较了 Reka Edge、Mistral 7B 和 Llama 2 7B 聊天模型的性能。
人工评估结果表明,Reka Flash 取得了具有竞争力的结果,优于 GPT-3.5 Turbo、Claude、Mixtral 和 Gemini Pro。Reka Edge 领先于另外两款 7B 模型,接近 Claude Instant 1.2 的性能。
三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5
评估:多模态
该研究还将 Reka Flash 与 GPT4-V、Gemini Pro、Llava-1.6、IDEFICS 80b 和 Adept Fuyu-8B 等多模态语言模型进行了比较。结果表明,Reka Flash 的性能优于除 GPT4-V 之外的所有模型。Reka Edge 也取得了不错的排名,超越了基于 Mistral 7B 的 Llava 1.6 7B,并接近 Gemini Pro 的性能。
三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5
7B 参数的 Reka Edge 模型
Reka Edge 是更为紧凑的 7B 模型,专为本地部署和延迟敏感应用程序而设计。在语言评估任务上,该研究报告了其与类似规模模型(即 Mistral 7B 和 Llama-2 7B)的比较。结果表明,Reka Edge 在标准语言基准测试中优于 Llama 2 7B 和 Mistral 7B。
三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5
总结
Reka 团队表示他们旨在构建最先进的多模态语言模型,随着 Reka Flash 和 Reka Edge 的发布,他们 AI 蓝图中的最初里程碑已经实现。大家可以期待他们接下来的研究。
参考链接:https://reka.ai/reka-flash-an-efficient-and-capable-multimodal-language-model/

以上就是三年16篇一作,前谷歌研究科学家Yi Tay官宣新模型,21B媲美Gemini Pro、GPT-3.5的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/799153.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
apple免费软件网站 apple苹果官网网站APP下载入口
上一篇 2025年11月26日 17:14:22
MySQL之-双机双向热备份的示例代码
下一篇 2025年11月26日 17:14:24

相关推荐

  • X旗下Grok上线即时语音搜索,挑战Google引领搜索新方向

    近日,x平台旗下的ai助手grok正式推出了“即时语音搜索”功能。用户现在可以通过语音直接提问,触发实时网页检索,并迅速获得整合后的精准答案。此举意在优化信息获取流程,推动人机交互向更自然、高效的方向演进。 该语音搜索模式实现了“即说即搜即答”的流畅体验。例如,当用户提出“星舰发射的具体时间是什么?…

    2026年9月21日
    100
  • 马斯克xAI的Grok将推AI视频检测工具,能否破解深度伪造难题?

    随着ai视频生成技术飞速渗透网络,深度伪造内容不断扩散,网络信息真实性面临前所未有的挑战。在此背景下,马斯克的xai公司的grok模型即将推出一项关键升级,打造一款“真伪侦探”工具。 近日,马斯克在X平台回应网友担忧时表示,Grok即将获得识别AI生成视频并追踪其网络来源的能力,以此应对深度伪造内容…

    2026年9月21日
    000
  • Grok官方主页登录入口_Grok最新版官方网站地址

    Grok官方主页登录入口是grok.com,用户需通过X账号登录,该网站支持电脑和手机浏览器访问,界面简洁,可进行多轮对话,并与X平台深度关联,提供免费及高级订阅服务。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ Grok官方主页登录入口…

    2026年9月21日
    100
  • Gemini2.5网页版访问入口_Gemini2.5官方网站下载链接

    Gemini 2.5网页版访问入口为 https://gemini.google.com/app,登录谷歌账号后可使用主交互界面、模型切换、文件上传、历史记录及移动端同步等功能。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ Gemini2…

    2026年9月20日
    000
  • Grok官方主页访问_Grok官方网站网页版链接

    Grok官方网站网页版链接是https://grok.com,用户无需X账户即可通过浏览器访问,支持多语言和多设备使用,并可实时检索信息、进行多轮对话及内容生成。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ Grok官方网站网页版链接在哪…

    2026年9月20日
    100
  • VSCode的悬浮提示信息如何自定义?

    通过JSDoc或docstring添加注释可直接影响VSCode悬浮提示内容,如JavaScript/TypeScript中使用/* /格式、Python中使用三引号文档字符串,配合Pylance等扩展增强显示;安装语言支持扩展可提升提示丰富度;高级场景可通过开发自定义语言服务器,在textDocu…

    2026年9月20日
    500
  • Gemini2.5官方网址平台_Gemini2.5网页端官方入口

    Gemini 2.5官方网址为aistudio.google.com,国内用户可访问该平台使用多语言交互、代码生成、上下文记忆及多模态处理等功能,界面简洁且支持API调用与文件解析。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ Gemin…

    2026年9月20日
    000
  • Gemini2.5网页版官方链接_Gemini2.5在线下载网址

    Gemini 2.5网页版官方链接是https://aistudio.google.com,用户可通过此入口在Google AI Studio平台进行交互,或使用镜像站、API及第三方客户端等方式访问。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模…

    2026年9月20日
    000
  • Claude Haiku 4.5— Anthropic最新推出的小型AI模型

    Claude Haiku 4.5— Anthropic最新推出的小型AI模型Claude Haiku 4.5— Anthropic最新推出的小型AI模型Claude Haiku 4.5— Anthropic最新推出的小型AI模型Claude Haiku 4.5— Anthropic最新推出的小型AI模型

    ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 百川大模型 百川智能公司推出的一系列大型语言模型产品 62 查看详情 Claude Haiku 4.5 是什么 claude haiku 4.5 是由 anthropic 推出的最新小型 ai …

    2026年9月13日 用户投稿
    100
  • Gemini2.5官方网址链接_Gemini2.5网页版登录地址

    Gemini 2.5官方网址是https://gemini.google.com/app,用户可通过此链接登录并使用其核心功能,如多轮对话创作、图像生成及跨模态设计等。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ Gemini 2.5官方…

    2026年9月12日
    500
  • Grok主站官方入口_Grok网页版官方网址

    Grok主站官方入口是https://grok.x.ai,用户可通过浏览器访问并点击“Sign Up”注册,使用邮箱验证后登录,即可体验其自然语言问答、文本生成、代码辅助、图像理解与数据分析等功能,支持多设备同步且兼容主流浏览器。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用…

    2026年9月11日
    100
  • Grok官方网站首页链接_Grok官方主页访问入口

    Grok官方网站首页链接是https://grok.com/,用户可直接访问并注册使用其对话功能,平台支持邮箱注册、多设备适配,具备实时网络浏览、长上下文记忆、深度搜索及代码调试能力,免费账户享基础服务,订阅用户可解锁高频次深度搜索与优先体验权。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索,…

    2026年9月11日
    100
  • 月之暗面(Moonshot AI)将完成数亿美元融资

    据公开报道,国内大模型初创企业月之暗面(moonshot ai)或将迎来新一轮数亿美元级别的融资,引发业界广泛关注。截至目前,该公司尚未对此消息作出回应。 这家曾被誉为“中国最值得期待的大模型创业公司”之一的企业,在过去一段时间内相对低调。回顾此前融资记录,月之暗面最近一次公开融资发生在2024年8…

    2026年9月11日
    000
  • deepseek官方社区网址_加入deepseek官方社区官网交流

    deepseek官方社区网址是https://chat.deepseek.com/,该平台提供互动交流、模型更新、技术文档、多语言支持及开源项目协作,同时支持实时对话、多终端同步与API集成。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ …

    2026年9月10日
    600
  • Grok官方网址链接_Grok官网首页在线入口

    Grok官方网址是https://grok.com,用户需通过X平台账户登录,该平台提供实时数据响应、复杂任务拆解及多模态处理等功能,支持网页端和移动端跨设备使用。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ Grok官方网址链接在哪里?…

    2026年9月10日
    100
  • Claude默认用用户数据训练AI保留5年,月底前速点“拒绝”!

    近日,Anthropic宣布将调整其数据使用政策,开始利用用户的新聊天记录和代码编写会话来训练其AI模型,除非用户主动选择退出。与此同时,公司还把相关数据的保留期限延长至五年,适用于未选择退出的用户。所有用户必须在**9月28日前**完成设置,否则默认同意。如果你现在点击“接受”,Anthropic…

    用户投稿 2026年9月10日
    100
  • 特斯拉三季度财报公布:营收281亿美元 净利润降37%

    小编注意到,美东时间周三盘后,特斯拉公布了2025年第三季度财报。财报显示,特斯拉季度营收创下新高,总营收达到280.95亿美元,同比增长12%;其中汽车业务收入为212.05亿美元,同比增长6%。本季度自由现金流达39.9亿美元,同比提升46%;经营现金流为62.4亿美元。截至季度末,公司现金及投…

    2026年9月9日
    100
  • Grok平台官方网站_Grok主页快速访问入口

    Grok平台官网是https://grok.com,提供实时数据流检索、X账号登录、高吞吐处理及简洁界面,支持Super Grok订阅与多端同步使用。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ Grok平台官方网站在哪里?这是不少网友都…

    2026年9月9日
    200
  • Grok官方主页网址_Grok官方网站在线访问

    Grok官方主页网址是https://grok.x.ai,国内用户因网络限制无法直接访问,可通过X平台账号登录使用,或选择国内镜像站获取服务。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ Grok官方主页网址在哪里?这是不少网友都关注的,…

    2026年9月9日
    100
  • Gemini2.5官方主页链接_Gemini2.5在线体验网址

    Gemini 2.5官方主页链接是https://gemini.google.com,用户可通过该网址进行在线体验,平台提供文本对话、文件上传、跨设备同步等功能,并支持通过Google AI Studio和Vertex AI调用高级模型。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无…

    2026年9月8日
    100

发表回复

登录后才能评论
关注微信