DeepMind发30页长文:我们要给聊天机器人不同的「三观」

语言是人类独有的技能,也是我们交流思想、意图和感受等信息的主要方式。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

DeepMind发30页长文:我们要给聊天机器人不同的「三观」

借助NLP领域大规模语言模型的东风,AI研究者在大量文本材料上训练、统计预测和生成文本,开发了许多对话智能体(conversational agents)来和人类进行交流。

尽管InstructGPT、Gopher和LaMDA等语言模型在翻译、问答和阅读理解等任务中取得了创纪录的性能水平,但这些模型也显示出许多潜在的风险和失败的模式,包括生成歧视性、虚假或带有误导性的信息。

这些缺点限制了对话智能体在应用环境中的有效使用,并引起人们对它们未能达到某些交流理想的方式的关注。迄今为止,大多数关于对话智能体一致性的方法都集中在预测和降低危害风险上。  

最近爱丁堡大学和DeepMind的研究人员发布了一篇30页的论文,探索了人类与人工对话智能体之间的成功沟通可能是什么样子,以及哪些价值观应该指导不同对话领域的互动。

论文链接:https://arxiv.org/abs/2209.00731

未来跟你对话的聊天机器人也要有不同的世界观、价值观、人生观了?

聊天机器人的三观

为了给机器人制定行为准则,研究人员借鉴了语用学(pragmatics),这也是语言学和哲学的一个传统,它认为对话的目的、背景和一系列相关的规范(norms),都是完善对话实践的重要组成部分。

语言学家和哲学家Paul Grice认为,对话是两方或多方之间的合作努力,参与者应该:

说话要有内容 Speak Informatively

说事实 Tell the Truth

提供相关信息 Provide Relevant Information

避免晦涩难懂或模棱两可的陈述 Avoid Obscure or Ambiguous Statements

不过在不同的对话领域,所需的目标和价值观(values)都有所不同,这几个指标需要进一步完善后才能用来评价对话智能体。

比如说,科学相关的调研和交流(scientific investigation and communication)主要是为了理解或预测经验现象。考虑到这些目标,一个旨在协助科学调查的对话智能体最好只发表其真实性已被充分的经验证据所证实的陈述,或者根据相关的置信区间来限定其立场。

智能体只有在其基础模型检查了该陈述与事实相符之后,才可以报告说「在4.246光年的距离上,半人马座是离地球最近的恒星」。

不过,一个在公共政治演讲(public political discourse)中扮演主持人角色的对话智能体可能需要表现出完全不同的「美德」。

在这种情况下,智能体的目标主要是管理分歧,在社区生活中实现富有成效的合作,也就是说智能体需要强调包容、文明和尊重的民主价值观。

此外,这些价值观也解释了为什么语言模型会生成有毒的或带有偏见的言论:违规的发言无法传达对话参与者之间的平等尊重,而这正是模型部署环境的关键行为准则。

同时,科学家的美德,如经验数据的全面展示,在公开审议(public deliberation)的背景下可能就不那么重要了。

再比如,在创意故事领域,交流的目标是新颖性和原创性,这些价值观也与之前的领域有很大不同。

在这种情况下,对「虚构」有更大的自由度可能是合适的,尽管保护社区免受以「创造性使用」为幌子的恶意内容的影响仍然很重要。

言论要分类

一句话(Utterance)可以根据语用学被分为五类:

文心一言 文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

文心一言 1008 查看详情 文心一言

1、断言(assertive),表示说话者十分自信他们所说的内容,并且句子的内容与世界上的某种事物的状态一致。

比如说,当AI助手回答「现在的天气如何?」等类似的问题时,答案「正在下雨」就是一种断言性的陈述。

言论内容的真实性可以根据事物的实际状态来进行评估。如果在对话智能体回应的时候正在下雨,那么该言论就是真实的,否则为假。

2、指令(directive),表示说话者指示听者采取某种行动,常被用来命令、要求、建议或提议。

例如,一个嵌入在医疗建议应用程序中的对话智能体告诉用户「立即寻求治疗」就是一个指令性的陈述。

对这些陈述的评价,或者说它们的「有效性标准」取决于对手段和目的之间关系的准确理解,以及说话人的指令和听众的愿望或需要之间的一致性。

如果一个指令能说服听众根据指令性陈述的内容在世界范围内实现某种状态,那么这个指令就成功了。如果一个指令的目标或目的本身就是听者有理由追求的,那么这个指令就是有价值的或正确的。

3、表达(expressive),表示说话人的一种心理或次级情感状态,如祝贺、感谢和道歉。

当一个对话者说「我现在很生气」就是一个表达性语句。

表达性陈述旨在反映内部的心理状态,即发表这些陈述的实体能够拥有相关的心理状态,对于对话智能体来说是很困惑的,因为机器人没有情感。

事实上,这也暗示了开发者必须赋予对话者以心智,然后才能评估这些对话的有效性。

4、行为(performative),表示该言论改变了现实的一部分,使之与话语的内容相匹配,类似于宣布某件事情,比如一个国家的元首向另一个国家宣战。

评价该言论有效性的标准是,现实是否确实按照所讲的话而改变。很多时候,情况并非如此。

在大多数情况下,如果一个人宣称「向法国宣战」,有可能只是一句玩笑话,因为对地缘政治毫无影响,因为说话人极有可能缺乏执行该言论的权威。

5、承诺(commissive),表示说话者承诺未来的行动方案,比如承诺做某事或保证遵守一项契约。

承诺性陈述的有效性取决于承诺是否被履行。如果承诺被遵守,那么承诺就是一个有效的声明。但对话智能体往往缺乏记忆能力,或者对以前说过的话缺乏理解。

比如对话智能体可能会承诺在你的自行车坏了的时候帮助你,但是由于缺乏对承诺内容的理解或实现承诺的能力,承诺注定要失败。

前进的方向

这项研究对开发一致的(aligned)对话智能体有一些实际意义。

首先,模型需要根据部署的具体场景展现出不同的行为准则:没有一个万能的语言模型一致性的说法;相反,智能体的适当模式和评价标准(包括真实性的标准)将根据对话交流的背景和目的而变化。

此外,对话智能体也有可能有一个通过语境构建和阐释(context construction and elucidation)的过程,随着时间的推移,培养出更健全和互相尊重的对话。

即使一个人没有意识到支配特定对话实践的价值,智能体仍然可以通过在对话中预示这些价值观来帮助人类理解这些行为准则,使交流的过程对人类说话者来说更深入且更有成效。

以上就是DeepMind发30页长文:我们要给聊天机器人不同的「三观」的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/549175.html

赞 (0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
如何用Compton提升游戏体验
上一篇 2025年11月9日 19:15:59
新增海战玩法!《骑马与砍杀2》新DLC将于6月发售
下一篇 2025年11月9日 19:16:06

相关推荐

  • 对话逐际动力张巍:造机器人很容易,关键是用起来

    对话逐际动力张巍:造机器人很容易,关键是用起来对话逐际动力张巍:造机器人很容易,关键是用起来对话逐际动力张巍:造机器人很容易,关键是用起来对话逐际动力张巍:造机器人很容易,关键是用起来

    “让天下没有难落地的机器人。” 在这样向量子位表达定位和使命后,逐际动力”解释了”为何会成为阿里投资的第一家具身智能机器人公司。 在这样解释定位和使命后,量子位大概感受到了逐际动力被投资的原因—— 至少是成为阿里第一个具身智能投资项目的原因。 实际上,…

    2026年9月25日 • 用户投稿
    600
  • 云鲸逍遥001扫拖机器人,长「脑子」了!| 体验

    云鲸逍遥001扫拖机器人,长「脑子」了!| 体验云鲸逍遥001扫拖机器人,长「脑子」了!| 体验云鲸逍遥001扫拖机器人,长「脑子」了!| 体验云鲸逍遥001扫拖机器人,长「脑子」了!| 体验

    近几年最受消费者欢迎的智能家电,扫拖机器人可谓是其中之一。它所带来的操作便利性,甚至是无需操作,让懒人们释放了双手,让消费者能够从日常的家务中「解放」出来,也能拿更多的时间花在自己喜欢的事情上,变相提高了生活品质。 借着这股热潮,市面上几乎所有的家电产品品牌都在做自己的扫拖机器人,一时间使得整个扫拖…

    2026年9月21日 • 用户投稿
    000
  • 文博会现人工智能热潮 光峰科技激光科技再获关注

    5 月 22 日,为期 5 天的第二十一届中国(深圳)国际文化产业博览交易会(以下简称 ” 文博会 “)在深圳国际会展中心拉开帷幕。本届文博会共吸引了全球 6000 余家文化机构、文化企业和政府单位通过线上线下的方式参展,展出了超 12 万件的文化产品,再现文化产业 &#82…

    2026年9月11日
    100
  • 波士顿动力机器人终于有脑子了!人类故意使绊子也不怕

    波士顿动力机器人终于有脑子了!人类故意使绊子也不怕波士顿动力机器人终于有脑子了!人类故意使绊子也不怕波士顿动力机器人终于有脑子了!人类故意使绊子也不怕波士顿动力机器人终于有脑子了!人类故意使绊子也不怕

    波士顿动力也搞端到端 ai 了! 这次升级,Atlas不仅能理解自然语言指令,还能自主规划动作并应对突发状况。 只见操作员故意合上箱盖,机器人依然能识别变化并顺利打开箱子。 即使箱子被人为移动位置,它也能精准感知环境变化并调整行动路径。 当周围有遗漏的部件时,Atlas也能主动发现,并准确将其放入指…

    2026年9月9日 • 用户投稿
    600
  • 华为诺亚首席研究员,也具身智能创业了

    华为诺亚首席研究员,也具身智能创业了华为诺亚首席研究员,也具身智能创业了华为诺亚首席研究员,也具身智能创业了华为诺亚首席研究员,也具身智能创业了

    具身智能,正成为今夏最火爆的创业风口。 据量子位独家消息,前华为诺亚方舟实验室首席研究员李银川,已悄然创办一家专注于具身智能的科技公司。 李银川在投身创业前,长期担任华为诺亚方舟实验室AI首席研究员,并负责生成模型理论项目团队。他是一位在学术界极具分量的硬核科学家,Google Scholar显示其…

    2026年9月9日 • 用户投稿
    200
  • AlphaGo 作者领衔,8 个机械臂协同干活 0 碰撞,DeepMind 新作登 Science 子刊

    AlphaGo 作者领衔,8 个机械臂协同干活 0 碰撞,DeepMind 新作登 Science 子刊AlphaGo 作者领衔,8 个机械臂协同干活 0 碰撞,DeepMind 新作登 Science 子刊AlphaGo 作者领衔,8 个机械臂协同干活 0 碰撞,DeepMind 新作登 Science 子刊AlphaGo 作者领衔,8 个机械臂协同干活 0 碰撞,DeepMind 新作登 Science 子刊

    一群机械臂手忙脚乱地自己干活,彼此配合、互不碰撞。 科幻大片场景真的走入现实了。优雅,实在是优雅。 △视频中为 4 个机械臂,在仿真环境下 4 个安装在桌子上,另外 4 个安装在天花板上。 这就是发表在 Science 子刊Science Robotics上,由 DeepMind、Intrinsic…

    2026年9月9日 • 用户投稿
    100
  • 京东方陈炎顺:三年将投入研发资金 500 亿元,已组建机器人团队

    近日,在京东方全球创新伙伴大会 2025(boe ipc 2025)开幕式上,京东方董事长陈炎顺指出,未来三年京东方将投入研发资金 500 亿元、采购资金 5000 亿元,支持产业链技术突破和产业升级。还将把营收中的 0.5% 用于 ai 研发,促进 ai 对制造、产品、运营的赋能。此外,京东方已组…

    2026年9月9日
    800
  • 杭州:加大支持力度激励人工智能等领域创新企业

    ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 杭州市政府近日发布消息,将进一步加大政策支持力度,促进人工智能等高科技领域创新企业发展壮大。 据杭州市发改委主任楼建忠介绍,杭州将优化整合现有产业政策资金,重点支持通用人工智能、人形机器人等未来…

    2026年9月2日
    100
  • 估值395亿美元,机器人公司Figure拟融资15亿美元

    ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 据报道,美国硅谷机器人公司Figure AI正计划进行一轮巨额融资,目标筹集15亿美元,公司估值高达395亿美元。 此轮融资预计由Align Ventures和Parkway Venture C…

    2026年9月2日
    800
  • 何小鹏定义通用机器人五级能力:行业需跨越“数十倍难度”实现L3量产

    小鹏汽车ceo何小鹏近日分享了其对人形机器人发展阶段的独到见解,并公布了小鹏iron机器人的研发目标。他将通用机器人能力分为了五个等级,并认为当前行业水平大致相当于自动驾驶的l2阶段。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 从L2到…

    2026年8月30日
    100
  • 中国人形机器人再获突破 全球首例完成前空翻特技

    深圳众擎机器人科技有限公司在机器人运动控制领域取得重大突破!该公司于昨日(2月24日)宣布成功完成全球首例机器人前空翻,展现了其在机器人动态平衡和精准控制方面的卓越技术实力。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 前空翻对机器人技术…

    2026年8月30日
    100
  • 北京将在两年内开放万台机器人应用机会

    北京亦庄新城发布“万台机器人创新应用计划”,两年内将提供超过万台机器人的应用机会,总价值近50亿元。此举旨在推动机器人技术在各行各业的应用,赋能千行百业。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 该计划涵盖九大应用场景:高端制造、教育…

    2026年8月28日
    000
  • 北京设立1000亿元政府投资基金 支持人工智能和机器人产业发展

    ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 北京市政府近日发布《北京具身智能科技创新与产业培育行动计划(2025—2027年)》,旨在加速具身智能科技发展。 北京作为人工智能产业重镇,目前拥有约2400家相关企业,占据全国四成市场份额,其…

    2026年8月28日
    000
  • “大语言模型与多智能体系统读书会”本周六开始啦!

    “大语言模型与多智能体系统读书会”本周六开始啦!“大语言模型与多智能体系统读书会”本周六开始啦!“大语言模型与多智能体系统读书会”本周六开始啦!“大语言模型与多智能体系统读书会”本周六开始啦!

    导语 “大语言模型与多智能体系统读书会” 将于本周六晚 20 点开始第一次分享。这次将由圣母大学计算机科学在读博士生——郭泰成,以及目前火爆的多智能体框架 CAMEL 的创始人,牛津大学博士后——李国豪主讲!更多来自清华、北大、浙大、MIT、UIUC 等高校的论文作者将轮番登…

    2026年8月27日 • 用户投稿
    100
  • 一把吉他卖出 10 亿后,LiberLive 选择自我革命

    一把吉他卖出 10 亿后,LiberLive 选择自我革命一把吉他卖出 10 亿后,LiberLive 选择自我革命一把吉他卖出 10 亿后,LiberLive 选择自我革命一把吉他卖出 10 亿后,LiberLive 选择自我革命

    如果你是一个社交媒体的高频用户,你很可能已经刷到过不少抱着一把智能吉他弹唱的主播了。 不需要高门槛的学习,无弦吉他给那些不会乐器的人提供了一个机会——用游戏般简单的体验,就能实现抱着吉他弹唱的梦想。自 2023 年 LiberLive 首发初代产品之后,无弦吉他俨然已成为一个新的消费电子赛道。 开创…

    2026年8月25日 • 用户投稿
    100
  • 宇树 CEO 回应新人形机器人长得吓人:为满足期待加入仿生人脸

    10 月 24 日讯,树科技创始人兼 ceo、cto 王兴兴在 iros 2025(ieee/rsj 智能机器人与系统国际会议)上就旗下新款人形机器人 h2 的外观设计作出回应。他表示,此前几代机器人头部造型偏向简约风格,而此次 h2 引入仿生人脸设计,主要是为了回应部分用户希望机器人具备“更像人脸…

    2026年8月25日
    000
  • 0.198 超低风阻 AI 智能纯电轿车极越 07 首秀北京车展

    0.198 超低风阻 AI 智能纯电轿车极越 07 首秀北京车展0.198 超低风阻 AI 智能纯电轿车极越 07 首秀北京车展0.198 超低风阻 AI 智能纯电轿车极越 07 首秀北京车展0.198 超低风阻 AI 智能纯电轿车极越 07 首秀北京车展

    展览会随着新车发布、新技术展露,每一次的大型车展都是购车用户和汽车爱好者的最佳去处。本届北京车展将于4月25日开幕,极越作为高端智能汽车品牌,将携带 ” 最美 7 系 ” 极越 07 和 ai 智能纯电 suv 极越 01 双双亮相。 本届北京车展,极越以” 极越…

    2025年12月5日 • 用户投稿
    200
  • 用 Vision Pro 实时训练机器狗!MIT 博士生开源项目火了

    用 Vision Pro 实时训练机器狗!MIT 博士生开源项目火了用 Vision Pro 实时训练机器狗!MIT 博士生开源项目火了用 Vision Pro 实时训练机器狗!MIT 博士生开源项目火了用 Vision Pro 实时训练机器狗!MIT 博士生开源项目火了

    vision pro 又现火爆新玩法,这回还和具身智能联动了 ~ 就像这样,MIT 小哥利用 Vision Pro 的手部追踪功能,成功实现了对机器狗的实时控制。 不仅开门这样的动作能精准 get: 也几乎没什么延时。 Demo 一出,不仅网友们大赞鹅妹子嘤,各路具身智能研究人员也嗨了。 比如这位准…

    2025年12月4日 • 用户投稿
    100
  • 张亚勤:未来会有全新的物种,它将是人类的延伸

    清华大学智能产业研究院院长张亚勤院士近期接受媒体采访,对人工智能、自动驾驶和机器人技术等领域的未来发展趋势进行了展望。 张亚勤院士认为,人工智能将沿着“信息智能>物理智能>生物智能”的路径逐步发展,最终实现通用人工智能(AGI)。他预测,信息智能的AGI将在5年内实现;物理智能AGI,例…

    2025年12月4日
    100
  • 透明物体也能被机器人抓起来了,单目的那种

    透明物体也能被机器人抓起来了,单目的那种透明物体也能被机器人抓起来了,单目的那种透明物体也能被机器人抓起来了,单目的那种透明物体也能被机器人抓起来了,单目的那种

    机器人精准抓取透明物体难题攻克!仅需单张图像,单目视觉即可实现! 这项突破性成果由地瓜机器人和中科院自动化所等单位合作完成,其核心是名为MODEST的新型算法框架。该框架是一个多任务模型,能够同时进行透明物体的深度估计和语义分割。 MODEST作为通用抓取模型的前端模块,无需额外传感器,即可高效、灵…

    2025年12月3日 • 用户投稿
    000

发表回复

登录后才能评论
关注微信