DeepMind发30页长文:我们要给聊天机器人不同的「三观」

语言是人类独有的技能,也是我们交流思想、意图和感受等信息的主要方式。

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

DeepMind发30页长文:我们要给聊天机器人不同的「三观」

借助NLP领域大规模语言模型的东风,AI研究者在大量文本材料上训练、统计预测和生成文本,开发了许多对话智能体(conversational agents)来和人类进行交流。

尽管InstructGPT、Gopher和LaMDA等语言模型在翻译、问答和阅读理解等任务中取得了创纪录的性能水平,但这些模型也显示出许多潜在的风险和失败的模式,包括生成歧视性、虚假或带有误导性的信息。

这些缺点限制了对话智能体在应用环境中的有效使用,并引起人们对它们未能达到某些交流理想的方式的关注。迄今为止,大多数关于对话智能体一致性的方法都集中在预测和降低危害风险上。  

最近爱丁堡大学和DeepMind的研究人员发布了一篇30页的论文,探索了人类与人工对话智能体之间的成功沟通可能是什么样子,以及哪些价值观应该指导不同对话领域的互动。

论文链接:https://arxiv.org/abs/2209.00731

未来跟你对话的聊天机器人也要有不同的世界观、价值观、人生观了?

聊天机器人的三观

为了给机器人制定行为准则,研究人员借鉴了语用学(pragmatics),这也是语言学和哲学的一个传统,它认为对话的目的、背景和一系列相关的规范(norms),都是完善对话实践的重要组成部分。

语言学家和哲学家Paul Grice认为,对话是两方或多方之间的合作努力,参与者应该:

说话要有内容 Speak Informatively

说事实 Tell the Truth

提供相关信息 Provide Relevant Information

避免晦涩难懂或模棱两可的陈述 Avoid Obscure or Ambiguous Statements

不过在不同的对话领域,所需的目标和价值观(values)都有所不同,这几个指标需要进一步完善后才能用来评价对话智能体。

比如说,科学相关的调研和交流(scientific investigation and communication)主要是为了理解或预测经验现象。考虑到这些目标,一个旨在协助科学调查的对话智能体最好只发表其真实性已被充分的经验证据所证实的陈述,或者根据相关的置信区间来限定其立场。

智能体只有在其基础模型检查了该陈述与事实相符之后,才可以报告说「在4.246光年的距离上,半人马座是离地球最近的恒星」。

不过,一个在公共政治演讲(public political discourse)中扮演主持人角色的对话智能体可能需要表现出完全不同的「美德」。

在这种情况下,智能体的目标主要是管理分歧,在社区生活中实现富有成效的合作,也就是说智能体需要强调包容、文明和尊重的民主价值观。

此外,这些价值观也解释了为什么语言模型会生成有毒的或带有偏见的言论:违规的发言无法传达对话参与者之间的平等尊重,而这正是模型部署环境的关键行为准则。

同时,科学家的美德,如经验数据的全面展示,在公开审议(public deliberation)的背景下可能就不那么重要了。

再比如,在创意故事领域,交流的目标是新颖性和原创性,这些价值观也与之前的领域有很大不同。

在这种情况下,对「虚构」有更大的自由度可能是合适的,尽管保护社区免受以「创造性使用」为幌子的恶意内容的影响仍然很重要。

言论要分类

一句话(Utterance)可以根据语用学被分为五类:

文心一言 文心一言

文心一言是百度开发的AI聊天机器人,通过对话可以生成各种形式的内容。

文心一言 1008 查看详情 文心一言

1、断言(assertive),表示说话者十分自信他们所说的内容,并且句子的内容与世界上的某种事物的状态一致。

比如说,当AI助手回答「现在的天气如何?」等类似的问题时,答案「正在下雨」就是一种断言性的陈述。

言论内容的真实性可以根据事物的实际状态来进行评估。如果在对话智能体回应的时候正在下雨,那么该言论就是真实的,否则为假。

2、指令(directive),表示说话者指示听者采取某种行动,常被用来命令、要求、建议或提议。

例如,一个嵌入在医疗建议应用程序中的对话智能体告诉用户「立即寻求治疗」就是一个指令性的陈述。

对这些陈述的评价,或者说它们的「有效性标准」取决于对手段和目的之间关系的准确理解,以及说话人的指令和听众的愿望或需要之间的一致性。

如果一个指令能说服听众根据指令性陈述的内容在世界范围内实现某种状态,那么这个指令就成功了。如果一个指令的目标或目的本身就是听者有理由追求的,那么这个指令就是有价值的或正确的。

3、表达(expressive),表示说话人的一种心理或次级情感状态,如祝贺、感谢和道歉。

当一个对话者说「我现在很生气」就是一个表达性语句。

表达性陈述旨在反映内部的心理状态,即发表这些陈述的实体能够拥有相关的心理状态,对于对话智能体来说是很困惑的,因为机器人没有情感。

事实上,这也暗示了开发者必须赋予对话者以心智,然后才能评估这些对话的有效性。

4、行为(performative),表示该言论改变了现实的一部分,使之与话语的内容相匹配,类似于宣布某件事情,比如一个国家的元首向另一个国家宣战。

评价该言论有效性的标准是,现实是否确实按照所讲的话而改变。很多时候,情况并非如此。

在大多数情况下,如果一个人宣称「向法国宣战」,有可能只是一句玩笑话,因为对地缘政治毫无影响,因为说话人极有可能缺乏执行该言论的权威。

5、承诺(commissive),表示说话者承诺未来的行动方案,比如承诺做某事或保证遵守一项契约。

承诺性陈述的有效性取决于承诺是否被履行。如果承诺被遵守,那么承诺就是一个有效的声明。但对话智能体往往缺乏记忆能力,或者对以前说过的话缺乏理解。

比如对话智能体可能会承诺在你的自行车坏了的时候帮助你,但是由于缺乏对承诺内容的理解或实现承诺的能力,承诺注定要失败。

前进的方向

这项研究对开发一致的(aligned)对话智能体有一些实际意义。

首先,模型需要根据部署的具体场景展现出不同的行为准则:没有一个万能的语言模型一致性的说法;相反,智能体的适当模式和评价标准(包括真实性的标准)将根据对话交流的背景和目的而变化。

此外,对话智能体也有可能有一个通过语境构建和阐释(context construction and elucidation)的过程,随着时间的推移,培养出更健全和互相尊重的对话。

即使一个人没有意识到支配特定对话实践的价值,智能体仍然可以通过在对话中预示这些价值观来帮助人类理解这些行为准则,使交流的过程对人类说话者来说更深入且更有成效。

以上就是DeepMind发30页长文:我们要给聊天机器人不同的「三观」的详细内容,更多请关注创想鸟其它相关文章!

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。
如发现本站有涉嫌抄袭侵权/违法违规的内容, 请发送邮件至 chuangxiangniao@163.com 举报,一经查实,本站将立刻删除。
发布者:程序猿,转转请注明出处:https://www.chuangxiangniao.com/p/549175.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2025年11月9日 19:15:34
下一篇 2025年11月9日 19:16:22

相关推荐

  • 0.198 超低风阻 AI 智能纯电轿车极越 07 首秀北京车展

    展览会随着新车发布、新技术展露,每一次的大型车展都是购车用户和汽车爱好者的最佳去处。本届北京车展将于4月25日开幕,极越作为高端智能汽车品牌,将携带 ” 最美 7 系 ” 极越 07 和 ai 智能纯电 suv 极越 01 双双亮相。 本届北京车展,极越以” 极越…

    2025年12月5日 硬件教程
    200
  • 用 Vision Pro 实时训练机器狗!MIT 博士生开源项目火了

    vision pro 又现火爆新玩法,这回还和具身智能联动了 ~ 就像这样,MIT 小哥利用 Vision Pro 的手部追踪功能,成功实现了对机器狗的实时控制。 不仅开门这样的动作能精准 get: 也几乎没什么延时。 Demo 一出,不仅网友们大赞鹅妹子嘤,各路具身智能研究人员也嗨了。 比如这位准…

    2025年12月4日 硬件教程
    000
  • 张亚勤:未来会有全新的物种,它将是人类的延伸

    清华大学智能产业研究院院长张亚勤院士近期接受媒体采访,对人工智能、自动驾驶和机器人技术等领域的未来发展趋势进行了展望。 张亚勤院士认为,人工智能将沿着“信息智能>物理智能>生物智能”的路径逐步发展,最终实现通用人工智能(AGI)。他预测,信息智能的AGI将在5年内实现;物理智能AGI,例…

    2025年12月4日
    100
  • 透明物体也能被机器人抓起来了,单目的那种

    机器人精准抓取透明物体难题攻克!仅需单张图像,单目视觉即可实现! 这项突破性成果由地瓜机器人和中科院自动化所等单位合作完成,其核心是名为MODEST的新型算法框架。该框架是一个多任务模型,能够同时进行透明物体的深度估计和语义分割。 MODEST作为通用抓取模型的前端模块,无需额外传感器,即可高效、灵…

    2025年12月3日 硬件教程
    000
  • 2024 年全球扫地机器人出货量排名:石头小米进前五

    2024年全球智能扫地机器人市场蓬勃发展,idc最新报告显示强劲增长态势。报告指出,2024年全球智能扫地机器人出货量达2060.3万台,同比增长11.2%,销售额更是增长19.7%,达到93.1亿美元。这一增长主要归功于消费者对智能家居的日益追捧以及扫地机器人技术的持续革新。 中国厂商在全球市场表…

    2025年12月3日 硬件教程
    000
  • 科沃斯 AWE 展台亮点释出 与品牌代言人胡歌一起体验家庭清洁智慧解决方案

    awe2024将于3月14日至3月17日在上海新国际博览中心举行,以”智能科技,创享生活”为主题。科沃斯集团将展示其旗下科沃斯机器人和添可智能科技产品于e1馆。科沃斯机器人将展示多款地宝新品,全新智能清洁技术和全场景服务机器人产品,为参会者带来全新的服务机器人生活体验。 科沃…

    2025年12月3日
    000
  • 无需电池即可实现「自动驾驶」,华盛顿大学开发出无限续航的机器人

    不装电池,也能%ignore_a_1%的“车”出现了。 甚至还会自动收集能量持续运行,完全没有里程焦虑(手动狗头)。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 不错,这么一个小机器人,其实靠的是光和无线电波供能。其名MilliMobil…

    2025年12月2日 科技
    000
  • “韩国年内最大IPO”上市,首日股价翻倍!造出会斟啤酒、做炸鸡的机器人,这家公司火了!

    重写内容为:每经编辑:李泽东 最近,韩国市场上的机器人非常受欢迎! 周四(10月5日),韩国斗山机器人公司(Doosan Robotics Inc.)在首尔市场上市的首日,股价便几乎翻倍。此前该公司宣布通过首次公开募股(IPO)募资4210亿韩元(约合3.1亿美元),为韩国市场上年内迄今规模最大的I…

    2025年12月2日 科技
    000
  • vivo Vision探享会:从“尝鲜”到“常用”,MR是行业未来?

    8月20日,vivo会客厅-vivo vision探享会在vivo全球总部成功举办。vivo执行副总裁、首席运营官兼中央研究院院长胡柏山,与来自多个领域的专家齐聚一堂,围绕mr技术的应用场景、硬件创新与生态构建展开深度交流。次日,即8月21日,vivo vision混合现实头显探索版将在vivo v…

    2025年12月2日 行业动态
    000
  • 智能机器人在工业4.0中的影响

    ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 在%ign%ignore_a_1%re_a_1%中利用智能机器人可以为企业提供更高的自动化、灵活性、效率、安全性和减少错误。 自19世纪以来,人类经历了三次工业革命,每次都以创新技术改变制造业和…

    2025年12月2日 科技
    000
  • 小米机器人公司迁入亦庄小米汽车工厂:已研发出铁大、铁蛋等

    6月5日消息,据北京亦庄公众号介绍,日前北京小米机器人技术有限公司(以下简称“小米机器人公司”)乔迁仪式在北京经济技术开发区(北京亦庄)举行。 小米第二代仿生四足机器人CyberDog 2还在现场献上即兴舞蹈。 据悉,小米机器人公司于2023年4月在北京亦庄注册成立,成为小米集团专注于仿生机器人技术…

    2025年12月2日 行业动态
    000
  • 京东独家战略合作世界机器人大会,将打造沉浸式黑科技盛宴

    8 月 8 日至 12 日,2025 世界机器人大会(wrc)将在北京经济技术开发区北人亦创国际会展中心隆重启幕。作为本次大会的“独家全球战略合作伙伴”,京东将联合宇树科技、智元、天工、众擎、星海图、逐迹动力、千寻、松延动力等全球领先的机器人企业,共同打造一个极具未来感的沉浸式黑科技展区,为观众献上…

    2025年12月2日
    100
  • OpenAI把GPT塞进机器人大脑,具身AGI奇点迫近!英伟达微软参投26亿美金独角兽Figure

    人形机器人明星公司Figure迎来了高光时刻! 就在刚刚,OpenAI与Figure官宣合作,专为人形机器人打造下一代AI多模态模型。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 图片 这项合作最大的目的是,增强机器人处理语言和推理的能力…

    2025年12月1日 科技
    000
  • 机器人与生物医学工程:人造组织

    ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 近年来,机器人技术与生物医学工程的交叉带来了再生医学领域的突破性创新。最令人兴奋的发展之一是人造组织的创造,它为彻底改变医学治疗和疗法带来了巨大的希望。本文探讨了机器人技术和生物医学工程领域开发…

    2025年12月1日 科技
    000
  • 全球首款女团机器人拍出 10580 元成交引关注

    8月11日,一台标价9999元的灵童·念 NIA-F01人形%ignore_a_1%在某拍卖平台以1元起拍,经过多轮竞价后,最终以10580元成交,吸引了超过一万一千人次在线围观。 这款机器人被称为全球首款AI驱动的具身人形桌面机器人,身高56厘米,内置34个自由度的微型伺服电机,可精准完成行走、转…

    2025年12月1日
    100
  • 机器人+AI,乐森打造全新家庭娱乐场景互动体验

    5月25日,消费级%ign%ignore_a_1%re_a_1%品牌「ROBOSEN」乐森机器人(以下简称:乐森)在北京兰境艺术中心隆重举办以“Make Life More Fun”为主题的新品发布会。发布会上,乐森重磅推出三款消费级娱乐机器人,包括乐森巴斯光年、乐森大黄蜂G1性能版、乐森擎天柱《超…

    2025年12月1日 科技
    000
  • 克服智能机器人实施挑战的五种方法

    智能%ignore_a_1%,在商业世界中越来越受欢迎。 智能机器人具有多种优势,如提高效率、提高准确性和成本效益。企业智能机器人技术能够成功应对实施中的挑战,特别是当与先进技术相融合运用时。 ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ …

    2025年12月1日 科技
    200
  • 机器人+AI,「汽车人」终于走入现实

    消费级机器人正更多地向技术能力加码。 编辑 | 鱼三隹、靖宇 变形金刚一直是无数人童年偶像,也是无数科技爱好者对机械技术开始了解的起点,拥有飙车、机械变身和为正义而战的特点。即便是马斯克也无法抵抗变形金刚的致命吸引力,不但将特斯拉推出的人形机器人命名为「擎天柱」,甚至还断言:「这些人形机器人比电动汽…

    2025年12月1日 科技
    000
  • 使用物联网机器人的DDoS攻击在一年内增加了五倍

    ☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜ 源自不安全%ign%ignore_a_1%re_a_1%设备的僵尸网络流量,在物联网网络上强制实施分布式拒绝服务(ddos),在过去一年中增加了五倍。 据报告显示,这一增长源于更多以利润为导向的…

    2025年12月1日 科技
    000
  • 机器人加速!稀土永磁也被带火,持续性如何?

    a股机器人板块在6月29日周四迎来迅速上涨,各细分板块全面爆发,超过30只个股涨停或涨幅超过10%。而随着机器人的全面爆发,市场的炒作也从核心部件减速器、电机、传感器等逐渐扩散到上游材料——稀土永磁方向。英洛华和宁波韵升股票大幅上涨,涨停板被触发;大地熊和中科磁业股票上涨超过10%。 人形机器人电机…

    2025年12月1日 科技
    100

发表回复

登录后才能评论
关注微信