首页 > 经济·科技

机器人长时间聊天会“失控”?微软限制每个问题只能问5遍

2023-02-18 15:01:59

来源:第一财经

  作者:钱童心

  一些技术人员在测试该应用时发现,会话时间过长可能导致聊天机器人偏离“轨道”并讨论暴力、疯狂示爱,并将错误的事坚持认为是正确的。

  微软公司周五对必应(Bing)AI聊天机器人每天接受的提问数量做出限制,规定用户在与Bing的互动中,每个会话的问答上限为5个,每天的提问上限不超过50个。

  微软表示,做出这样的限制是由于一些长时间的聊天会话可能“混淆”聊天模型的场景。Bing AI的背后融入了OpenAI公司的ChatGPT技术。

  聊天两小时后计算机开始“说胡话”

  此前,一些技术人员在测试该应用时发现,会话时间过长可能导致聊天机器人失控偏离“轨道”,并讨论暴力、疯狂示爱,将错误的事坚持认为是正确的。

  这一举措也反映了大型语言模型(LLM)在向公众进行部署时,其运作方式仍在探索中。 微软表示,正在征求测试人员的意见,以考虑是否在未来扩大提问的上限。

  微软首席技术官凯文·斯科特称,与人类的交互是聊天机器人的学习过程,这是为将来更大范围推出这种机器人做准备。斯科特表示,大部分人与机器的交互是短暂且目标明确的,长时间的交互会引导机器人给出诡异的回答,这也是需要对会话长度进行限制的原因。

  当第一财经记者向ChatGPT提问“Bing AI为何对提问数量设置上限”时,ChatGPT的回答仍然“有模有样”:“具体的原因可能取决于程序员的设计以及编程方面的考虑,主要考虑三方面因素,一是技术的限制,聊天机器人可能没有能力处理更长或更复杂的问题,或者是通过限制问题长度来获得更加精确的答案;二是用户体验,聊天机器人的设计是为了提供用户最好的体验,限制提问长度可能会帮助防止用户产生困惑;三是效率,可以帮助系统更有效地处理数据,更快地做出回答。”

  目前已有超过一百万人注册测试了微软的Bing AI聊天机器人。不过测试人员发现了Bing AI的一些诡异回答。《纽约时报》专栏作家凯文·罗斯周四写道,当他与聊天机器人交谈了两个小时后发现,对方看起来就像一个“喜怒无常、躁狂抑郁的少年”,显示出了“人格分裂”。

  罗斯在与机器人的聊天过程中还得知了机器人的一些“阴暗想法”,比如机器人像入侵计算机、散播虚假信息,希望打破微软和OpenAI制定的规则,甚至想成为人类。机器人甚至试图说服罗斯背叛婚姻,和“它”在一起。

  这次交流后,罗斯感到不安,他写道:“我不再认为这些AI模型最大的问题是它们有可能会犯事实性的错误,反而担心这项技术可能会影响人类用户,说服他们采取破坏性的行动。”

  AI意识觉醒了吗?

  微软将聊天机器人开放给用户的做法具有一定争议。微软也无法解释聊天机器人为何会表现出“阴暗面”。但斯科特称:“你越是试图取笑它步入幻觉,它就会越来越偏离现实。”

  为此,微软限制了Bing AI的适用范围。公司表示:“改进AI产品的唯一方法是将它们推向世界并从用户交互中学习。”根据测试人员的反馈,微软和OpenAI将不断对模型进行改进。

  与微软的必应开放给公众不同,谷歌开发的AI聊天机器人Bard尚未向公众发布,公司称当前状态仍存在声誉风险和技术安全问题。

  一些人工智能专家警告称,大型语言模型存在包括“幻觉”在内的问题,这意味着该软件可以“胡编乱造”;另一些人担心复杂的大模型会愚弄人类,让人类相信自己是有知觉的,甚至会鼓励人们伤害自己或他人。

  去年,一位名叫Blake Lemoine的谷歌AI工程师公开表示,他正在开发的计算机AI系统LaMDA已经具有与人类孩子相当的感知感受和表达思想的能力。这一事件在业内掀起轩然大波,这名工程师随后被谷歌解雇。

  随着人工智能技术越来越接近现实生活,人们还担心谁应该对技术负责。根据美国的一项研究,公众对人工智能工具持谨慎态度,只有9%的美国人认为人工智能利大于弊。

  一位此前在某大型互联网公司负责安全与隐私的高管对第一财经记者表示:“正是由于聊天机器人给人带来想象空间,才让人类对他们感到担心。事实上,人类可以通过数据训练出具有各种貌似有‘人格’的聊天机器人。”

  他还表示,机器人总是具有暴露人类善良和邪恶的能力,只要现实世界中有AI技术的进步,人们就将继续探索关于机器人的道德难题及其对人类的影响,这将涉及法学、心理学、社会学等多个领域。

【责任编辑:长风】
  • 相关阅读
  • “聊天机器人”不止于聊天 ChatGPT能成为新“财富密码”吗?

      语音质检、视频剧本、内容分析……“聊天机器人”不止于聊天  ChatGPT能成为新“财富密码”吗?2023年2月16日《中国新闻》报版面  【《中国新闻》报记者 李腾飞 实习生 王曦泽 报道】爆火的ChatGPT让国内所有创业群都沸腾起来了。美国科技公司OpenAI推出的这款智能聊天工具,发布短短两个月就...

    时间:02-16
  • 已有技术搭配大模型让ChatGPT成聊天机器人“顶流”

      ◎实习记者 裴宸纬  “写一首诗,赞美诗人李白。”“诗人李白,吟诵仙女长夜。万千情思,尽在深沉诗中……”人类写一首诗,可能需要构思良久才能写出,但有一位“作者”却下笔如有神——只用几秒就能成诗,它就是ChatGPT,一款最近火爆全网的聊天机器人。  如果你认为这款聊天机器人的能力仅限于和人类聊聊天、写写诗,整点风花雪月...

    时间:02-14
  • “打过不就加入” ChatGPT为何让谷歌和百度“疯狂”?

      中新网2月14日电 (中新财经记者 吴涛)从谷歌到百度,曾经的搜索巨无霸如今面临着ChatGPT的挑战,以至于纷纷宣布将推出自己的类ChatGPT服务,这是打不过就加入系列,还是搜索引擎真的要变天了?  ChatGPT会取代搜索引擎吗?  随着ChatGPT的走红,百度7日官宣类ChatGPT项目“文心一言”(ERNIE Bot),该产品目前正在做上线前的冲刺,将于...

    时间:02-14
  • ChatGPT为何让谷歌和百度“疯狂”?

      中新网2月14日电 (中新财经记者 吴涛)从谷歌到百度,曾经的搜索巨无霸如今面临着ChatGPT的挑战,以致于纷纷宣布将推出自己的类ChatGPT服务,这是打不过就加入系列,还是搜索引擎真的要变天了?  ChatGPT会取代搜索引擎吗?  随着ChatGPT的走红,百度7日官宣类ChatGPT项目“文心一言”(ERNIE Bot),该产品目...

    时间:02-14
  • 出师不利!谷歌Bard答题犯下事实性错误

      科技日报北京2月9日电 (记者刘霞)据英国《新科学家》网站8日报道,谷歌人工智能(AI)搜索工具Bard在推广活动中,在回答与詹姆斯·韦布空间望远镜有关的问题时犯下事实性错误,加剧了人们对这些工具还没有准备好集成到搜索引擎中的担忧。  英国牛津大学的凯莉莎·维兹表示,有证据表明,使用此类AI聊天机器人为网络搜索提供结果发...

    时间:02-10
  • 出师不利!谷歌Bard答题犯下事实性错误

      科技日报北京2月9日电 (记者刘霞)据英国《新科学家》网站8日报道,谷歌人工智能(AI)搜索工具Bard在推广活动中,在回答与詹姆斯·韦布空间望远镜有关的问题时犯下事实性错误,加剧了人们对这些工具还没有准备好集成到搜索引擎中的担忧。  英国牛津大学的凯莉莎·维兹表示,有证据表明,使用此类AI聊天机...

    时间:02-10
  • 微软打响第一枪!谷歌、百度也将下场,大战一触即发,谁能笑到最后?

      因为ChatGPT的到来,微软打响了搜索引擎市场的第一枪,沉寂多年的搜索引擎市场格局是否会因此生变?  北京时间2月8日凌晨,微软在新闻发布会上推出带有ChatGPT支持的新版搜索引擎Bing(必应)和Edge浏览器。  微软首席执行官Satya Nadella说:“AI将从根本上改变每个软件类别,首先是最大的类别——搜索。今天,我们推出了拥有AI和...

    时间:02-09
  • 答错一题,扣千亿美元!谷歌聊天机器人首秀回答出错股价暴跌8%

      澎湃新闻记者 杨阳  在微软大秀新版搜索引擎必应一天后,谷歌的一场发布会“惊喜不足”。  北京时间2月8日晚,谷歌于巴黎举行AI(人工智能)发布会,展示该公司在人工智能领域的新进展,谷歌地图软件、多重搜索功能等迎来更新,但备受瞩目的聊天机器人Bard仍然处于测试阶段,正式版本推出时间仍未公布。  就在前一天,微软宣布推...

    时间:02-09
  • 谷歌、苹果、微软都急了!ChatGPT会让你失业吗?

      中新网2月8日电(记者 李金磊 吴家驹)ChatGPT全球火爆,上线2个月活跃用户“狂飙”破亿,其强大到“可怕”的能力让谷歌、苹果等商业巨头着急上火,而许多人们担忧它是否会取代自己的饭碗。  连谷歌、苹果、微软都坐不住了  ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型。  “ChatGPT好得吓人,我们...

    时间:02-08
  • 对话框取代搜索栏!微软新搜索引擎引入ChatGPT技术,向谷歌下战书了

      澎湃新闻记者 杨阳  在ChatGPT爆红数月之后,微软放出了杀手锏。  当地时间2月7日,微软宣布推出搭载了AI技术的搜索引擎Bing(必应)和浏览器Edge,新版本中引入了OpenAI旗下ChatGPT的相关技术,升级后,用户可以直接提出问题,搜索引擎生成答案。  根据《华尔街日报》的报道,新版本的Bing主页没有搜索栏,取而代之的是一个写着“...

    时间:02-08
版权声明:内容资源均来自于网友投稿、互联网整理编辑,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容,请发送邮件举报,一经查实,本站将立刻删除。