脸书研究所已经建立并开源了BlenderBot 2.0,这是第一个可以同时建立长期记忆的聊天机器人。它可以连续访问和搜索互联网以获取及时的信息,并就几乎任何话题进行复杂的对话。这是对原版的重大更新。
在与人交谈时,BlenderBot 2.0表明,与它的前身(现有最先进的聊天机器人)相比,它更擅长在多个会话中进行更长时间、更有见识和一致的对话。
该模型获取在对话期间收集的相关信息,并将其存储在长期记忆中,以便它可以在持续几天、几周甚至几个月的持续对话中利用这些知识。知识为每个与之交谈的人单独存储,这确保了在一次交谈中学习的新信息不会在另一次交谈中使用。
在对话过程中,该模型可以生成上下文相关的互联网搜索查询,读取结果,并在响应人们的问题和评论时整合这些信息。这意味着该模型在不断变化的世界中保持最新。
今天,我们发布了完整的模型、代码和评估设置,以及两个新的对话数据集——由互联网搜索支持的人类对话和与参考以前会话的人的多会话聊天——用于训练模型,因此其他研究人员可以重现这项工作,并推进对话式人工智能的研究。
当前的语言生成模型,如GPT-3和第一版脸书人工智能,可以清晰地表达自己,至少在正在进行的对话中,并生成看起来逼真的文本。但他们患有非常短暂的“金鱼记忆”,他们的任何长期记忆都是静态的——仅限于他们以前学到的东西。他们永远无法获得额外的知识,这就是为什么GPT-3和BlenderBot认为NFL巨星汤姆·布拉迪仍在为新英格兰爱国者队效力,他们不知道他在坦帕湾海盗队赢得了2021年超级碗。
如果你昨天告诉GPT-3或BlenderBot 1.0一些事情,它今天就会忘记。更糟糕的是,由于其算法的缺陷,这些模型出了名的产生了知识幻觉——即自信地陈述不正确的信息。
聊天机器人不必受到这些限制的束缚,这也是为什么我们很高兴地宣布,我们将通过我们的研究平台发布新的开源聊天机器人BlenderBot 2.0。
。BlenderBot 2.0具有访问记忆和减少幻觉的能力。它基于BlenderBot的原始版本,是第一个将多种对话技能(包括共情、知识和个性)集成到一个系统中的聊天机器人。
语言模型生成的研究进展迅速。作为一个行业,我们拥有比以往任何时候都更好的工具来显著扩展聊天机器人的对话能力。尽管现有系统可以询问和回答关于食物、电影或乐队的基本问题,但它们通常难以处理更复杂或自由形式的对话,例如详细讨论汤姆·布拉迪的职业生涯。
然而,基于BlenderBot 2.0的技术有一天可以成为日常生活中有用的一部分,因为它可以就任何可以持续几天、几周甚至几个月的话题进行多会话对话,并增加其知道并可以谈论的内容对话的开发。这是因为它是第一个可以生成互联网搜索查询、随着时间的推移使用和建立知识以及参考以前的想法的聊天机器人。这些进步,包括长期记忆的建立和与互联网信息交流能力的增强,克服了当前系统的一些缺点。在测试中,我们发现BlenderBot 2.0在对话能力上优于现有最好的系统。
在交谈过程中,BlenderBot 2.0可以使用任何搜索引擎在互联网上查询相关的新知识,并可以读写其长期本地记忆存储。BlenderBot 2.0还记得之前讨论的上下文。因此,举例来说,如果你几周前与汤姆·布拉迪谈论它,它可能会在未来的对话中提到NFL,因为它知道它与你相关。同样,如果你用它来谈论今年奥斯卡颁奖典礼之前的电影,它可能会提到获得奥斯卡奖的无依之地。此外,由于BlenderBot 2.0可以利用知识,因此与其他系统相比(根据我们的实验评估测量),它更不容易产生幻觉。
本文来自手牵手我们一起走过投稿,不代表舒华文档立场,如若转载,请注明出处:https://www.chinashuhua.cn/24/487306.html