据报道,谷歌正在开发一个聊天机器人,他们声称这是世界上最好的。他们的新对话伙伴名为 Meena,它可以与您谈论世界上任何事物。
现在聊天机器人在 AI 的帮助下工作,谷歌表示 Meena 的对话神经网络包含 26 亿个参数,这使其成为比任何 AI 生成器都能更好地与人交谈的最佳聊天机器人。
Meena Chatbot 如何运作
Google 团队使用了 seq2seq 模型训练 Meena,使用了 400 亿个单词(其中包括 341 GB 的文本数据,包括社交媒体聊天记录)来训练 Meena。现在 seq2seq 是 Google 的 Transformer 的修改模型。这是一个神经网络,将段落中的单词相互比较以了解它们之间的关系。
Google 在 Meena 中安装了一个演进的 transformer 编码器和 13 个演进的 transformer 解码器。编码器块帮助聊天机器人理解对话的上下文。解码器块负责形成响应。
Google 声称 Meena 具有 1.7 倍的模型容量。这个团队用于训练它的数据是当今最好的聊天机器人 OpenAI GTP-2 的 8.5 倍。研究人员还开发了一种新的度量系统,称其为 “敏感度和特异度平均值”(SSA),用来测量谈话反应的敏感度或特异性。
Google 对聊天机器人并不陌生。他们在 2015 年发布了有关该模型的论文,该模型为技术支持提供了帮助。这家技术巨头还开发了许多语言模型,有助于理解对话的上下文。
Google 希望通过 Meena 创造一个与人类接近的聊天机器人,以便可以就世界上任何话题进行对话。该公司正试图以一种有助于它比网络上任何其他聊天机器人更好地理解对话内容的方式来制作这个模型。
遗憾的是,谷歌目前不会向开源社区发布 Meena。但不久的将来可能会发生变化。