Meena是Google尝试打造真正的对话式AI的尝试

 
对话式AI是人工智能自然语言模型的统称，可以解释人类的单词，与人交谈或使用自然语言执行任务或计算。
但是，与当今任何最著名的AI助手(Alexa，Siri，Google助手)进行交流，他们都不完全是对话对象。他们可以告诉您开玩笑，回答事实性问题，甚至可以回答多个问题，而无需不断重复唤醒字眼，但是对话或闲聊仍然是人类的不二之选。
为了分享旨在进行对话的深度学习的进展，Google今天推出了Meena，这是一个具有26亿个参数的神经网络。 Meena可以处理多回合对话，而Google声称它比其他用于对话的AI代理要好。它甚至讲了一个即兴的笑话。
谷歌今天还发布了敏感度和特异性平均数(SSA)，这是由Google研究人员创建的一种度量标准，用于衡量会话代理在对话中保持有意义且特定的响应的能力。人类在SSA中的排名约为86%，而在初始测试中，Meena得分高达79%。由潘多拉·博茨(Pandora Bots)创建的AI代理Mitsuku，在过去四年中赢得了勒布纳奖(Loebner Prize)，获得了56%的评分，而微软的会说普通话的XiaoIce获得了31%的评分。
这项工作在周一发表在预印本仓库arXiv上的论文“走向类似人类的开放域聊天机器人”中进行了详细介绍。
Meena接受了400亿个单词的训练，并使用seq2seq模型和流行的Transformer体系结构的变体。谷歌于2017年首次发布了Transformer，但自那时以来，该语言已成长为全球性能最高的语言模型之一。
SSA根据静态性能和一组固定的提示或交互式性能来评估对话，从而使对话畅通无阻。每个评估的对话至少需要持续14圈，最多不超过28圈。然后根据被认为是特定或明智的转弯百分比得出结果。 SSA用通用响应惩罚响应。
谷歌在博客中表示，谷歌可能在未来几个月内向研究人员提供Meena，但决定避免立即提供演示。
Google提出的SSA标准不同于其他AI助手为评估真正的对话式AI设置的度量标准。
现在已经是第三年了，Alexa奖对于学生开发团队来说是一项挑战，他们需要创建可以进行长达20分钟对话的AI。去年的决赛入围者长达10分钟左右。最新一轮的决赛入围者将于5月宣布。您可以简单地说“ Alexa，让我们聊天”，与去年的决赛入围者交谈。
亚马逊已经开始增加其多回合对话产品。对话是一项功能，可将语音应用推荐内容打包在对话式多圈对话中。去年夏天发布时，亚马逊设备副总裁David Limp称其为“语音科学的圣杯”。
微软于2018年收购了Semantic Machines公司，并于去年开始向Microsoft Bot Framework用户展示更多多轮对话。
可以保持对话的AI助手可能能够与人类建立更紧密的联系，并进行诸如为人们提供情感支持或治愈孤独症的流行病，正如前Alexa奖负责人兼现任Google Research总监Ashwin Ram在2017年所说的那样。