Google Home智能扬声器智商测试

Google Home智能扬声器智商测试

中文科讯网消息:据外媒报道,早在7月份,Loup Ventures就发布了一项“年度数字助理智商测试”的结果,将谷歌的助手与苹果的Siri、亚马逊的Alexa和微软的Cortana进行对比,当回答800个真实世界问题时,这四个人工智能系统的性能按降序排列。现在,公司又开始进行一项“年度智能扬声器智商测试”,重点关注同一位助手如何通过诸如Google Home、Apple HomePod和Amazon Echo等扬声器进行测试,测试结果有些有趣。 与先前的情况一样,Home Mini上的Google助理再次以100%的理解率领导了这个小组,这次正确回答率为87.9%,高于7月份智能手机测试的85.5%和2月份Loup最后一次智能扬声器测试的81%。助理的回答在五个类别中的四个类别(即本地、商业、导航和信息请求)中击败了所有的竞争对手,仅次于“命令”请求,准确率达73%。 苹果公司的Siri on HomePod在2月中旬的表现上表现强劲,但在iPhone上测试时却低于7月份的表现。通过演讲,Siri正确回答了74.6%的询问,高于2月份的52.3%,同时理解了99.6%的询问。这与7月份通过iPhone获得的78.5%的正确回答率相类似,但略有下降。有趣的是,Loup指出,Siri将“基本上除了音乐以外的任何东西”的请求传递回iOS设备进行处理。即便如此,HomePod在“命令”类中仍领先于所有竞争对手,正确响应率为85%。 亚马逊的Alexa和微软的Cortana再次位居第三、第四,但都显示出通过聪明的演讲者正确回答问题的能力。Alexa通过Echo的应答正确率为72.5%,相比之下,2月份通过扬声器的应答正确率为64%,7月份使用手机的应答正确率为61.4%,这一增长使其几乎与昂贵得多的HomePod并驾齐驱。Cortana通过Harman Kardon Invoke的扬声器获得了63.4%的正确答复,比二月份的扬声器测试和七月份的智能手机测试分别提高了57%和52.4%。 根据Loup的说法,专有名词仍然是说话者最大的痛处,否则说话者几乎能理解用户对他们说的一切。然而,除了这些之外,所有的助手都在“有意义”地改进,Siri看到了通过增加额外的专业领域而获得的好处,Alexa可能从诸如Alexa Answers等众包知识中受益。一些AI还添加了钩子来支持与第三方合作伙伴的更多交互。 虽然Loup预计7月份会再次更新其智能手机数字助理的发现,但它并不期望人工智能会逐渐正确地回答他们提出的所有问题,相反,他们只能做更多的事情,包括控制更广泛的设备阵列,或在现有能力范围内提供诸如此类的优越功能。作为电子邮件、日历和消息。在这个阶段,每项改进都会为用户增加实际价值,所以看到明年的预测是否正确将会令人兴奋。


分享到:


相關文章: