智慧城市网

 

　　测试4：系统基本功能
 

 

　　表4 系统基本功能测试结果

 

　　测试的基本功能包括：应用(App)的开启、系统设备、闹钟设置、备忘录建立与修改、锁屏等设备自带的系统功能。
 

　　经过测试，Siri与Alexa在各自系统功能的交互与功能调用强。首先，在情景交互层面，四类智能虚拟助理在能够识别和支撑的语义的条件下，基本都能正常打开系统应用能够，但Alexa在部分系统功能的调用上，设置了深度交互的功能(如设置系统时间时，Alexa会咨询具体情况，而非直接调用时间设置功能)。在功能的智能实现上，Siri与Alexa能够覆盖的功能为广泛；谷歌助理和Cortana有许多系统功能无法调用，尤其是谷歌助理，甚至连Google下的chrome都无法调用。
 

　　测试5：翻译场景
 

 

　　表5 翻译功能测试结果

 

　　经过测试，仅有谷歌助理与Cortana具备跨语种翻译的功能。在情景交互层面，谷歌助理和Cortana均能实现翻译的需求，并通过语音回复翻译需求。从功能智能度的层面来看，谷歌助理无论是对语义的理解还是语法的理解都远强于Cortana，虽然并未直接调用谷歌翻译，但鉴于谷歌助理较强的翻译功能，可以推断谷歌助理在翻译功能上整合了谷歌翻译的功能。
 

　　测试6：基本知识场景
 

 

　表6 基础知识场景测试结果

 

　　1、基本知识：面对基本知识语音问题处理佳的是Alexa。首先在情景交互层面，四类智能虚拟助理在能够理解的范围内，都能实现正常的交互以及应答。但在功能的智能度方面，Alexa所覆盖的知识库为全面，并且能够准确的回答问题；谷歌助理，Siri，Cortana的知识库都有各自的局限，其中谷歌助理的功能能够识别的基本知识问题为局限；面对无法解答的基本知识时，都会调用其相应的搜索引擎。
 

　　2、新闻：新闻方面的交互和功能实现谷歌助理处理的好。在情景交互方面，谷歌助理、Cortana和Alexa均能很好的识别用户的新闻需求问题，并将正确的查询结果返回。在智能化方面，各智能虚拟助理均能实现语义的匹配新闻内容(依赖搜索引擎)；但从第三方整合来看，谷歌助理支持的新闻搜索范围广。
 

　　总结：在基础知识问题的解决方面，Alexa对应的知识库为广泛，能够识别不同领域的基础知识问题，并搜索给出答案；同时也体现了Amazon在基础知识库搭建上下了较重的功夫；而谷歌助理、Siri、Cortana在基础知识的语义理解上时常存在一定偏差，给出的结果未必准确。在新闻话题方面，谷歌助理仍是保持其精品化的特征，相比其他智能虚拟助理，谷歌助理在新闻话题整合了大量的第三方新闻媒体作为信息源，很好的提升了用户体验。
 

　　测试7：体育场景
 

 

　　图7 体育场景测试结果

 

　　1、查询当前赛况(比分)：谷歌助理、Siri和Alexa都能很好的完成该项任务。在情景交互层面，能够正常识别语音并返回结果。在功能的智能化层面，能够定位棒球比赛，并对棒球各类比赛进行细分，寻找当前赛事的实时比分。
 

　　2、查询比赛赛程与球队现状：四类助理在比赛赛程的查询上均表现很好，但都不具备该话题深度交互的能力，糟的是，除了谷歌助理，其他助理均无法识别“scorer”的语义，词库完善度还有待提升。
 

　　3、查询赛季：四类助理对于足球赛事的识别能力都较弱，无法正确关联“获胜者”与“英超赛事”。
 

　　总结：谷歌助理、Siri、Alexa在篮球与棒球的体育话题表现较好，基本可以准确查询赛程和赛况，但体育话题的深度交互上，存在一定的上下文关联问题；Cortana在赛况的标签不如另外三者，证明其对体育赛事的实时性支撑还有待提升。值得注意的是，四类智能虚拟助理在足球赛事的表现都较弱，这可能与美国地区更偏好篮球和棒球相关(四类助理均由美国开发)。