从上述问题类型来看,终端用户对于电视语音助理的需求不外乎:
- 稳定、听得懂、回答正确
- 反应灵敏与互动流畅
我们进一步将上述需求转为量化数据并综合分析:
1.语音助理运行的稳定性和回答正确率:以目前语音助理的技术发展以及终端使用者的期望来看,百佳泰建议整体执行正确率应达到95%-97%以上才能满足其需求。
Reference:https://www.gadgets360.com/internet/news/google-voice-recognition-accuracy-machine-learning-mary-meeker-internet-trends-170
2. 反应速度:若要让用户在透过<语音>按键唤醒语音助理时能感到灵敏流畅的话,参考”人类感知能力”相关报告,百佳泰建议反应时间应在1秒内,最慢则是建议不超过1.5秒。
Reference:
- https://medium.com/@slhenty/ui-response-times-acec744f3157
- https://www.nngroup.com/articles/response-times-3-important-limits/
实测方向说明
本次找了各大厂商在2021生产与贩卖的智能电视搭配主流语音助理进行评测比较。
测试手法
由于语音相关测试的难处在于,若透过一般人工方式难以有效率地进行多次数且精准的测量,也难以确保测试条件的一致性,例如: 腔调、音量、角度、距离…等等,更无法提供当下的测试记录以重新检视和分析测试过程中发现的各种问题。
本次实测是运用百佳泰开发的ACSTS测试套件执行测试,此套件可跨平台模拟各种问答情境且并反复进行数百次、上千次的功能验证以及反应时间量测,并将问题透过影片、照片作纪录和回放。