時間:2019-09-03 來源:互聯網 瀏覽量:
編 | 韋世瑋
導語:連續兩年奪冠的穀歌Assistant秀了一把智商,蘋果Siri和亞馬遜Alexa還在迎頭猛追。
智東西9月2日消息,前段時間,市場研究公司Loup Ventures發布了2019年語音助手IQ測試結果,結果表明,穀歌助手Assistan以回答正確率92.9%的成績位列第一。
另外,蘋果Siri和亞馬遜Alexa分別以92.9%和79.8%的正確率排名第二、第三。
與去年相同,今年Loup Ventures的測試題依然由800個問題組成,並分為本地、商業、導航、信息和命令五大類別。
一、穀歌Assistant蟬聯第一,亞馬遜Alexa進步最大實際上,穀歌Assistant已經是第二年取得Loup Ventures測試第一名的成績。
Assistant延續了去年的優秀表現,在測試中正確理解了100%的問題,並且回答正確率高達92.9%。該成績比去年的85.5%正確率有所進步,並正在快速提升答題的準確率。
相比之下,第二名的蘋果Siri在理解題目和答題這兩方麵的數據都有所上升。理解水平從去年的99%上升到今年的99.8%,答題正確率從去年的78.5%提高到今年的83.1%。
雖然在現實生活中,用戶反饋Siri的使用體驗不太理想,但此次測試的成績卻接近了去年Assistant的答題水平。
今年,亞馬遜Alexa再次坐上了老三的位置,然而這次它卻取得了較大的進步。它在測試中理解了99.9%的問題,答題正確率為79.8%,表現比去年的Siri還要好。
相比Assistant和Siri,Alexa的答題正確率呈大幅度提高之勢,它去年正確率為61.4%。Loup Ventures表示,這是自他們開始做測試以來最大的一次漲幅。
值得注意的是,今年Loup Ventures並沒有將微軟Cortana列入測試結果中,因為微軟的產品和第三方配件中正在逐漸減少Cortana的使用。而去年Cortana的答題正確率僅為52.4%,排名第四。
二、測試題涵蓋五大類別,Assistant精通四項有意思的是,Loup Ventures測試的題目涵蓋了五個不同的類別,分別為本地、商業、導航、信息和命令,每個類別的目的都是為了測試潛在AI能服務的不同領域。
因此,測試中得到高分的AI屬於全麵發展的語音助手,而不僅僅是精通某一領域。
除了命令類別之外,穀歌Assistant在其他四項測試中均獲得了最高分。特別是在商業領域,它以92%的準確率遙遙領先,和Siri、Alexa的差距最大。Siri與Alexa的正確率分別為71%和68%。
在命令測試中,Siri以93%的正確率擊敗了86%的Assistant,而這也是Assistant唯一一次正確率未能達到92%。
另一方麵,Alexa在本地、導航和命令三個類別均落後於其他兩個AI,僅在商業類別以71%的正確率略微超過68%的Siri。
此外,Siri在本地和導航兩項類別均獲得第二名,在商業和信息兩類均獲得第三名。其中,它在信息方麵的成績與其他兩個AI的差距最大,正確率為76%,而Assistant為96%,Alexa為93%。
三、尚未表現出高級推理技能在Loup Ventures看來,每個AI的測試成績能朝著滿分的方向進步是十分令人欣喜的,但這能被理解為AI助理是“聰明”的。
雖然它們能夠在合理的範圍內,理解人類對它們說的一切,但它們隻是在自身設定的主要應用中取得了良好的響應,並沒有表現出更高層次的推理技能。
Loup Ventures認為,語音助手的下一步工作是添加一些特別適合用語音來解決的其他應用,並提供簡單的用戶體驗以解決這些問題。
結語:語音助手發展迅速,未來值得期待Loup Ventures的這次測試向我們證明了,目前大部分領先的語音助手都在以明顯的進步,不斷提升自己的理解能力和準確率。
在未來,也許人們隻需簡單地通過手機、平板電腦或智能音箱下達語音命令,就能輕鬆得到語音助手更高效的服務和反饋,讓生活更加便利。
文章來源:VentureBeat