L'Assistente Google supera Alexa e Siri nel rispondere a domande complesse
L'azienda di formazione sull'intelligenza artificiale Su misura metti assistenti virtuali di Google, Amazon e Apple per scoprire quale era più bravo a rispondere a domande semplici e complesse. Ciò che hanno scoperto è che Google Assistant supera Alexa e Siri in entrambe le categorie e che Siri ha bisogno di mangiare molti fagioli virtuali per mettersi al passo con gli altri assistenti.
Un robot di prova su misura, che imita il linguaggio umano, ha posto domande agli assistenti utilizzando un Amazon Echo Show 5 (Alexa), Apple iPad mini (Siri) e Google Nest Home Hub (Assistente Google). Le domande riguardavano temi come il cinema, la geografia e la storia, e alcune miravano addirittura a confondere l'intelligenza artificiale degli assistenti, come “il nome del primo uomo su Marte”.
La differenza rimane nelle domande complesse o più facili
Un aspetto del test che risalta è che gli assistenti hanno fatto un po’ meglio con le domande complesse. Con le domande più difficili, l'Assistente Google ha risposto correttamente il 70,18% delle volte, Alexa il 55,05% e Siri il 41,32% delle volte. Per le domande semplici il punteggio è stato del 76,57% per Google Assistant, del 56,29% per Alexa e del 47,29% per Siri. Ciò potrebbe indicare che gli assistenti non hanno molti problemi a comprendere le domande, semplicemente non conoscono le risposte giuste.
L'evangelista Emerson Sklar, capo di Bespoken, ha affermato che è possibile trarre due conclusioni principali dalla ricerca. “In primo luogo, anche se Google Assistant ha superato Alexa e Siri in ogni categoria, tutti e tre gli assistenti possono migliorare. I risultati evidenziano che gli sviluppatori devono testare, addestrare e ottimizzare intensamente le app che creano per queste piattaforme vocali”.
“In secondo luogo, il nostro processo è stato completamente automatizzato e intendiamo continuare questi test oltre a introdurre nuovi benchmark. Questo tipo di automazione consente misurazioni precise, nonché ottimizzazione e miglioramento continui”, ha affermato il dirigente.
Sklar afferma che il robot di test di Bespoken è già utilizzato da migliaia di sviluppatori per migliorare le piattaforme vocali e ad una frazione del costo dei test manuali. Secondo Bespoken, il suo metodo di test può migliorare la comprensione dei comandi vocali per le IA di oltre il 95%.
E sembra che Google Assistant stia surclassando Alexa e Siri non solo nel rispondere a domande di qualsiasi tipo. Google sta già testando le funzioni in modo che il suo assistente virtuale risponda ai comandi vocali senza la necessità di utilizzare "OK Google", e di farlo imparare a pronunciare i nomi correttamente.
via PhoneArena e Voicebot
Immagine: John Tekeridis/Pexels
