U Alexy jsme zaznamenali snad nejvíce rozpoznatelný posun vpřed, tedy alespoň dle výsledků testů, které se téměř shodovaly s Googlem u několika obecných informačních žádostí.
Loup Ventures publikovali výsledky v jejich každoročním „Smark Speaker IQ“ testu. Google Home byl celkový vítěz, ale velkým překvapením je to, že HomePod od Apple a Siri předčily Alexu i Cortanu.
800 otázek. Firma položila přesně osm set otázek virtuálním asistentům a ohodnotila je na základě toho, jak byla otázka pochopena a jestli dal virtuální asistent správnou odpověď. Otázky byly položeny do pěti rozdílných kategorií:
Testované technologie byly následující: Amazon Echo druhé generace, Google Home mini, HomePOd a Harman Kardon Invoke. Následující tabulka ukazuje výsledky porovnání. Google Home pochopil a rozpoznal veškeré žádosti a byl schopen správně odpovědět na osmdesát osm procent z nich, zatímco Cortana byla schopna zodpovědět pouze šedesát tři procent z nich správně.
Google porazil Amazon v komerční kategorii. Všichni virtuální asistenti se zlepšili v porovnání s výsledky z minulých testů, které byly provedeny společností Loup. Firma sdělila, že „Alexa měla daleko nejvyšší zlepšení.“. Co se týče specifických oblastí, Cortana si vedla nejlépe v informační kategorii spolu s Alexou, kde se skoro vyrovnali skóre Google. Siri se nejlépe dařilo v Místní a navigační kategorii, ale také se ji velmi dobře vedlo v kategorii Příkazů / rozkazů. Google porazil všechny své rivaly a konkurenty v komerční sekci, kde byla překvapivě Alexa tím nejhorším, byť je napojena na Amazon.