לסירי אין את כל התשובות, אך העוזרת הדיגיטלית של אפל ממשיכה להתחכם.
Loup Ventures יורה 800 שאלות לעוזרי הדיגיטל המובילים לצורך מבחן ה- IQ שלה פעמיים בשנה כדי למדוד את השימוש המעשי בקול כאמצעי לחישוב קלט בסמארטפונים. כולם משתפרים, אבל לא באותו קצב.
Google Assistant ממשיך להתעלות על שלושת הגדולים. הוא הבין כל שאלה וענה נכון על 92.9 אחוזים. סירי לקעה בשתי שאלות בהבנה מושלמת וענתה נכון על 83.1 אחוזים. אלקסה עשתה את השיפור הדרמטי ביותר. הוא הבין 799 מהשאלות וענה על 79.8 אחוזים.
Cortana ירדה מהתחרות מכיוון שמיקרוסופט הסתובבה שילוב העוזרת הדיגיטלית עם מערכות ההפעלה של המתחרות שלה לשעבר.
בדיקת IQ נמדדת "בתוך ההיגיון"
"כשהציונים במבחן שלנו מתקרבים במהירות ל -100 אחוזים, אולי נראה שעוזרים דיגיטליים יוכלו לענות בקרוב על כל שאלה שתשאל אותם, אך אנו מזהירים שזה לא המקרה" לופ ונצ'רס"ג'ין מונסטר וויל תומפסון כתבו. "כיום הם מסוגלים להבין, בתוך ההיגיון, את כל מה שאתה אומר להם, ומקרי השימוש העיקריים בנויים היטב, אך הם אינם אינטליגנטים באופן כללי."
המבחן מדורג עוזרים דיגיטליים בחמש קטגוריות של שאלות: מקומי, מסחר, ניווט, מידע ופיקוד.
מבחן Siri IQ: הרוויח קצת, הפסיד קצת
תרשים: Loup Ventures
סירי העמידה את מתחרותיה בשאלות פיקוד, והגמישה את שריריה בקריאות, הודעות טקסט, מיילים, בקשות לוח שנה ומוסיקה. למעשה, סירי תמיד נמצאת בראש הקטגוריה הזו. הפעם, סירי ענתה נכון 93 אחוז מהמקרים, ל- 86 אחוזים של גוגל ואלכסס של 69 אחוזים.
כפי שמראה תרשים Loup Ventures, Google Assistant עמד בראש ארבע הקטגוריות האחרות, אפילו המסחר (92 אחוז), קטגוריה שאמורה להיות בבעלות Alexa של אמזון (71 אחוז).
נראה כי משתמשי סמארטפון שמשתמשים בשגרה בעוזרים דיגיטליים משתמשים בקול כדי לרכוש פריטים במחירים נמוכים יותר. Google Assistant השיג ציונים טובים יותר מאלקסה כשענה על שאלות מסחר מבוססות מחקר, כגון מפרט מוצר ומיקומים לרכישה.
מכיוון שמדובר בתחרות, אלכסה תזכה בפרס השחקן המשופר ביותר. אחוז התשובות הנכונות שלה עלה ב -18 נקודות, לעומת שבע של גוגל וחמש של סירי.
Loup Ventures עושה בדיקה נפרדת לעוזרי הקול ברמקולים חכמים בגלל וריאציות במוצרים וביישומים.