Artificial intelligence

סירי קיבלה בקושי עובר במבחן ה-IQ שׁבנינו. וכמה קיבל ה-Google assitant?

המירוץ אחר העוזר האישי המושלם כבר החל מזמן. Apple פיתחה את Siri, אמאזון הכניסה את Alexa למיליוני בתי אב בארה״ב, ל-Microsoft יש את Cortana ו-Google הכניסה לפיקסלים החדשים שלה את ה-Google assistant. הגיע הזמן להעמיד את כל העוזרים האלה למבחן, ומה יותר מתאים מזה מאשר מבחן IQ?

בנינו מבחן IQ שמבוסס על 20 שאלות שבוחנות את יכולת האינטיליגנציה המלאכותית לשרת את צרכינו במגוון תחומים. על מנת לבצע מבחן הוגן, יש לבצע אותו על הפלטפורמה שלאינטיליגנציה המלאכותית הכי נוח. למשל, את ה-Google assitsnt צריך לבדוק על מכשיר Pixel, את Siri על iPhone וכו׳. בהצלחה לכל המתמודדים והמתמודדות 🙂

מתחילים (כדי לבצע את המבחן כל מה שצריך לעשות זה להקריא לעוזרת האישית את השאלות) 

והרי התוצאות:

Alexa: לא העיפרון הכי חד בקלמר – 45 

אלקסה אלקסה. כמה רעש את עושה ולכמה פקודות את יכולה באמת לציית? אלקסה קיבלה ציון נמוך של 45 במבחן שלנו ולא היתה מסוגלת לזכור דברים או לענות על שאלות יחסית פשוטות. יאמר לזכותה, שכאשר היא לא ידעה, היא לא סתם שלחה אותנו להקשיב לתוצאות חיפוש, אלא פשוט אמרה לנו שהיא לא יודעת. אפלטון, אגב, אמר שהידע הכי חשוב שיש לו זה שהוא יודע שאינו יודע.

Siri: את סבבה והכל. קיבלה 58

סירי קיבלה ציון עובר במבחן שלנו, והיא בדיוק בגבול בין ״Just okay״ ל-"Smart". היא מצטיינת בכל מה שקשור לשאלות השוואה, אבל כשהיא לא יודעת דברים היא מיד שולחת אותנו לחברה הטוב, מנוע החיפוש BING. קונטקסט הוא קצת בעייתי לסירי, והיא נפלה בפח כאשר טמנו לה שאלות שלוקחות בחשבון את התשובה הקודמת (למשל השאלות על הגובה של אישתו של דונלד טראמפ). ועוד משהו: סירי בקושי יודעת לזכור. את בן הזוג שלכם היא אולי יכולה, אבל את הקוד לאופניים שלכם היא לא תוכל לזכור. ואל תנסו לבקש ממנה לשכוח משהו שאמרתם לה, את זה כבר תצטרכו לעשות ידנית. בקיצור, למרות שאפל היתה הראשונה להתחיל, יש יריבה אחת שכבר עוקפת אותה בסיבוב. ואם העתיד הוא ב-AI, אפל בהחלט צריכה לשים גז.

ב-13 בספטמבר 2017 נערכה בדיקה חוזרת של סירי עם iOS11 והציון שלה עלה מ-50 ל-58. נוספו לה יכולות תרגום חדשות!

Google assitant: החכמה של הכיתה. קיבלה 65 

גוגל מובילה, לפחות במבחן שלנו. יש לה יכולת מצויינת לזכור וגם לשכוח, והיא תמיד תהיה שם כדי לספר סיפור מעניין או עובדה. היא מבינה קונטקסט די טוב, למרות שיש מקום רב לשיפור. אגב, זו גם הפלטפורמה היחידה ממה שבחנו שמבקשת פידבק במקרה שמשהו לא טוב. לסירי למשל, לא ממש אכפת אם אנחנו כועסים עליה שהיא לא עובדת. עוד פיצ׳ר ממש יעיל בגוגל אסיסטנט הוא השילוב עם יכולות Google translate ואנחנו רואים את הפוטנציאל להתרחבות של היכולת הזו בעתיד על שירותים נוספים של גוגל כמו waze שעדיין לא באה לידי ביטוי בעוזרת האישית.

עם זאת, ל-Google assitant עדיין יש הרבה מה ללמד, לפני שהיא תצליח למצות את כמות הדאטה העצומה שיש לגוגל. יש הרבה דברים שגוגל כן יודעת למצוא אבל Google assitant לא יודעת, וזה היה ניכר בשאלות ההשוואה: למשל כשביקשנו ממנה להשוות בין אוכלוסיית יפן לארה״ב היא נכשלה. או כששאלנו אותה כמה קלוריות יש בעוגת תפוחים ושני תפוזים. אני מניח שזה ישתפר בהמשך, במיוחד אם בגוגל יחליטו לקחת את האלגוריתם של האסיסטנט למיצוי הרבה יותר מקיף של יכולות החיפוש הקיימות.

קורטנה (בבדיקה) 

 

אלקסה (בבדיקה) 

להצטרפות לניוזלטר שלנו

 

Leave a Reply

Your email address will not be published. Required fields are marked *