מדידת הצלחת AI במוקד: KPIs שחשוב לעקוב אחריהם
מדידת הצלחת AI במוקד: KPIs שחשוב לעקוב אחריהם
ארגונים רבים מפריסים סוכן AI, מסתכלים על כמה שיחות טופלו, ומכריזים על הצלחה. אבל נפח שיחות הוא מדד שטחי — הוא לא אומר לכם אם הלקוח קיבל פתרון, אם הוא חזר לשיחה נוספת, או אם הנציג האנושי נאלץ להשלים את העבודה.
בלי מדידה נכונה, אתם משלמים על AI שלא מייצר ערך.
המדדים שאסור לוותר עליהם
1. אחוז פתרון מלא (Containment Rate)
המדד החשוב ביותר: כמה שיחות ה-AI פתר מתחילתן ועד סופן, בלי העברה לנציג אנושי. מדד זה הוא ההבדל בין AI שחוסך עלות לבין AI שרק נראה חכם.
יעד סביר לאחר 90 יום הפריסה: 60% עד 70% על תעבורה אמיתית (לא על שאלות נבחרות מראש).
2. שביעות רצון לקוחות (CSAT)
מדדו את שביעות הרצון משיחות שה-AI טיפל בהן בלבד, והשוו לשיחות שנציג אנושי טיפל בהן. אם CSAT של ה-AI נמוך משמעותית, הלקוחות מקבלים פתרון אבל לא חוויה טובה.
3. שיעור חזרה (Repeat Call Rate)
לקוח שהתקשר, קיבל תשובה מה-AI, וחזר תוך 7 ימים — כנראה לא קיבל פתרון אמיתי. שיעור חזרה גבוה הוא האינדיקציה החזקה ביותר לכך שה-AI סוגר שיחות אבל לא סוגר בעיות.
4. זמן טיפול ממוצע (AHT) — בזהירות
זמן טיפול קצר יותר נשמע טוב, אבל אם הוא יורד יחד עם ירידה ב-CSAT, ה-AI ממהר לסגור שיחות על חשבון איכות. מדדו את AHT יחד עם אחוז הפתרון, לא בנפרד.
5. עלות לשיחה שנפתרה
המדד העסקי הסופי: כמה עולה שיחה שבאמת נפתרה על ידי ה-AI, לעומת שיחה שנפתרה על ידי נציג. זה המספר שמצדיק את ההשקעה.
מלכודות נפוצות
- מדידה רק על שיחות פשוטות — אם מדדים רק שאלות נוסחתיות, מקבלים מספרים יפים שלא משקפים את המציאות.
- התעלמות משיחות שהועברו — שיחה שה-AI התחיל והעביר לנציג לא נחשבת "נפתרה", גם אם הנציג סגר אותה מהר.
- מדידה חד-פעמית — פריסת AI היא תהליך מתמשך. מדדו כל שבוע, לא רק בסוף פיילוט.
איך מתחילים
- הגדירו בסיס (baseline) לפני הפריסה — מהם המדדים הנוכחיים עם נציגים אנושיים בלבד.
- הפריסו בהדרגה — התחילו עם 20% מהתעבורה, מדדו, שפרו, ואז הרחיבו.
- השוו לבסיס ליין, לא ליעד תיאורטי.
לסיכום
AI במוקד הוא השקעה, וכל השקעה צריכה מדידה. אחוז פתרון, שביעות רצון, שיעור חזרה ועלות לשיחה שנפתרה — אלה המספרים שיגידו לכם אם ה-AI באמת עובד בשבילכם.