قياس أداء الشات بوت: المؤشرات المفيدة وثلاثة تضلل

أنفع مقاييس الروبوتات هي معدل الحل المؤكد من العميل، والتواصل المتكرر خلال ثمان وأربعين ساعة، وزمن أول رد بشري بعد التصعيد، والرضا مقسّمًا بحسب ما إذا صُعّدت المحادثة. أما المقاييس التي تتصدر أغلب اللوحات، الاحتواء والتحويل عن الطابور وإجمالي الرسائل، فيمكن أن تتحسن جميعها بينما تتدهور تجربة العميل.

ثلاثة تضلل

أربعة تصمد

الحل المؤكد يسأل العميل هل حُلّت المشكلة ويسجل الجواب. وهو القياس المباشر الوحيد، وكلفته رسالة إضافية واحدة. والتواصل المتكرر خلال ثمان وأربعين ساعة يلتقط المحادثات التي أُغلقت ولم تُحلّ، وهو أصدق رقم في الدعم الحواري. وزمن أول رد بشري بعد التصعيد يقيس التحويل، حيث تُكسب الثقة أو تُفقد. والرضا مقسّمًا بالتصعيد يخبرك إن كان حد الأتمتة في الموضع الصحيح.

الطبقة التجارية

لأي شيء متصل بالإيراد، تتبّع التحويل من المحادثة، ومتوسط قيمة الطلب من المحادثات مقابل القنوات الأخرى، وتكلفة المحادثة المحلولة شاملة رسم Meta ووقت الموظف. وتكلفة المحادثة المحلولة هي الرقم الذي يصنع دراسة الجدوى، لأنه يقارن مباشرة بكلفة معالجة الحجم نفسه هاتفيًا.

وأدرج معدل الحظر والإبلاغ في التقرير نفسه. فهو المؤشر المتقدم لمشكلة في القناة، ولأن انخفاض تصنيف الجودة يقلل عدد من يجوز مراسلتهم، فمكانه بجوار الأرقام التجارية لا مدفونًا في لوحة منصة.

اقرأ النصوص لا اللوحات فقط

خذ عينة عشرين محادثة أسبوعيًا واقرأها كاملة. كل إخفاق متكرر وجدناه في روبوت منشور كان ظاهرًا خلال عشرة نصوص وغير مرئي في المقاييس المجمّعة، لأن الروبوت الذي يخفق بأدب ينتج لوحة تبدو طبيعية. ونوّع من يقرؤها، وأدرج من لم يشارك في بنائه.

قراءة الأرقام بحسب الشريحة

الأرقام المجمّعة تخفي الإخفاقات المهمة. قسّم كل مقياس بحسب اللغة، لأن معدل نجاح عربي أدنى بكثير من الإنجليزي شائع وغير مرئي في المجموع. وقسّم بحسب موضوع المحادثة، فالروبوت الذي يتقن حالة الطلب ويخفق في الإرجاع سيبدو مقبولًا إجمالًا. وقسّم بحسب كون العميل جديدًا أو عائدًا، لأن العائدين يعرفون كيف يصوغون الأمور فيخفون مشكلات يصطدم بها الجدد فورًا.