دليل

الاختبار الموازي: كيف تختبرون وكيل ذكاء اصطناعي على رسائل فعلية قبل الإطلاق

كيف يعمل الاختبار الموازي: يرد وكلاء الذكاء الاصطناعي على رسائلكم الفعلية دون أن يرى العملاء شيئًا، فتقرؤون كل رد وتعدّلون القواعد بكلمات بسيطة.

كل صاحب عمل يفكر في وكيل ذكاء اصطناعي يطرح السؤال نفسه، وهو السؤال الصحيح: ماذا لو كتب شيئًا سخيفًا لأحد عملائي؟ لا نتحدث هنا عن احتمال نظري، ولا عن مختبِر، بل عن عميل يتعامل معكم منذ سنوات ويقرأ الآن ردًا يتضمن سعرًا خاطئًا.

ثمة طريقة للإجابة عن هذا السؤال دون المجازفة بمحادثة واحدة. إنها الاختبار الموازي، أو وضع الاختبار: يعمل الوكيل على رسائلكم الواردة الفعلية، لكن الردود تصل إليكم بدلًا من العميل. يشرح هذا المقال كيف يُجرى هذا الاختبار، وما الذي ينبغي التركيز عليه في التقرير الناتج عنه، وكيف تصلحون ما لا يعجبكم.

ما هو الاختبار الموازي

الاختبار الموازي فترة يكون فيها الوكيل متصلًا بالكامل ويعمل بكامل طاقته، لكنه صامت تجاه الخارج. تصل الرسائل الفعلية من قنواتكم، فيقرؤها الوكيل، ويرجع إلى بياناتكم، ويكتب الرد الذي كان سيرسله، ثم يتوقف عند هذا الحد. ويُحفظ الرد لتطّلعوا عليه. أما العميل فلا يتلقى شيئًا من الوكيل، ويواصل التواصل مع فريقكم تمامًا كما كان من قبل.

وهذا ما يميّزه عن أمرين يُخلط بينه وبينهما عادةً. فالعرض التوضيحي يقدّم لكم حوارًا أعدّه المورّد مسبقًا، وبيئة التجربة تتيح لكم كتابة أسئلة اختبارية بأنفسكم. أما الاختبار الموازي فيعتمد على الأسئلة التي يطرحها عملاؤكم فعلًا، وبالكلمات التي يستخدمونها، بما فيها الرسائل المربكة في الواحدة بعد منتصف الليل حين تجتمع ثلاثة أسئلة في سطر واحد.

لماذا يثبت العرض التوضيحي أقل مما تظنون

تتعثر العروض المعدّة مسبقًا في النقطة نفسها مهما كان القطاع: فالعملاء الحقيقيون لا يطرحون أسئلتهم بالطريقة التي يتوقعها النص. يسألون عن سعر منتج غير موجود في القائمة، ويغيّرون رأيهم في منتصف المحادثة، ويكتبون بلغة لم يحسب لها أحد حسابًا، ويطلبون خصمًا لأنهم تعاملوا معكم في العام الماضي.

هذه الحالات هي التي تحدد ما إذا كان وكيل الذكاء الاصطناعي مفيدًا لأعمالكم، ولا يظهر أيٌّ منها في العرض التوضيحي. إنها تظهر في صندوق رسائلكم أنتم، ولهذا يجب أن يجري الاختبار هناك.

ثلاث خطوات: التثبيت، ثم وضع الاختبار، ثم الإطلاق

لدى SVI يبدأ كل فريق من الوكلاء العمل عبر الخطوات الثلاث نفسها، وبهذا الترتيب:

  1. التثبيت. نضيف القسم إلى حسابكم ونربط قنواتكم: محادثة الموقع، وتطبيق Telegram، وتطبيق WhatsApp، ومنصة Instagram، والبريد الإلكتروني. هذه الخطوة على حسابنا.
  2. وضع الاختبار، أي الاختبار الموازي. يردّ الوكلاء على رسائلكم الفعلية دون أن يرى عملاؤكم الردود، بينما ترون أنتم كل ردّ منها مع تقرير. وهذه الخطوة أيضًا على حسابنا.
  3. الإطلاق. حين تبدو الردود مطابقة لما كنتم ستجيبون به، تفعّلون الوكلاء فيبدأون التحدث مع العملاء. ولا يبدأ الدفع إلا عند هذه المرحلة.

لهذا الترتيب أهمية تفوق ما يبدو. فبما أن الدفع يبدأ عند الإطلاق، لا حاجة إلى الجدل حول جودة الوكيل نظريًا: تطّلعون أولًا على أدائه في محادثاتكم أنتم، ثم تتخذون قراركم. وتنطبق الخطوات الثلاث نفسها على قسم جاهز وعلى قسمكم الخاص الذي تشكّلونه بأنفسكم.

ما الذي ينبغي قراءته في تقرير الاختبار

قيمة الاختبار تتوقف على ما تتحققون منه فيه. يمكنكم قراءة كل ردّ في الأيام الأولى، لكن ذلك يفقد جدواه بعدها؛ والأفضل أن تقرأوا وفي أذهانكم بضعة أسئلة محددة.

  • المعلومات. اختاروا الردود التي تتضمن سعرًا أو تاريخًا أو عنوانًا أو شرطًا، وقارنوها ببياناتكم. فهنا يظهر ضعف الإعداد أسرع من أي مكان آخر.
  • التحويل إلى موظف. انظروا أين قرر الوكيل تحويل المحادثة إلى موظف. ندرة التحويل مخاطرة، وكثرته المفرطة تعني أنه يفتقر إلى بيانات كان ينبغي أن تكون لديه.
  • حالات الاعتذار عن الإجابة. ابحثوا عن المواضع التي قال فيها الوكيل إنه لا يعرف. كل موضع منها ثغرة فيما زوّدتموه به، وسدّها في الغالب سهل وقليل التكلفة.
  • الأسلوب. اقرأوا ثلاثة ردود أو أربعة بصوت مسموع. هل تشبه أسلوب أعمالكم، أم تبدو كأنها صادرة عن مركز اتصال في بلد آخر؟
  • الطلبات التي جمعها. يجب أن يصل الحجز أو الطلب مكتملًا: ماذا، ومتى، ومن، وكيف يمكن التواصل معه. فالطلب الناقص يضيف عملًا إلى فريقكم بدلًا من أن يخففه عنه.
  • الحالات الصعبة. الشكاوى، وحجوزات المجموعات، والطلبات غير المعتادة، ومن يطلب التحدث إلى المدير. في هذه الحالات تريدون أن تروا الوكيل يتنحّى جانبًا، لا أن يرتجل.

ما لن تجدوه في التقرير هو تقييم بالدرجات. فالاختبار لا يقرر عنكم ما إذا كان عليكم الإطلاق؛ إنه يُطلعكم على ما كان سيُقال، ويبقى القرار بأيديكم.

ما الذي يمكن تغييره، وكيف

أكثر ما يفاجئ أصحاب الأعمال أن تصحيح ردّ لم يعجبهم ليس مهمة برمجية. تصفون التغيير بكلمات بسيطة، كما توجّهون موظفًا جديدًا، فتتغير القاعدة. لا شيفرة، ولا طلب دعم فني، ولا إصدار جديد.

  • إجابة خاطئة. زوّدوا الوكيل بالبيانات الناقصة: قائمة الأسعار الصحيحة، أو مواعيد العمل الفعلية، أو الشرط الذي لم يكن يعرفه.
  • ردّ تجاوز الحدود. حدّدوا الخط الذي لا يُتجاوز: لا وعد بموعد دون تأكيد، ولا حديث عن عملاء آخرين، ولا موافقة على أي خصم.
  • تصعيد أكثر من اللازم أو أقل منه. سمّوا الحالات التي يجب أن يطّلع عليها موظف، ودعوا الوكيل يتولى إنهاء البقية.
  • أسلوب لا يشبهكم. صِفوا الطريقة التي تريدون أن تخاطبوا بها عملاءكم: أقصر، أو أكثر دفئًا، أو أكثر رسمية، مع التحية التي تستخدمونها دائمًا.

بعد ذلك تراجعون رسائل الأيام التالية لتتأكدوا من أن التغيير قد ثبت. ومن الطبيعي أن يتكرر ذلك عدة مرات، فهذه الجولات هي ما يحوّل مساعدًا عامًا إلى وكيل يعمل بطريقتكم. ويمكنكم أيضًا ضبط القواعد لكل دور على حدة في قسمكم الخاص، حيث يشكّل Mai فريقًا من أدوار جاهزة، يأتي كل منها بقواعد جاهزة تعدّلونها بدلًا من كتابتها من الصفر.

الحدود الثابتة مهما كانت إعداداتكم

بعض الأمور ليست إعدادات قابلة للتعديل، وهذا مقصود. في كل قسم من أقسام SVI يجيب الوكلاء من بيانات النشاط التجاري نفسه فقط، ولا يختلقون أسعارًا ولا مواعيد متاحة. لا يمنحون أي خصم لم يوافق عليه المالك، ولا يكشفون بيانات عميل لعميل آخر. ويبقى الحجز طلبًا إلى أن يؤكده موظف. وحين يتردد الوكيل، يسأل أو يحوّل المحادثة إلى موظف مع ملخص قصير.

وثمة حدّ آخر يستحق أن نذكره صراحة، لأنه يتكرر في تقارير الاختبار: لا يتظاهر الوكيل بأنه إنسان، ولا ينكر أنه مساعد بالذكاء الاصطناعي إذا سأله العميل. يمكنه أن يكون طبيعيًا تمامًا وصادقًا في الوقت نفسه بشأن حقيقته، ومعظم العملاء يهتمون بذلك أقل بكثير مما يخشاه أصحاب الأعمال.

ما تحتاجونه لبدء الاختبار

أقل مما يتطلبه أي مشروع برمجي. تكفي قناة واحدة للبداية، مثل رسائل Instagram Direct. وسيناريو واحد، وهو الذي يستهلك معظم وقت فريقكم. ثم 30 إلى 50 محادثة حقيقية لمقارنة الردود بها، وهي متوفرة لدى كل نشاط تجاري تقريبًا في سجل محادثاته.

ومن المفيد أيضًا أن تسجلوا مؤشراتكم الحالية لمدة أسبوع قبل الإطلاق، دون تغيير أي شيء: سرعة ردكم الآن، وعدد الرسائل التي تصل خارج ساعات العمل، وعدد المحادثات التي تنتهي دون أن يرد أحد. فبدون هذه الأرقام، تتحول المقارنة بعد الإطلاق إلى جدل حول الانطباعات. وتعرض صفحة موظف استقبال بالذكاء الاصطناعي شكل هذه المجموعة الأولية لمنتجع صحي أو صالون أو فندق أو عيادة.

تحدثوا مع وكيل خاض هذه التجربة بالفعل

وإن كنتم تفضّلون رؤية النتيجة على القراءة عن المنهجية، فإن منتجع Andaman Lotus Spa شركة تجريبية افتراضية يقف خلفها وكيل حقيقي يعمل فعلًا. اسألوه عن سعر، واحجزوا جلسة عناية مساء السبت، ثم غيّروا رأيكم، وبدّلوا اللغة في منتصف المحادثة، وحاولوا دفعه إلى وعد لا ينبغي له أن يقطعه. هذا تحديدًا ما يقوم به الاختبار الموازي نيابةً عنكم، على نطاق واسع، ومع عملائكم أنتم.

كيف تبدأون

افتحوا قسمكم الخاص لتروا الأدوار التي يحتاجها فريقكم وتضعوا قواعدها بكلماتكم، أو ابدأوا مع محادثة مع Mai: صِفوا لها أعمالكم، وستتولى إعداد القسم وتشغيل وضع الاختبار معكم. الإعداد والاختبار على حسابنا، لذا فأول ما ستقيّمونه هو عمل الوكيل على رسائلكم أنتم.

شاهدوا النتيجة على أعمالكم

اشتروا الوصول وأخبروا Mai عن أعمالكم. ستُعدّ الفريق وتختبره على رسائلكم الفعلية قبل أن يصل أي شيء إلى عملائكم.

اقرأوا أيضًا