لماذا الذكاء الاصطناعي بدون مؤشرات الأداء الرئيسية يصبح لعبة باهظة الثمن

الذكاء الاصطناعي بدون مؤشرات الأداء الرئيسية (KPIs) يتحول إلى لعبة باهظة الثمن، لأن لا أحد يستطيع إثبات ما إذا كان قد حسّن الأعمال، أو نقل العمل إلى مكان آخر، أو فقط زاد من النشاط. علينا تحديد النتيجة المرجوة، وخط الأساس، وضوابط الجودة، والتكلفة الكاملة، ونقاط اتخاذ القرار قبل بدء التشغيل، ثم نقيس سير العمل بالكامل وليس النموذج فقط.

لماذا لا تعكس أنشطة الذكاء الاصطناعي أداء الأعمال؟

غالبًا ما تبلغ الفرق عن عدد الأوامر المقدمة، أو الملخصات المنتجة، أو المحادثات التي تم التعامل معها، أو الساعات التي ربما تم توفيرها. هذه الأرقام تصف استخدام النظام، لكنها لا تثبت أن العملاء حصلوا على خدمة أفضل، أو أن المبيعات تقدمت بشكل أسرع، أو أن الموظفين أنجزوا عملاً أكثر قيمة، أو أن التكاليف انخفضت.

عادةً ما يبدأ خطأ القياس بنطاق غير واضح. "تحسين دعم العملاء باستخدام الذكاء الاصطناعي" ليس له حدود عملية ثابتة. أما "تصنيف رسائل الدعم الواردة، واسترجاع الإجابة المعتمدة، وتحويل الاستثناءات إلى وكيل" فيمكن مراقبته من الاستلام حتى الحل.

كل تنفيذ يحتاج إلى سلسلة سببية:

1. النظام يغير خطوة محددة.
2. هذه الخطوة تغير نتيجة تشغيلية.
3. النتيجة التشغيلية تساهم في نتيجة اقتصادية.
4. الجودة والمخاطر تبقى ضمن الحدود المتفق عليها.

إذا فقدنا أي حلقة من هذه السلسلة، قد تقوم الإدارة بتحسين المؤشر الظاهر بينما تضر النتيجة الحقيقية. قد يساعد مساعد الصياغة في إنشاء الردود بسرعة أكبر، لكنه يزيد من عبء المراجعة. قد يرسل نظام تصنيف العملاء المحتملين المزيد من السجلات إلى فريق المبيعات، لكنه يقلل من جودة العملاء. قد يرد موظف الاستقبال فورًا، لكنه يحجز اجتماعات غير مناسبة.

ما هي المؤشرات التي يجب أن تُقاس معًا؟

اختاروا مجموعة صغيرة من هذه الطبقات. مؤشر رئيسي واحد للنتيجة، مدعوم بمؤشرات تشخيصية وضوابط جودة، أكثر فائدة من لوحة بيانات كبيرة بلا قرار واضح.

أفادت Eurostat أن 19.95% من شركات الاتحاد الأوروبي استخدمت تقنية ذكاء اصطناعي واحدة على الأقل، بما في ذلك 17% من الشركات الصغيرة و30.36% من الشركات المتوسطة. لذلك، فإن مجرد الاعتماد لا يميز التنفيذ الجيد. القدرة على إثبات القيمة وتكرارها هي الفارق الحقيقي.

ضعوا عقد القياس أولاً

عقد القياس هو اتفاق قصير بين الراعي التنفيذي، ومالك العملية، والمالية، والمالك التقني. يحدد ما الذي سيتغير، وكيفية حساب الأداء، ومن أين تأتي البيانات، وما هي القرارات التي ستتبع النتائج.

يجب أن يتضمن:

• حدود سير العمل، والمحفز، وحالة النهاية.
• مالك محدد للنتيجة التجارية.
• فترة الأساس والاستثناءات.
• المؤشر الرئيسي للنتيجة.
• مؤشرات داعمة للتدفق والجودة.
• ضوابط مخاطر لا يمكن التنازل عنها.
• تعريف التكلفة الكاملة.
• مصدر البيانات ومالك الحساب لكل مؤشر.
• وتيرة المراجعة وتواريخ اتخاذ القرار.
• حدود للتوسع أو التصحيح أو الإيقاف.

يجب أن يستخدم خط الأساس نفس التعريف المستخدم في المقارنة اللاحقة. إذا كان وقت الاستجابة يبدأ في البداية عند فتح الشخص للبريد الإلكتروني، لكن القياس في الإنتاج يبدأ عند وصول البريد، فإن المكسب الظاهر غير حقيقي. وثقوا الطابع الزمني، والفئة السكانية، والاستثناءات، ومعالجة البيانات المفقودة.

لا تطلبوا من مزود الذكاء الاصطناعي أن يكون المصدر الوحيد للإثبات. سجلات المورد يمكن أن تثبت عدد المكالمات، والزمن، واستخدام الرموز. يجب أن تأتي نتائج الأعمال من أنظمة السجلات مثل الـCRM، أو الـERP، أو منصة الاتصالات، أو نظام الدعم الفني.

كيف تعرفون ما إذا كانت مؤشرات الأداء الحالية قابلة للاستخدام؟

• هناك شخص محدد مسؤول عن كل مؤشر.
• يمكن لشخص ما إعادة حساب المؤشر من السجلات الأصلية.
• الفريق متفق على ما يدخل ويخرج من الفئة السكانية.
• خط الأساس يعكس العمل الطبيعي، بما في ذلك الاستثناءات.
• يمكن التحقق من الجودة بعد الإطلاق.
• التكاليف تشمل المراجعة، والتصحيح، والدعم.
• عدم تحقيق الهدف يؤدي إلى قرار محدد.
• لا يمكن تحسين المؤشر فقط بنقل العمل إلى طابور آخر.

إذا غابت هذه الشروط، أصلحوا القياس قبل توسيع التنفيذ. غالبًا ما يكون التقاط الأحداث المخصصة، وتكامل الأنظمة، وتسجيل الاستثناءات أجزاء ضرورية من البناء.

اختاروا مؤشرات الأداء لسير العمل، وليس للذكاء الاصطناعي

ابدأوا من السؤال التجاري. بالنسبة لاستقبال المبيعات، قد يكون السؤال هو ما إذا كانت الاستفسارات المناسبة تتحول إلى اجتماعات فعلية. بالنسبة للحسابات الدائنة، قد يكون ما إذا كانت الفواتير الصحيحة تصل إلى الموافقة دون معالجة يدوية غير ضرورية. بالنسبة للخدمة، قد يكون ما إذا كان العميل يحصل على حل صحيح ضمن الإطار الزمني الموعود.

ثم عرفوا المؤشر بدقة:

• الفئة السكانية: ما هي الحالات التي تُحتسب.
• البسط والمقام: ما الذي يشكل النجاح وما هو العدد الإجمالي المؤهل.
• الساعة: متى يبدأ التوقيت، ومتى يتوقف، ومتى ينتهي.
• المصدر: ما هو السجل المعتمد.
• المالك: من يحل النزاعات وعيوب البيانات.
• التقسيم: ما هي القنوات أو خطوط الخدمة أو فئات المخاطر التي تحتاج إلى عرض منفصل.

القيم المتوسطة قد تخفي إخفاقات مهمة. قوموا بإقرانها بالتوزيعات أو نطاقات الخدمة حيثما أمكن ذلك. قوموا بتقسيم العمل الروتيني عن الاستثناءات المعقدة، لأن الأتمتة قد تحسن أحدهما بينما تضر الآخر.

الجودة تحتاج إلى تعريفات تشغيلية أيضًا. "دقيق" لا يكفي. قد يتطلب مستخرج المستندات أن تتطابق الحقول المطلوبة مع المصدر، وأن تمر المجاميع بالتحقق الحتمي. قد يُعتبر البريد الإلكتروني المسودة مقبولًا عندما يرسله مستخدم مخول دون تصحيح جوهري. قد يكون وكيل التأهيل صحيحًا عندما يؤكد فريق المبيعات الملاءمة باستخدام نفس المعايير.

ما الذي يجب أن يُحتسب كتكلفة؟

اشملوا تراخيص البرمجيات، واستخدام النماذج، واستضافة التكامل، والتنفيذ، والعمل على البيانات، والتقييم، والمراقبة، ومراجعة الموظفين، والتعامل مع الاستثناءات، والتدريب، والدعم، وإدارة التغيير. افصلوا تكاليف البناء لمرة واحدة عن التكاليف التشغيلية المتكررة، لكن اعرضوا كلتيهما عند اتخاذ قرار بشأن جدوى الاستثمار.

استخدموا التكلفة لكل نتيجة مقبولة، وليس التكلفة لكل ناتج مُنتج. عشرة مسودات رخيصة تتطلب تصحيحًا مكثفًا قد تكلف أكثر من عدد أقل من المسودات ذات مصادر موثوقة.

حاسبة العائد على الاستثمار يمكن أن تساعد في هيكلة دراسة جدوى أولية، لكن يجب استبدال الافتراضات لاحقًا بأدلة تشغيلية فعلية. يجب أن توافق المالية على طريقة الحساب قبل معرفة النتائج.

نسبوا التغيير دون ادعاء اليقين

النسبة المثالية للتغيير نادرة في الشركات التشغيلية. قد تتغير الأسعار، والموسمية، وتغيرات الموظفين، ومزيج الحملات، وطلب العملاء في نفس الوقت. الهدف هو تصميم موثوق يقلل من التفسيرات البديلة.

تشمل الأساليب المتاحة:

• الطرح المرحلي: إدخال سير العمل إلى فرق أو مناطق أو طوابير متشابهة في أوقات مختلفة.
• المقارنة المتوازية: توجيه الحالات المناسبة عبر المسارات الحالية والجديدة في ظروف مضبوطة.
• قبل وبعد: مقارنة فترات متكافئة مع توثيق التغييرات الرئيسية.
• الحالات المتطابقة: مقارنة العمل مع قنوات أو تعقيد أو نوع عميل متشابه.
• دليل العملية: فحص الطوابع الزمنية وسجلات الأحداث لتأكيد مكان حدوث التغيير.

يجب أن تتناسب الطريقة مع المخاطر التشغيلية. لا تحجبوا ضابط أمان ضروري فقط من أجل التجربة. حيث تكون مجموعة التحكم غير مناسبة، اجمعوا بين أدلة قبل وبعد وسجلات العمليات والمراجعات العشوائية وملاحظة المستخدم.

فكروا في وكالة توضيحية تتعامل مع الاستفسارات الواردة. تقوم بتركيب تصنيف ومساعد للمتابعة. خلال فترة الأساس، يسجل المالك الوصول، وأول استجابة ذات معنى، وقرار التأهيل، والاجتماع المحجوز، والحضور، وأعمال التصحيح. أثناء الإطلاق، تنتقل بعض مصادر الاستفسارات أولاً بينما يحتفظ الآخرون بالإجراء الحالي. تجرى المراجعة بمقارنة الحالات المتشابهة، وتتحقق مما إذا كانت الردود الأسرع أدت إلى اجتماعات مناسبة فعلاً وليس فقط زيادة في عدد الاجتماعات.

هذا التصميم يكشف عن التحويل. إذا وفّر فريق المبيعات وقتًا لكن فريق العمليات استغرق وقتًا أطول في تصحيح التحويلات غير المؤهلة، ستظهر النتيجة النهائية ذلك.

ما هي أنماط الفشل التي تفسد القياس؟

• تغيير التعاريف بعد رؤية النتائج.
• الإبلاغ فقط عن الحالات المؤتمتة الناجحة.
• استبعاد التصعيدات من التكلفة.
• اعتبار الوقت المقدر الموفر كأنه مال موفر.
• استخدام حجم الناتج كمؤشر للنتيجة.
• مقارنة فترات غير متشابهة دون تفسير.
• السماح للموردين باختيار عينة التقييم.
• تجاهل التبني، والحلول البديلة، والعمليات الظلية.
• احتساب المتوسط عبر مهام ذات مخاطر مختلفة تمامًا.

القياس جزء من بنية النظام. يجب التقاط الأحداث والإصدارات والتصحيحات البشرية أثناء حدوث العمل. محاولة إضافتها بعد مراجعة مخيبة غالبًا ما تكون بطيئة وغير مكتملة.

تنفيذ دورة مراجعة تؤدي إلى اتخاذ قرارات

الفرق التشغيلية تحتاج إلى مراجعة استثنائية متكررة بعد الإطلاق. الإدارة تحتاج إلى وتيرة قرارات مستقرة. التكرار الدقيق يعتمد على حجم العمل ومستوى التعرض، لكن كل اجتماع يجب أن يجيب على نفس الأسئلة:

1. هل النتيجة التجارية تتحرك في الاتجاه المقصود؟
2. هل الجودة والمخاطر ضمن الحدود؟
3. أين يتم إنشاء العمل أو نقله أو إخفاؤه؟
4. ما هي الإخفاقات الناتجة عن البيانات أو العمليات أو النماذج أو التبني؟
5. ما هو التغيير الذي سيتم اختباره بعد ذلك؟
6. هل يجب توسيع النطاق أو إبقاؤه تحت السيطرة أو تصحيحه أو إيقافه؟

حدد مالكي الإجراءات والمواعيد النهائية. لوحة المعلومات بدون آلية تصحيح تجعل الفشل أكثر وضوحًا فقط.

تابع نسخ النظام والعمليات إلى جانب النتائج. أي تغيير في التعليمات أو النموذج أو المستندات المصدرية أو حقول الـCRM أو سياسة الموافقة يمكن أن يغير الأداء. بدون سجل للإصدارات، لا يمكن للفريق شرح سبب تغير النتائج أو استعادة تكوين معروف.

تتوقع شركة Gartner أن أكثر من 40% من مشاريع الذكاء الاصطناعي الوكيلية سيتم إلغاؤها بحلول نهاية عام 2027 بسبب تصاعد التكاليف أو عدم وضوح القيمة التجارية أو ضعف ضوابط المخاطر. لذلك، فإن وجود معايير واضحة للإيقاف هو علامة على استثمار منضبط، وليس تشاؤمًا.

ما الذي يجب أن يحفز كل قرار؟

يجب أن يكون التوسيع تدريجيًا. المزيد من المستخدمين، صلاحيات أوسع وإجراءات ذاتية تزيد من ملف المخاطر. أعد النظر في الضوابط وعقد القياس عند تغيير النطاق.

تحويل ملكية مؤشرات الأداء الرئيسية إلى انضباط تشغيلي

الراعي التنفيذي يملك قرار الاستثمار، وليس لوحة المعلومات. مالك العملية يملك النتيجة والتبني. المالية تملك التعاريف الاقتصادية. المالك التقني يضمن التقاط البيانات بشكل موثوق، وتوثيق الإصدارات، وأداء النظام. مالكو الخصوصية أو الامتثال يشرفون على الضوابط ذات الصلة.

لمحفظة من المبادرات، استخدم صفحة مراجعة موحدة. يجب أن تعرض سير العمل، الحالة، المالك، الأساس، أحدث نتيجة، الجودة، التكلفة التشغيلية الكاملة، الاستثناءات الرئيسية، القرار التالي ورابط الأدلة. هذا يجعل المبادرات الضعيفة واضحة قبل أن تترسخ عقلية "تكلفة غارقة".

عندما تكون قدرة القيادة محدودة، يمكن لمشغل خارجي كبير أن يؤسس الحوكمة، ويتحدى افتراضات الموردين وينسق التنفيذ. المقارنة بين Fractional AI Officer والتوظيف بدوام كامل يمكن أن تساعد في تحديد نموذج الملكية الأنسب.

يجب أن يعرف الفريق أيضًا سبب وجود كل مقياس. إذا أصبح المقياس هدفًا بدون سياق، سيتعلم الناس تحقيق الرقم بدلًا من إرضاء العميل. اقترن المراقبة الكمية بمراجعات حالات مختارة وتعليقات من الخط الأمامي.

الدرس الأوسع في الدليل التنفيذي للذكاء الاصطناعي هو أن الذكاء الاصطناعي المفيد يوجد ضمن عملية مُدارة. القياس يجعل هذه العملية قابلة للحكم.

النقاط الرئيسية

• حدد حدود سير العمل والنتيجة التجارية قبل اختيار النموذج.
• قس النتيجة، التدفق، الجودة، الاقتصاديات والمخاطر معًا.
• استخدم أنظمة السجلات كدليل تجاري وسجلات الموردين كدليل تقني.
• سجل الإصدارات، الاستثناءات والتصحيحات البشرية من البداية.
• اتفق مسبقًا على متى يجب التوسيع أو التصحيح أو التجميد أو الإيقاف.

الأسئلة المتكررة

ما هو أهم مؤشر أداء رئيسي لمشروع ذكاء اصطناعي؟

المؤشر الرئيسي هو نتيجة سير العمل الذي يتم تغييره، مثل مستند مقبول، حالة تم حلها أو اجتماع تم حضوره بشكل مناسب. يحتاج إلى مقاييس داعمة للجودة والتكلفة والمخاطر حتى لا يتمكن الفريق من تحسين العنوان الرئيسي على حساب إحداث ضرر في مكان آخر.

هل يمكننا قياس الوقت الموفر؟

نعم، لكن راقب وقت المهمة أو الطوابع الزمنية للعملية بدلًا من الاعتماد فقط على التقديرات. ثم تحقق مما يحدث للسعة التي تم تحريرها. الوقت الموفر يتحول إلى قيمة اقتصادية فقط عندما تستطيع الشركة استيعاب المزيد من العمل أو تجنب التكاليف أو تحسين الخدمة أو إعادة توجيه الأشخاص إلى مهام ذات قيمة.

كم يجب أن تستمر فترة الأساس؟

يجب أن تكون كافية لتعكس الحجم الطبيعي، والتغيرات، والاستثناءات. لا توجد مدة عالمية. يجب على المالك أن يأخذ في الاعتبار الموسمية، الحملات، التوظيف والتراكمات غير المعتادة، ثم يوثق سبب كون المقارنة المختارة ممثلة.

ماذا لو لم تدعم بيانات الـCRM مؤشر الأداء الرئيسي؟

اعتبر ذلك متطلبًا للتنفيذ. حدد الحقول الموثوقة، والتحقق، والملكية، والتقاط الأحداث قبل تشغيل الذكاء الاصطناعي. يشرح مقارنة الـCRM المخصص مع الجاهز متى يكون التهيئة كافية ومتى يكون تطوير سير عمل مخصص مبررًا.