الضوابط الوقائية: إبقاء الذكاء الاصطناعي في الإيرادات دقيقًا وخاضعًا للمساءلة

5 يناير 20267 min read

الضوابط: إبقاء الذكاء الاصطناعي في الإيرادات دقيقًا وخاضعًا للمساءلة

أسرع طريقة لفقدان ثقة مؤسسة في ذكاء الإيرادات الاصطناعي هي حادثة واحدة محرجة مع عميل. بريد إلكتروني بنبرة خاطئة أُرسل تلقائيًا. توصية واثقة مبنية على حقيقة اختلقها النموذج. تنبؤ لا يستطيع أحد تفسيره عندما يسأل مجلس الإدارة من أين جاء الرقم. كل قائد إيرادات ينشر الذكاء الاصطناعي يراهن على أن المكاسب تفوق احتمال وقوع واحدة من هذه، سواء صاغها بهذه الطريقة أم لا. الضوابط هي كيف تُميل هذا الرهان.

نرى أن الضوابط يجب أن تكون جزءًا من محادثة التصميم منذ اليوم الأول، وليس في مراجعة امتثال بعد وقوع الأمر. هذا يعني أن تكون محددًا بشأن كيف يفشل ذكاء الإيرادات الاصطناعي، وأي طبقة تحكم تلتقط كل فشل، وكيف تُخضع النظام للمساءلة بالطريقة التي تُخضع بها شخصًا للمساءلة: من خلال القدرة على رؤية ما فعله ولماذا.

ما الذي يخطئ فعلاً

لا يمكنك تصميم ضابط ضد "خطر الذكاء الاصطناعي". يمكنك تصميم ضابط ضد فشل محدد. لذكاء الإيرادات الاصطناعي حفنة من الإخفاقات المميزة.

الهلوسة هي الأوضح: يذكر النموذج شيئًا خاطئًا بثقة كاملة. قدرة منتج لا تملكها، مرجع عميل غير موجود، رقم مُختلَق. أمام مشترٍ، هذه مشكلة مصداقية وأحيانًا مشكلة قانونية.

السياق القديم أكثر دقة. يتصرف الذكاء الاصطناعي بناءً على بيانات كانت صحيحة الأسبوع الماضي. يوصي بإعادة التواصل مع نصير غادر الشركة، أو يشير إلى حالة صفقة تغيرت بعد ظهر أمس.

ثم هناك أخطاء النبرة والحكم، حيث يكون المخرج صحيحًا تقنيًا لكنه سيئ من الناحية السياقية. تنبيه مرح للبيع الإضافي لحساب قدّم تذكرة دعم حرجة هذا الصباح.

التجاوز: يفعل الذكاء الاصطناعي شيئًا يتجاوز صلاحيته. خصم، التزام، إرسال لا رجعة فيه كان يجب أن يمر عبر إنسان أولاً.

والانحراف الصامت، حيث يتدهور سلوك النموذج ببطء مع تغير الظروف ولا يلاحظ أحد ذلك حتى تكون النتائج قد تضررت بالفعل لربع سنة كامل.

لكل واحدة من هذه ضابط مطابق. الخطأ الذي نراه أكثر من غيره هو معاملة "سلامة الذكاء الاصطناعي" كإعداد واحد، بينما هي في الحقيقة خمسة أو ستة دفاعات منفصلة.

الطبقات

لا يلتقط ضابط واحد كل شيء، لذا تُكدّس الأنظمة الناضجة عدة طبقات.

التأصيل يربط مخرجات النموذج ببيانات فعلية في أنظمتك، تُسترجع حديثًا، بدلاً من أي شيء يتذكره النموذج من التدريب. هذا هو الدفاع الرئيسي ضد الهلوسة: يجيب من سجلاتك، وليس من خياله. هذا أسهل بكثير في بنية أصيلة في الذكاء الاصطناعي يمكنها رؤية بيانات مترابطة مقارنة بميزة ملصقة تعمل من سجل واحد في كل مرة.

عتبات الثقة تعني أن النظام يعرف مدى ثقته ويوجه المخرجات منخفضة الثقة إلى شخص بدلاً من التصرف. الإجراءات عالية الثقة ومنخفضة المخاطر تمر عبر النظام. أي شيء غير مؤكد أو ذو عواقب يُصعَّد.

حدود الإجراءات هي قيود صريحة على ما يمكن للذكاء الاصطناعي فعله من تلقاء نفسه. أي حقول يمكنه تغييرها، أي رسائل يمكنه إرسالها مقابل صياغتها فقط، ما لا يمكنه فعله أبدًا دون موافقة. سياسة مكتوبة كشيفرة.

نقاط التحقق البشرية تضع شخصًا أمام الإجراءات الموجهة للمشتري أو عالية المخاطر قبل تنفيذها. هذا هو نموذج الإنسان في الحلقة معاملاً كضابط بدلاً من شعار.

المراقبة والتدقيق تتبع ما يفعله الذكاء الاصطناعي وكيف تتجه النتائج بمرور الوقت، بحيث يُكتشف الانحراف مبكرًا بدلاً من نهاية الربع.

الجزء الصعب هو المعايرة. متساهل جدًا وستحصل على حوادث. صارم جدًا وكل إجراء يحتاج موافقة، ما يُفسد الغرض من أتمتة أي شيء.

المساءلة تعني إمكانية التتبع

الدقة تتعلق بمنع المخرجات السيئة. المساءلة تتعلق بالقدرة على الإجابة، بعد وقوع الأمر، عما فعله الذكاء الاصطناعي ولماذا. هذه الخاصية الثانية هي ما يجعل من الآمن تشغيله في عمل تجاري أصلاً.

المتطلب هو إمكانية التتبع. يجب أن يحمل كل إجراء وتوصية للذكاء الاصطناعي سجلاً للبيانات التي استخدمها، والمنطق الذي اتبعه، ومدى ثقته. لذا عندما يسأل مندوب عن سبب تصنيف صفقة على أنها معرضة للخطر، يُظهر النظام الإشارات. عندما يتحرك التنبؤ، يمكنك تتبع أي الصفقات وأي تغييرات في الإشارات حركته. عندما يتم فعل شيء تلقائيًا، هناك سجل لما حدث، ومتى، وعلى أي أساس، وتحت أي سياسة.

هذا المسار التدقيقي يقوم بعملين. يبني الثقة، لأن المندوبين والقادة سيمنحون استقلالية أكبر لنظام يمكنهم فحص منطقه. ويجعل النظام قابلاً للتحسين، لأنه عندما يخطئ الذكاء الاصطناعي، تخبرك إمكانية التتبع ما إذا كان الخلل في التأصيل، أو العتبات، أو الحدود، بدلاً من تركك للتخمين. نظام لا يمكنك تدقيقه هو نظام لا يمكنك إصلاحه بأمان. لهذا السبب تقع إمكانية التتبع تحت أي محرك للإجراء التالي الأفضل جاد.

الضوابط تتيح لك التحرك بشكل أسرع

من الطبيعي رؤية الضوابط كشيء يُبطئ الذكاء الاصطناعي. في الواقع هي ما يتيح لك نشره أكثر، لأنها تجعل الاستقلالية الموسعة آمنة.

مؤسسة لديها تأصيل متين، وحدود إجراءات واضحة، وتصعيد قائم على الثقة، ومسار تدقيقي كامل يمكنها إسناد المزيد من العمل للذكاء الاصطناعي، لأن الجانب السلبي محدود ومرئي. مؤسسة بدون تلك الضوابط عليها إبقاء الذكاء الاصطناعي مقيدًا إلى الأبد، لأنها لا تملك طريقة لالتقاط فشل قبل أن يلتقطه العميل. هذا بالضبط كيف تتقدم الفرق من المساعدين الآليين إلى الطيار الآلي: تُكتسب الثقة من خلال سلامة مُثبتة وقابلة للتدقيق، وبمجرد اكتسابها تتراكم.

بهذا المنظور، الضوابط هي محرك التبني، وليست تنازل قسم الامتثال.

أبرز النقاط

  • احمِ نفسك من إخفاقات محددة: الهلوسة، السياق القديم، أخطاء النبرة، التجاوز، الانحراف. كل واحدة تحتاج ضابطها الخاص.
  • كدّس الدفاعات. التأصيل في بيانات حقيقية، عتبات الثقة، حدود إجراءات صريحة، نقاط تحقق بشرية، مراقبة مستمرة.
  • إمكانية التتبع هي آلية المساءلة. يجب أن يحمل كل إجراء البيانات والمنطق والثقة التي بُني عليها.
  • مسار التدقيق يبني الثقة ويجعل النظام قابلاً للإصلاح. بدونه لا يمكنك توسيع ما يُسمح للذكاء الاصطناعي بفعله بأمان.

الدقة والمساءلة هما الشرطان الأساسيان للسماح لذكاء الإيرادات الاصطناعي بفعل أي شيء ذي معنى. إذا كنت تفضل ضوابط مدمجة في طبقة التنسيق بدلاً من ترقيعها لاحقًا، ألقِ نظرة على كيفية تعامل Revnewo مع الأتمتة الخاضعة للمساءلة.

See revenue orchestration in action

Unify your revenue data, signals, and plays on one AI-native platform.