गार्डरेल्स: रेवेन्यू में AI को सटीक और जवाबदेह बनाए रखना
गार्डरेल्स: रेवेन्यू में AI को सटीक और जवाबदेह बनाए रखना
रेवेन्यू AI में किसी संगठन का भरोसा खोने का सबसे तेज़ तरीका है कस्टमर के साथ एक शर्मनाक घटना। एक ऐसा ईमेल जो अपने आप गलत टोन में चला गया। एक ऐसी आत्मविश्वासी सिफारिश जो मॉडल द्वारा गढ़े गए किसी तथ्य पर आधारित हो। एक ऐसा फ़ोरकास्ट जिसे कोई समझा नहीं सकता जब बोर्ड पूछे कि यह नंबर कहां से आया। हर रेवेन्यू लीडर जो AI डिप्लॉय करता है, यह दांव लगा रहा है कि फायदा इनमें से किसी एक घटना के होने की संभावना से ज़्यादा है, चाहे वे इसे इस तरह फ्रेम करें या नहीं। गार्डरेल्स वह तरीका हैं जिनसे आप उस दांव को अपने पक्ष में झुकाते हैं।
हमारा मानना है कि गार्डरेल्स पहले दिन से ही डिज़ाइन की बातचीत का हिस्सा होने चाहिए, न कि बाद में होने वाले कंप्लायंस रिव्यू में। इसका मतलब है इस बारे में स्पष्ट होना कि रेवेन्यू AI कैसे गलत होता है, हर विफलता को कौन सी कंट्रोल लेयर पकड़ती है, और सिस्टम को उसी तरह जवाबदेह कैसे ठहराया जाए जैसे आप किसी व्यक्ति को ठहराते हैं: यह देख पाने से कि उसने क्या किया और क्यों किया।
असल में क्या गलत होता है
आप "AI जोखिम" के खिलाफ कोई गार्डरेल डिज़ाइन नहीं कर सकते। आप किसी खास विफलता के खिलाफ एक गार्डरेल डिज़ाइन कर सकते हैं। रेवेन्यू AI में कुछ खास तरह की विफलताएं होती हैं।
हैल्युसिनेशन सबसे स्पष्ट है: मॉडल पूरे आत्मविश्वास के साथ कोई गलत बात कह देता है। एक प्रोडक्ट क्षमता जो आपके पास नहीं है, एक कस्टमर रेफरेंस जो मौजूद ही नहीं है, एक गढ़ा हुआ नंबर। किसी buyer के सामने यह एक credibility problem है और कभी-कभी एक legal समस्या भी।
स्टेल कॉन्टेक्स्ट थोड़ा सूक्ष्म है। AI ऐसे डेटा पर एक्ट करता है जो पिछले हफ्ते सही था। यह किसी ऐसे champion को दोबारा engage करने की सिफारिश करता है जो कंपनी छोड़ चुका है, या किसी deal state का ज़िक्र करता है जो कल दोपहर बदल गई थी।
फिर आते हैं टोन और judgment से जुड़ी गड़बड़ियां, जहां आउटपुट तकनीकी रूप से सही होता है पर संदर्भ के हिसाब से भयानक। किसी ऐसे account को खुशमिज़ाज upsell nudge भेजना जिसने आज सुबह ही एक गंभीर support ticket दर्ज किया हो।
Overreach: AI अपनी अथॉरिटी से बाहर कुछ करता है। कोई discount, कोई commitment, कोई अपरिवर्तनीय send जो पहले किसी इंसान के पास जाना चाहिए था।
और साइलेंट ड्रिफ्ट, जहां हालात बदलने के साथ मॉडल का व्यवहार धीरे-धीरे बिगड़ता जाता है और किसी का ध्यान तब तक नहीं जाता जब तक नतीजे पहले ही एक क्वार्टर तक भुगत नहीं चुके होते।
इनमें से हर एक का एक मैचिंग कंट्रोल है। हम जो सबसे आम गलती देखते हैं वह है "AI safety" को एक सेटिंग की तरह ट्रीट करना, जबकि असल में यह पांच-छह अलग-अलग डिफेंस हैं।
लेयर्स
कोई एक कंट्रोल सब कुछ नहीं पकड़ता, इसलिए मैच्योर सिस्टम कई लेयर्स को एक साथ स्टैक करते हैं।
ग्राउंडिंग मॉडल के आउटपुट को आपके सिस्टम्स के असल डेटा से जोड़ती है, जिसे ताज़ा तौर पर retrieve किया जाता है, न कि मॉडल को training में जो कुछ याद है उससे। यह हैल्युसिनेशन के खिलाफ मुख्य डिफेंस है: यह आपके records से जवाब देता है, अपनी कल्पना से नहीं। यह एक AI-native architecture में करना कहीं ज़्यादा आसान है जो connected data देख सकता है, बजाय किसी bolted-on feature के जो एक बार में एक record पर काम करता है।
Confidence thresholds का मतलब है कि सिस्टम को पता होता है कि वह कितना निश्चित है और low-confidence आउटपुट को एक्ट करने के बजाय किसी व्यक्ति के पास रूट करता है। High-confidence, low-stakes एक्शन आगे बढ़ जाते हैं। जो भी अनिश्चित या consequential है वह escalate हो जाता है।
Action boundaries इस बात पर स्पष्ट सीमाएं हैं कि AI खुद क्या कर सकता है। कौन से fields वह बदल सकता है, कौन से मैसेज वह भेज सकता है बनाम सिर्फ draft कर सकता है, अप्रूवल के बिना वह क्या कभी नहीं कर सकता। पॉलिसी को कोड के रूप में लिखा गया।
Human checkpoints किसी buyer-facing या high-stakes एक्शन को execute होने से पहले किसी व्यक्ति के सामने रखते हैं। यह human-in-the-loop मॉडल है, जिसे एक स्लोगन नहीं बल्कि एक कंट्रोल की तरह ट्रीट किया गया है।
मॉनिटरिंग और ऑडिट यह ट्रैक करते हैं कि AI क्या करता है और समय के साथ नतीजे किस दिशा में जाते हैं, ताकि ड्रिफ्ट जल्दी पकड़ में आए, क्वार्टर के अंत में नहीं।
मुश्किल हिस्सा है कैलिब्रेशन। बहुत ढीला हो तो इंसिडेंट्स होते हैं। बहुत टाइट हो तो हर एक्शन के लिए sign-off चाहिए होता है, जो कुछ भी automate करने के मकसद को खत्म कर देता है।
जवाबदेही का मतलब है प्रोवेनेंस
Accuracy का मतलब है खराब आउटपुट को रोकना। Accountability का मतलब है बाद में यह जवाब दे पाना कि AI ने क्या किया और क्यों किया। यह दूसरी खासियत ही है जो इसे किसी बिज़नेस में चलाना सुरक्षित बनाती है।
ज़रूरत है प्रोवेनेंस की। हर AI एक्शन और सिफारिश के साथ यह रिकॉर्ड होना चाहिए कि उसने कौन सा डेटा इस्तेमाल किया, कौन सी रीज़निंग फॉलो की, और वह कितना confident था। तो जब कोई rep पूछे कि किसी deal को at-risk क्यों फ्लैग किया गया, सिस्टम सिग्नल्स दिखा सके। जब फोरकास्ट बदले, आप ट्रेस कर सकें कि किन deals और किन सिग्नल बदलावों ने उसे हिलाया। जब कुछ अपने आप किया गया हो, तो एक लॉग हो कि क्या, कब, किस आधार पर, और किस पॉलिसी के तहत।
वह audit trail दो काम करता है। यह भरोसा बनाता है, क्योंकि reps और leaders उस सिस्टम को ज़्यादा autonomy देंगे जिसकी reasoning वे inspect कर सकते हैं। और यह सिस्टम को सुधार लायक बनाता है, क्योंकि जब AI गलत होता है, प्रोवेनेंस आपको बताता है कि क्या ग्राउंडिंग, थ्रेशोल्ड, या बाउंड्रीज़ में गलती थी, बजाय इसके कि आप सिर्फ अंदाज़ा लगाएं। जिस सिस्टम को आप ऑडिट नहीं कर सकते, उसे आप सुरक्षित रूप से ठीक भी नहीं कर सकते। यही वजह है कि प्रोवेनेंस किसी भी गंभीर next-best-action engine के नीचे बैठती है।
गार्डरेल्स आपको तेज़ चलने देते हैं
गार्डरेल्स को AI को धीमा करने वाली चीज़ के रूप में देखना स्वाभाविक है। असल में ये वही चीज़ हैं जो आपको इसे और आगे तक डिप्लॉय करने देती हैं, क्योंकि ये बढ़ी हुई autonomy को सुरक्षित बनाती हैं।
एक ठोस ग्राउंडिंग, स्पष्ट एक्शन बाउंड्रीज़, कॉन्फिडेंस-आधारित एस्केलेशन, और पूरे audit trail वाला संगठन AI को ज़्यादा काम सौंप सकता है, क्योंकि नुकसान सीमित और दिखाई देने वाला होता है। इन कंट्रोल्स के बिना किसी संगठन को AI को हमेशा छोटी रस्सी पर रखना पड़ता है, क्योंकि उनके पास किसी विफलता को कस्टमर तक पहुंचने से पहले पकड़ने का कोई तरीका नहीं है। यही वह तरीका है जिससे टीमें कोपायलट से ऑटोपायलट तक आगे बढ़ती हैं: भरोसा प्रदर्शित, ऑडिट करने लायक सुरक्षा के ज़रिए कमाया जाता है, और एक बार कमाए जाने के बाद यह compound होता जाता है।
इस नज़रिए से देखें तो गार्डरेल्स adoption का इंजन हैं, कंप्लायंस डिपार्टमेंट की रियायत नहीं।
मुख्य बातें
- खास विफलताओं के खिलाफ गार्ड करें: हैल्युसिनेशन, स्टेल कॉन्टेक्स्ट, टोन की गड़बड़ियां, overreach, ड्रिफ्ट। हर एक को अपना अलग कंट्रोल चाहिए।
- डिफेंस को स्टैक करें। असल डेटा में ग्राउंडिंग, कॉन्फिडेंस थ्रेशोल्ड, स्पष्ट एक्शन बाउंड्रीज़, ह्यूमन चेकपॉइंट्स, चालू मॉनिटरिंग।
- प्रोवेनेंस ही अकाउंटेबिलिटी मैकेनिज़्म है। हर एक्शन के साथ उसके पीछे का डेटा, रीज़निंग, और कॉन्फिडेंस होना चाहिए।
- एक ऑडिट ट्रेल भरोसा बनाता है और सिस्टम को ठीक करने लायक बनाता है। इसके बिना आप यह नहीं बढ़ा सकते कि AI को क्या करने की इजाज़त है।
Accurate और accountable होना ही वे पूर्व-शर्तें हैं जो रेवेन्यू AI को कुछ भी सार्थक करने देती हैं। अगर आप चाहते हैं कि गार्डरेल्स ऑर्केस्ट्रेशन लेयर में शुरू से बने हों, बाद में पैच न किए गए हों, तो देखिए Revnewo जवाबदेह ऑटोमेशन को कैसे हैंडल करता है।
More from रेवेन्यू में AI और ऑटोमेशन
See revenue orchestration in action
Unify your revenue data, signals, and plays on one AI-native platform.