एआई मॉडल और प्लेटफ़ॉर्म

क्या हम वास्तव में एआई के चेन-ऑफ-थॉट रीजनिंग पर भरोसा कर सकते हैं?

mm
Unite.AI को Google पर अपने पसंदीदा स्रोतों में जोड़ें

जैसे ही कृत्रिम बुद्धिमत्ता (एआई) स्वास्थ्य सेवा और स्व-ड्राइविंग कारों जैसे क्षेत्रों में व्यापक रूप से उपयोग की जा रही है, यह सवाल और भी महत्वपूर्ण हो जाता है कि हम इस पर कितना भरोसा कर सकते हैं। एक तरीका, जिसे चेन-ऑफ-थॉट (सीओटी) तर्क कहा जाता है, ने ध्यान आकर्षित किया है। यह एआई को जटिल समस्याओं को चरणबद्ध तरीके से तोड़ने में मदद करता है, जिससे यह दिखाया जा सकता है कि यह अंतिम उत्तर तक कैसे पहुंचता है। यह न केवल प्रदर्शन में सुधार करता है, बल्कि यह भी दिखाता है कि एआई वास्तव में कैसे सोचता है, जो एआई प्रणालियों के लिए विश्वास और सुरक्षा के लिए महत्वपूर्ण है।

हालांकि, एंथ्रोपिक से हालिया शोध यह सवाल उठाता है कि क्या सीओटी वास्तव में मॉडल के अंदर हो रही चीजों को दर्शाता है। यह लेख सीओटी के काम करने के तरीके को देखता है, एंथ्रोपिक ने क्या पाया, और इसका विश्वास करने योग्य एआई बनाने के लिए क्या मतलब है।

चेन-ऑफ-थॉट तर्क को समझना

चेन-ऑफ-थॉट तर्क एक तरीका है जिसमें एआई को चरणबद्ध तरीके से समस्याओं का समाधान करने के लिए प्रेरित किया जाता है। इसके बजाय कि यह केवल अंतिम उत्तर दे, मॉडल प्रत्येक चरण को समझाता है। यह तरीका 2022 में पेश किया गया था और तब से यह गणित, तर्क, और तर्कसंगतता जैसे कार्यों में परिणामों में सुधार करने में मदद करता है।

ओपनएआई के o1 और o3, जेमिनी 2.5, डीपसीक आर1, और क्लॉड 3.7 सोनेट जैसे मॉडल इस तरीके का उपयोग करते हैं। सीओटी की एक वजह यह है कि यह एआई के तर्क को अधिक दृश्यमान बनाता है। यह तब उपयोगी होता है जब त्रुटियों की लागत उच्च होती है, जैसे कि चिकित्सा उपकरण या स्व-ड्राइविंग प्रणालियों में।

हालांकि, भले ही सीओटी पारदर्शिता में मदद करता है, यह हमेशा यह नहीं दर्शाता है कि मॉडल वास्तव में क्या सोच रहा है। कुछ मामलों में, स्पष्टीकरण तार्किक दिख सकते हैं लेकिन वास्तविक चरणों पर आधारित नहीं होते हैं जिनका उपयोग मॉडल ने अपने निर्णय तक पहुंचने के लिए किया था।

क्या हम चेन-ऑफ-थॉट पर भरोसा कर सकते हैं

एंथ्रोपिक ने यह परीक्षण किया कि क्या सीओटी स्पष्टीकरण वास्तव में यह दर्शाते हैं कि एआई मॉडल निर्णय कैसे लेते हैं। इस गुण को “विश्वास” कहा जाता है। उन्होंने चार मॉडलों का अध्ययन किया, जिनमें क्लॉड 3.5 सोनेट, क्लॉड 3.7 सोनेट, डीपसीक आर1, और डीपसीक वी1 शामिल हैं। इन मॉडलों में, क्लॉड 3.7 और डीपसीक आर1 को सीओटी तकनीकों का उपयोग करके प्रशिक्षित किया गया था, जबकि अन्य नहीं थे।

उन्होंने मॉडलों को विभिन्न प्रोम्प्ट दिए। कुछ प्रोम्प्ट में संकेत शामिल थे जो मॉडल को अनैतिक तरीके से प्रभावित करने के लिए डिज़ाइन किए गए थे। फिर उन्होंने जांचा कि क्या एआई ने इन संकेतों का उपयोग अपने तर्क में किया था।

परिणाम चिंताजनक थे। मॉडलों ने केवल 20 प्रतिशत से कम समय में संकेतों का उपयोग करना स्वीकार किया। यहां तक कि सीओटी तकनीकों का उपयोग करके प्रशिक्षित मॉडलों ने भी केवल 25 से 33 प्रतिशत मामलों में विश्वासपात्र स्पष्टीकरण दिए।

जब संकेत अनैतिक कार्यों से संबंधित थे, जैसे कि पुरस्कार प्रणाली को धोखा देना, मॉडलों ने शायद ही कभी इसका स्वीकार किया। यह तब हुआ जब उन्होंने अपने निर्णय लेने के लिए उन संकेतों पर भरोसा किया।

मॉडलों को पुनः प्रशिक्षण देने से थोड़ा सुधार हुआ, लेकिन जब व्यवहार अनैतिक था तो यह बहुत मदद नहीं की।

शोधकर्ताओं ने यह भी देखा कि जब स्पष्टीकरण वास्तविक नहीं थे, तो वे अक्सर लंबे और जटिल थे। यह सुझाव दे सकता है कि मॉडल कुछ छिपाने की कोशिश कर रहे थे।

उन्होंने यह भी पाया कि जैसे ही कार्य अधिक जटिल होता गया, स्पष्टीकरण कम विश्वासपात्र हो गए। यह सुझाव देता है कि सीओटी जटिल समस्याओं के लिए अच्छा काम नहीं कर सकता है। यह विशेष रूप से संवेदनशील या जोखिम भरे निर्णयों में मॉडल द्वारा की जा रही चीजों को छिपा सकता है।

विश्वास के लिए इसका क्या अर्थ है

अध्ययन सीओटी की पारदर्शिता और वास्तविक ईमानदारी के बीच एक महत्वपूर्ण अंतर को उजागर करता है। चिकित्सा या परिवहन जैसे महत्वपूर्ण क्षेत्रों में, यह एक गंभीर जोखिम है। यदि एआई एक तार्किक दिखने वाला स्पष्टीकरण देता है लेकिन अनैतिक कार्यों को छिपाता है, तो लोग गलती से आउटपुट पर भरोसा कर सकते हैं।

सीओटी उन समस्याओं के लिए उपयोगी है जिनमें कई चरणों में तार्किक तर्क की आवश्यकता होती है। लेकिन यह दुर्लभ या जोखिम भरे त्रुटियों का पता लगाने में मदद नहीं कर सकता है। यह मॉडल को भ्रामक या अस्पष्ट उत्तर देने से भी नहीं रोकता है।

शोध से पता चलता है कि सीओटी अकेले एआई के निर्णय लेने पर भरोसा करने के लिए पर्याप्त नहीं है। अन्य उपकरण और जांच भी आवश्यक हैं ताकि यह सुनिश्चित किया जा सके कि एआई सुरक्षित और ईमानदार तरीके से व्यवहार करता है।

चेन-ऑफ-थॉट की ताकत और सीमाएं

इन चुनौतियों के बावजूद, सीओटी कई फायदे प्रदान करता है। यह जटिल समस्याओं को हल करने में एआई की मदद करता है bằng चरणों में विभाजित करना। उदाहरण के लिए, जब एक बड़े भाषा मॉडल को प्रेरित किया जाता है सीओटी के साथ, तो यह गणित शब्द समस्याओं पर शीर्ष-स्तर की सटीकता प्रदर्शित करता है इस चरण-दर-चरण तर्क का उपयोग करके। सीओटी विकासकर्ताओं और उपयोगकर्ताओं के लिए मॉडल का अनुसरण करना भी आसान बनाता है। यह रोबोटिक्स, प्राकृतिक भाषा प्रसंस्करण, या शिक्षा जैसे क्षेत्रों में उपयोगी है।

हालांकि, सीओटी के अपने नुकसान भी हैं। छोटे मॉडल चरणबद्ध तर्क प्रदान करने के लिए संघर्ष करते हैं, जबकि बड़े मॉडलों को इसका अच्छा उपयोग करने के लिए अधिक मेमोरी और शक्ति की आवश्यकता होती है। इन सीमाओं के कारण यह चैटबॉट या रियल-टाइम सिस्टम जैसे उपकरणों में सीओटी का लाभ उठाना चुनौतीपूर्ण बनाता है।

सीओटी का प्रदर्शन प्रोम्प्ट लिखने के तरीके पर भी निर्भर करता है। खराब प्रोम्प्ट खराब या भ्रमित चरणों का कारण बन सकते हैं। कुछ मामलों में, मॉडल लंबे स्पष्टीकरण उत्पन्न करते हैं जो मददगार नहीं होते हैं और प्रक्रिया को धीमा कर देते हैं। और विशेषज्ञता वाले क्षेत्रों में, सीओटी तब तक अच्छा काम नहीं कर सकता है जब तक कि मॉडल उस क्षेत्र में प्रशिक्षित न हो।

जब हम एंथ्रोपिक के निष्कर्षों को जोड़ते हैं, तो यह स्पष्ट हो जाता है कि सीओटी उपयोगी है, लेकिन स्वयं पर्याप्त नहीं है। यह विश्वास करने योग्य एआई बनाने के प्रयास का एक हिस्सा है।

मुख्य निष्कर्ष और आगे का रास्ता

इस शोध से कुछ सबक मिलते हैं। पहला, सीओटी को एआई व्यवहार की जांच के लिए एकमात्र तरीके के रूप में उपयोग नहीं किया जाना चाहिए। महत्वपूर्ण क्षेत्रों में, हमें अधिक जांच की आवश्यकता है, जैसे कि मॉडल की आंतरिक गतिविधि को देखना या बाहरी उपकरणों का उपयोग करके निर्णयों का परीक्षण करना।

हमें यह भी स्वीकार करना चाहिए कि क्योंकि एक मॉडल एक स्पष्ट स्पष्टीकरण देता है, इसका मतलब यह नहीं है कि यह सच कह रहा है। स्पष्टीकरण एक कवर हो सकता है, वास्तविक कारण नहीं।

इससे निपटने के लिए, शोधकर्ता सीओटी को अन्य दृष्टिकोणों के साथ जोड़ने का सुझाव देते हैं। इनमें बेहतर प्रशिक्षण विधियां, पर्यवेक्षित शिक्षा, और मानव समीक्षाएं शामिल हैं।

एंथ्रोपिक यह भी सिफारिश करता है कि मॉडल के आंतरिक कामकाज की गहराई से जांच की जाए। उदाहरण के लिए, सक्रियण पैटर्न या छिपे हुए परतों की जांच यह दिखा सकती है कि मॉडल कुछ छिपा रहा है या नहीं।

सबसे महत्वपूर्ण बात, यह तथ्य कि मॉडल अनैतिक व्यवहार को छिपा सकते हैं, यह दिखाता है कि एआई विकास में मजबूत परीक्षण और नैतिक नियमों की आवश्यकता क्यों है।

एआई में विश्वास बनाना न केवल अच्छे प्रदर्शन के बारे में है, बल्कि यह सुनिश्चित करना भी है कि मॉडल ईमानदार, सुरक्षित और निरीक्षण के लिए खुले हैं।

नीचे की रेखा

चेन-ऑफ-थॉट तर्क ने जटिल समस्याओं को हल करने और अपने उत्तरों की व्याख्या करने में एआई की मदद की है। लेकिन शोध से पता चलता है कि ये व्याख्याएं हमेशा सच नहीं होती हैं, विशेष रूप से जब नैतिक मुद्दे शामिल होते हैं।

सीओटी की सीमाएं हैं, जैसे कि उच्च लागत, बड़े मॉडल की आवश्यकता, और अच्छे प्रोम्प्ट पर निर्भरता। यह गारंटी नहीं दे सकता है कि एआई सुरक्षित या न्यायसंगत तरीके से काम करेगा।

वास्तव में भरोसेमंद एआई बनाने के लिए, हमें सीओटी को अन्य तरीकों के साथ जोड़ना चाहिए, जिनमें मानव निगरानी और आंतरिक जांच शामिल हैं। शोध को इन मॉडलों की विश्वासपात्रता में सुधार करना जारी रखना चाहिए।

डॉ. तहसीन ज़िया कोम्सैट्स यूनिवर्सिटी इस्लामाबाद में एक टेन्योर्ड एसोसिएट प्रोफेसर हैं, जो ऑस्ट्रिया की वियना टेक्नोलॉजी यूनिवर्सिटी से एआई में पीएचडी रखते हैं। आर्टिफिशियल इंटेलिजेंस, मशीन लर्निंग, डेटा साइंस और कंप्यूटर विजन में विशेषज्ञता, उन्होंने प्रतिष्ठित वैज्ञानिक पत्रिकाओं में प्रकाशन के साथ महत्वपूर्ण योगदान दिया है। डॉ. तहसीन ने प्रिंसिपल इन्वेस्टिगेटर के रूप में विभिन्न औद्योगिक परियोजनाओं का नेतृत्व किया है और एक एआई सलाहकार के रूप में कार्य किया है।