UK फिनटेक कंपनी Saturn के अनुसार, मेनस्ट्रीम AI मॉडल्स ने पर्सनल फाइनेंस से जुड़े सवालों के जवाबों में 57% बार फेल हो गए। मुश्किल और मल्टी-स्टेप क्वेरीज में फेलियर रेट बढ़कर 88% तक पहुंच गया।
यह नतीजे ऐसे समय में आए हैं जब ग्राहक पैसों से जुड़े सवालों के लिए चैटबॉट्स पर तेजी से निर्भर हो रहे हैं।
मुश्किल सवालों पर लगभग हर मॉडल फेल हुआ
स्टडी में 121 सवाल 18 फ्री और पेड मॉडल्स के जरिए पूछे गए, जिसमें ChatGPT, Gemini, Claude और Copilot जैसे प्रोवाइडर्स शामिल थे। हर सवाल को 5 बार तक दोहराया गया, जिससे 10,000 से ज्यादा आंसर जनरेट हुए।
अगर किसी आंसर में तथ्यात्मक गलती थी, जरूरी जानकारी छोड़ी गई थी या जरूरी चेतावनी नहीं दी गई थी, तो उसे फेल माना गया।
फ्री मॉडल्स का परफॉर्मेंस सबसे खराब रहा—इनमें 63% आंसर गलत थे, जबकि पेड वर्शन में यह 49% रहा। सबसे मुश्किल सवालों में, फ्री मॉडल्स में 93% बार फेलियर आया।
Claude Opus 5 reasoning मोड में टॉप पर रहा, फिर भी यह 39% आंसर में फेल हो गया। इसमें गिनती की गलतियाँ, टैक्स चेंज न देख पाना और बिना आधार वाले रूल्स जैसी गड़बड़ियां शामिल थीं।
एक पेंशन टैक्स आंसर के कारण एक सेवक को HM Revenue and Customs की तरफ से £17,500 का चार्ज लग सकता था।
“मिलियंस लोग पैसे की एडवाइज के लिए AI मॉडल्स पर भरोसा कर रहे हैं, लेकिन इन्हें गलत जवाब मिल रहे हैं, जिससे उन्हें पैसे का नुकसान हो सकता है,” Saturn के चीफ एग्जीक्यूटिव Amal Jolly ने कहा।
हमें X पर फॉलो करें ताजा क्रिप्टो न्यूज़ सबसे पहले पाने के लिए
फिर भी AI चैटबॉट्स पर भरोसा बढ़ता जा रहा है
इसी बीच, AI का इस्तेमाल मार्केट्स और उम्र के हर ग्रुप में तेजी से फैला है। एक ग्लोबल EY सर्वे (18,000 कंज्यूमर्स पर) में सामने आया कि 49% लोगों ने सेविंग्स और इन्वेस्टमेंट फैसलों में AI का सपोर्ट लिया है।
Britain के फाइनेंशियल रेग्युलेटर ने अगस्त में बताया कि पांच में से चार कम एक्सपीरियंस वाले इन्वेस्टर्स ने इन्वेस्टमेंट के लिए AI से मदद ली है। इनमें से 56% ने टूल्स पर भरोसा किया, जबकि टीवी और रेडियो पर सिर्फ 47% ने भरोसा जताया।
वहीं, इसी रिसर्च में 44% लोगों का मानना है कि AI जेनरेटेड फाइनेंशियल जानकारी रेग्युलेटेड है, जो कि गलत है।
PensionBee की सर्वे के मुताबिक, 1,000 अमेरिकी वयस्कों में से लगभग छह में से दस लोग पैसे से जुड़ी गाइडेंस पर बिना खुद से जांच किए ही भरोसा कर लेते हैं। लगभग हर चार में से एक ने बताया कि एक chatbot ने उन्हें उनके वित्त से जुड़ी गलत जानकारी दी थी।
Jolly ने कहा कि AI फाइनेंशियल एडवाइस पूरी तरह से अनरेग्युलेटेड है, जिससे कंज्यूमर्स को वही मुआवजा अधिकार नहीं मिलते जो किसी इंसान एडवाइजर के साथ होते। उन्होंने FCA से अपील की कि वह जल्दी से जल्दी कार्रवाई करे।
हमारे YouTube चैनल को सब्सक्राइब करें और लीडर्स व जर्नलिस्ट्स से एक्सपर्ट इनसाइट्स पाएं
