ज़्यादातर सही
एक शोध निष्कर्ष के अनुसार, बड़े भाषा मॉडल (LLM) की सुरक्षा संबंधी हानिकारकता (harmfulness) का आकलन भौगोलिक-राजनीतिक संदर्भ से अधिक प्रश्न की भाषा से प्रभावित होता है। विशेष रूप से, कोरियाई भाषा में प्रश्न पूछने पर AI मॉडल द्वारा उत्पन्न उत्तरों में हानिकारकता कम पाई गई, जो AI सुरक्षा मूल्यांकन प्रणालियों में भाषाई पक्षपात की ओर ध्यान दिलाता है।
शोध का मुख्य निष्कर्ष यह है कि AI सुरक्षा मूल्यांकन में भू-राजनीतिक संदर्भ की तुलना में 'भाषा' का प्रभाव अधिक निर्णायक है। एक ही प्रश्न विभिन्न भाषाओं में पूछने पर मॉडल के उत्तरों की हानिकारकता के स्तर में अंतर देखा गया, और कोरियाई भाषा में पूछे गए प्रश्नों के उत्तरों में हानिकारकता अपेक्षाकृत कम मापी गई।
यह निष्कर्ष इस बात पर सवाल उठाता है कि क्या वैश्विक AI कंपनियों के सुरक्षा फ़िल्टर अंग्रेज़ी और कुछ प्रमुख भाषाओं के अतिरिक्त अन्य भाषाओं में समान स्तर पर काम कर रहे हैं।
शोध में Hugging Face पर उपलब्ध डेटासेट का उपयोग किया गया। इन डेटासेट फ़ाइलों की पूर्ण अवलोकन सुविधा सशर्त सहमति और लॉगिन के अधीन है, हालांकि कार्ड और मेटाडेटा सार्वजनिक रूप से देखे जा सकते हैं। इस तथ्य-जाँच प्रक्रिया में कुल 9 प्राथमिक स्रोतों की समीक्षा की गई।
Naver और Kakao जैसी कोरियाई कंपनियों तथा Samsung Electronics और LG जैसी तकनीकी दिग्गजों के लिए यह निष्कर्ष यह संकेत देता है कि कोरियाई भाषा के लिए विशेष रूप से तैयार की गई सुरक्षा विशेषज्ञता और डेटासेट की आवश्यकता है। कोरियाई भाषा में कम हानिकारकता दिखने का अर्थ यह हो सकता है कि सुरक्षा प्रशिक्षण (safety training) अंग्रेज़ी-केंद्रित डेटा पर आधारित है, और कोरियाई भाषा में जोखिम मानकों का ठीक से परीक्षण नहीं हो पा रहा है।
साथ ही, AI सुरक्षा नीति बनाने वाली संस्थाओं जैसे Ministry of Science and ICT और National Intelligence Service के लिए भी भाषा-विशिष्ट सुरक्षा मूल्यांकन मानदंडों की आवश्यकता उभरती है।
शोध से पुष्टि होती है कि AI सुरक्षा मूल्यांकन में भाषा एक महत्वपूर्ण चर है, और यह क्षेत्र दावा बड़े पैमाने पर सत्य सिद्ध हुआ है — इसका अंतिम निर्णय ज़्यादातर सही है।