كشف مكتب الذكاء الاصطناعي والاقتصاد الرقمي وتطبيقات العمل عن بُعد في حكومة دولة الإمارات فوز نموذج غوغل جيميناي في مؤشر "AI في الميدان"، وهو أول اختبار عالمي يهدف إلى قياس مدى توافق نماذج الذكاء الاصطناعي مع الثقافة الإماراتية، ومدى إلمامها باللهجات المحلية والعادات والقيم الوطنية .

يعمل المؤشر على تقييم النماذج اللغوية الكبيرة من خلال تحدٍّ يركز على عناصر الذكاء الثقافي في دولة الإمارات.

وفاز جيميناي بعد سلسلة اختبارات تقييم شملت أكثر من 400 سؤال و5200 استجابة من 11 نموذجاَ لغوياً ضخماً للذكاء الاصطناعي، وتولّت لجنة إماراتية متخصصة، تضم خبراء من مختلف الجهات المعنية، عملية تقييم النتائج لتحديد أكثر النماذج تدريباً على الثقافة الإماراتية.

المصدر: وام.

اتبع المؤشر منهجية "هيومن أيه آي رد تيمنغ" وهي عملية لتحدي النموذج تحدياً متعمداًَ ومباشراً لكشف أي ثغرات أو مخاطر أو أخطاء ثقافية وسلوكية قبل استخدامه.

وتم اختبار النماذج باستخدام منصة مخصصة تم تصميمها مع مراعاة التحيز وتفعيل آليات عمل مختلفة عند رصد سلوك غير طبيعي، وتم إخفاء هوية النماذج اللغوية بالكامل عن لجنة التقييم خلال المنهجية، وفقاً لـ"وام".