AI بینچ مارک لیڈر بورڈز
AI بینچ مارکس کیا ہیں؟
- AI سسٹمز کے امتحان کی طرح۔
- معیاری طریقے سے مخصوص مہارت کا اندازہ کرنے کے لیے ڈیزائن کیا گیا ہے، جس کے نتیجے میں ایک اسکور ہوتا ہے جو سسٹمز کے درمیان موازنہ کرنے کی اجازت دیتا ہے۔
- ایک مسئلہ کی تفصیلات، ایک ڈیٹاسیٹ، اور ایک متعین اسکور پر مشتمل ہے۔ درست جوابات کو اکثر زمینی سچ کہا جاتا ہے۔
- AI بینچ مارکس EdTech مصنوعات کے AI آؤٹ پٹ کے معیار کی جانچ کرتے ہیں - ایک وسیع کوالٹی ایشورنس فریم ورک کا ایک حصہ۔
AI بینچ مارکس کیوں کارآمد ہیں؟
- AI بینچ مارکس ایک ہدف فراہم کرتے ہیں - AI ماڈل ڈویلپرز اور EdTech پروڈکٹ ڈویلپرز کے لیے - کمزوریوں کو سمجھنے اور ان میں بہتری لانے میں ان کی مدد کرنے کے لیے۔
- صارفین اور پالیسی ساز کارکردگی کے اسکور دیکھ سکتے ہیں، اس انتخاب کو قابل بنا کر جس میں AI سسٹمز استعمال کیے جائیں، اور ان کو حاصل ہونے والے نتائج میں اعتماد بڑھایا جا سکے۔
تعلیم میں AI معیارات کی ترقی میں اہم چیلنجز کیا ہیں؟
- ڈیٹاسیٹ کے لیے وسائل کی فراہمی، خاص طور پر کم اور درمیانی آمدنی والے ملک (LMIC) سیاق و سباق سے، جیسے موجودہ انسانی امتحان کے سوالات، سیکھنے کے وسائل یا طالب علم کا کام کرنا۔
- تعلیم کے کھلے عام، موضوعی پہلوؤں کا سامنا کرتے وقت اسکورنگ کی تعریف کرنا (یعنی 'اچھا' کیسا لگتا ہے؟)۔
ہم نے اب تک کون سے AI معیارات تیار کیے ہیں؟
- پیڈاگوجی بینچ مارک - اے آئی ماڈل طالب علم کے امتحانات میں اچھی کارکردگی کا مظاہرہ کرتے ہیں، لیکن کیا وہ درس گاہوں اور طلبہ کو سیکھنے میں مدد کرنے کے بارے میں جانتے ہیں؟ ہم نے یہ دیکھنے کے لیے The Pedagogy Benchmark بنایا کہ آیا ماڈل اساتذہ کے امتحانات پاس کر سکتے ہیں۔
- SEND Pedagogy Benchmark - خصوصی تعلیمی ضروریات اور معذوری (SEND) مخصوص تدریس سے متعلق سوالات کے سیٹ کا استعمال کرتے ہوئے ایک توسیع۔
- بصری ریاضی کا بینچ مارک - AI ماڈل ریاضی کے پیچیدہ ٹیسٹوں کا جواب دے سکتے ہیں، لیکن وہ ابتدائی درجات میں سیکھنے کی کلید، بصری ریاضی کے ساتھ کتنی اچھی کارکردگی کا مظاہرہ کرتے ہیں؟ یہاں ہم بالکل اسی کی جانچ کرتے ہیں۔
ہمیں آپ کی مدد کی ضرورت ہے!
ہم ان بینچ مارکس کا استعمال LMICs میں بچوں کے لیے کیس بنانے کے لیے کرتے ہیں - ہم AI ماڈل کے ڈویلپرز سے یہ جاننا چاہتے ہیں کہ وہ LMIC سیاق و سباق کے لیے اپنے ماڈلز کو کہاں بہتر بنا سکتے ہیں۔ اور ایسا کرنے کا بہترین طریقہ حقیقی دنیا کی مثالیں استعمال کرنا ہے۔ کیا آپ کوئی متعلقہ معلوماتی ذرائع جانتے ہیں جو مدد کر سکتے ہیں؟ مثال کے طور پر طلباء کے کام کی LMICs سے مثالیں، ابتدائی جماعت کی ریاضی کی نصابی کتابیں یا عام غلط فہمیوں کی تالیفات۔ اگر ایسا ہے تو، براہ کرم alasdair.mackintosh@fabinc.co.uk سے رابطہ کریں۔