এই পৃষ্ঠায়

এই পৃষ্ঠাটি ইংরেজিতে পড়ুন

ইংরেজি পাতার এই স্বয়ংক্রিয় অনুবাদ, এখনও মাতৃভাষিক বক্তার দ্বারা পর্যালোচনা করা হয়নি।

Fab AI মডেলগুলোকে এমন শিক্ষা-টাস্কে মূল্যায়ন করে যেগুলো সেই নিম্ন ও মধ্যম আয়ের দেশগুলোতে গুরুত্বপূর্ণ যেগুলোর জন্য বেঞ্চমার্কটি তৈরি, যেখানে বাজেট, ব্যান্ডউইথ ও ভাষা-কভারেজ সীমিত; এবং ফলাফল প্রকাশ করে একটি বাছাইযোগ্য লিডারবোর্ড হিসেবে, গবেষণাপত্র হিসেবে নয়। মূল টেবিলে SEND, ভিজ্যুয়াল গণিত ও ভিজ্যুয়াল রিজনিংয়ের পাশাপাশি একটি পেডাগজি বেঞ্চমার্কের স্কোর থাকে, আর বহুভাষিক পেডাগজি, মৌলিক সাক্ষরতা ও উচ্চস্বরে-পড়া মূল্যায়নের জন্য আলাদা ট্যাব রয়েছে।

এটি দিয়ে আপনি কী করতে পারেন

প্রায় 300টি মডেলকে পেডাগজি স্কোরে তুলনা করুন — বর্তমানে যা নব্বইয়ের শুরুর দিক থেকে নেমে 21% পর্যন্ত বিস্তৃত — তারপর একটি শিক্ষা মন্ত্রণালয়কে বাস্তবে যা যা বিবেচনা করতে হয় তা দিয়ে সাজান: প্রতি মিলিয়ন টোকেনের মূল্য, প্যারামিটার সংখ্যা, ওপেন ওয়েট ও প্রকাশের তারিখ। নিচের দিকের বিস্তারটিই কাজের অংশ। 2B-এর কম প্যারামিটারের ওপেন মডেলগুলো পেডাগজি বেঞ্চমার্কে 21% থেকে 43%-এর মধ্যে থাকে, আর ফ্রন্টিয়ার মডেলগুলো নব্বইয়ের শুরুর দিকে থাকে; ফলে "সস্তা হার্ডওয়্যারে এটি অফলাইনে চালানো যাবে কি না" প্রশ্নটি অনুমানের বদলে একটি পরিমাপযোগ্য বিনিময়ে পরিণত হয়।

বহুভাষিক পেডাগজি ট্যাবটিই এই পাতা বুকমার্ক করার কারণ। বেশিরভাগ শিক্ষা বেঞ্চমার্ক শুধু ইংরেজিতে, আর একটি মডেলের পেডাগজি অনুবাদের পরও টিকে থাকে কি না — এই প্রশ্নটিই এমন প্রশ্ন যার উত্তর একটি বহুভাষিক ব্যবস্থার মন্ত্রণালয়ের দরকার। ডেটা CSV হিসেবে ডাউনলোডযোগ্য, তাই তুলনাগুলো স্থানীয়ভাবে আবার চালানো যায়।

এটি কাদের জন্য

জাতীয় ব্যবস্থার জন্য মডেল বাছাই করা নীতিনির্ধারক ও ক্রয়-দল, AI-সহায়ক শিক্ষায় প্রবেশাধিকারের ব্যবধান নিয়ে গবেষণা করা গবেষক, এবং এমন ডেভেলপার যাদের এমন একটি পেডাগজি লক্ষ্য দরকার যা ইংরেজি ভাষার পরীক্ষা নয়।

নোট ও সতর্কতা

একটি লিডারবোর্ড মডেলগুলোকে বেঞ্চমার্কের নিজস্ব টাস্কে পরিমাপ করে: উচ্চ পেডাগজি স্কোর সেই আইটেমগুলোর সম্পর্কে প্রমাণ, শ্রেণিকক্ষের সম্পর্কে নয়। মূল্য কলাম ইনপুট ও আউটপুট টোকেনের মূল্যকে 3:1 অনুপাতে মেশায়, যা একটি মডেলিং-পছন্দ, কোনো নির্দিষ্ট স্থাপনার প্রকৃত খরচ নয়। নতুন মডেল আসার সঙ্গে সঙ্গে ভাষা ও স্থানীয়ভাবে হোস্ট করা মডেলের কভারেজ বদলায়, আর ছোট মডেলের নিম্ন-প্রান্তের স্কোর সক্ষমতার পাশাপাশি আংশিকভাবে টাস্ক ফরম্যাটও প্রতিফলিত করে। Fab AI-এর কাঠামো স্পষ্টতই নিম্ন ও মধ্যম আয়ের দেশগুলোকে কেন্দ্র করে, তাই বেঞ্চমার্কের আইটেম-সেট সেই প্রেক্ষাপট প্রতিফলিত করে এবং একে সাধারণ শিক্ষা র‍্যাঙ্কিং হিসেবে পড়া উচিত নয়। প্রকাশের তারিখ দেখুন: বেশ কয়েকটি এন্ট্রি বর্তমান মডেল প্রজন্মের আগের।

সংযুক্ত ধারণা

এই পৃষ্ঠাটি এমবেড করুন

এই পৃষ্ঠাটি যেকোনো লার্নিং ম্যানেজমেন্ট সিস্টেম বা ওয়েবসাইটে এমবেড করতে নিচের কোডটি কপি করুন। এমবেড করা সংস্করণে কেবল পৃষ্ঠার কনটেন্ট দেখানো হয় — সাইটের হেডার, নেভিগেশন ও ফুটার লুকানো থাকে।