به گزارش خبرگزاری صداو سیما، گروهی از متخصصان هوش مصنوعی دانشگاه صنعتی امیرکبیرموفق شدند قدرتمندترین و جامع‌ترین سامانه ارزیابی الگوهای زبان فارسی را توسعه دهند و به گفته آنها با این اقدام زیست بوم هوش مصنوعی کشور مجهز به یک سنجه دقیق و یکپارچه برای ارزیابی LLM‌های فارسی شد.

دکتر سعیده ممتازی عضو هیئت علمی دانشکده مهندسی کامپیوتر دانشگاه و سرپرست آزمایشگاه پردازش زبان طبیعی گفت: در یک نمونه همکاری موفق میان صنعت و دانشگاه، متخصصان مرکز تحقیقات هوش مصنوعی پارت و آزمایشگاه پردازش زبان طبیعی دانشگاه صنعتی امیرکبیر جامع‌‎ترین و قدرتمندترین سامانه ارزیابی الگوهای زبانی فارسی را توسعه دادند.

وی افزود: با توسعه این سامانه قدرتمند ارزیابی الگوهای زبانی فارسی، زیست‌بوم هوش مصنوعی کشور از این پس به سنجه‌ای دقیق و یکپارچه برای ارزیابی LLM‌های فارسی مجهز خواهند شد.

ممتازی با اشاره به ویژگی‌های این سامانه ارزیابی الگوهای زبانی فارسی، اظهار کرد: این سامانه شامل بیش از ۴۰ هزار نمونه است که بخشی از آنها از چندین بنچ‌ مارک معتبر جهانی به فارسی برگردانده شده و بخشی دیگر در داخل کشور از پایه تهیه و برچسب‌زنی شده‌اند.

این عضو هیئت علمی دانشکده مهندسی کامپیوتر دانشگاه صنعتی امیرکبیر خاطر نشان کرد: دادگان ارزیابی برای این سامانه در حال افزایش و به‌روزرسانی است تا ضریب دقت در ارزیابی‌ها بهبود یابد. 

به گفته وی الگوی ارائه شده در این طرح ، در کنار برترین بنچ‌ نشان های جهانی قرار می‌گیرد، ضمن اینکه بخشی از دادگان این سیستم ارزیابی (بنچ‌مارک) هم اکنون به صورت متن باز در دسترس عموم قرار گرفته است.