اوپن ای آی دست هوش مصنوعی ایلان ماسک را رو کرد
رهاتل: هفته گذشته یکی از کارمندان اوپن ای آی شرکت هوش مصنوعیxAI متعلق به ایلان ماسک را به انتشار نتایج گمراه کننده از سنجش گورک 3 با یکی از معیارهای بررسی قدرت مدل متهم کرد.
به گزارش رهاتل به نقل از تک کرانچ، ایگور بابوشکین یکی از بنیانگذاران xAI تأکید دارد ادعاهای این شرکت درباره ی قدرت گورک۳ صحت دارند. این شرکت فناوری در یک پست وبلاگی نموداری را منتشر نمود که عملکرد گورک ۳ را در AIME ۲۰۲۵ (مجموعه ای از سوالات چالش برانگیز ریاضی از یک آزمون ریاضی) نشان می داد. البته تعدادی از کارشناسان اعتبار AIME را به عنوان یک معیار هوش مصنوعی زیر سوال برده اند. با این وجود AIME ۲۰۲۵ و نسخه های قدیمی تر این تست بطور معمول جهت بررسی قابلیت های ریاضی مدلهای هوش مصنوعی به کار می روند. نمودار استارت آپ هوش مصنوعی ایلان ماسک نشان می داد عملکرد نسخه های «گورک ۳ »، «گورک ۳ استدلالی بتا» و «گورک ۳ استدلالی مینی» در معیار AIME ۲۰۲۵ بهتر از مدل «o۳مینی» شرکت اوپن ای آی است. اما کارمندان اوپن ای آی در پلت فرم ایکس به این نکته اشاره کردند که در نمودارxAI امتیاز «o۳مینی» در شاخص cons@۶۴ مربوط به معیار AIME ۲۰۲۵ شامل نشده است. cons@۶۴ به مدلهای هوش مصنوعی اجازه می دهد تا ۶۴ بار به سوالات پاسخ دهند و نتایج پرتکرار را به عنوان پاسخ غائی درنظر می گیرد که حذف آن می تواند نتایج را گمراه کننده جلوه دهد. بابوشکین در پلت فرم ایکس ادعا نمود اوپن ای آی قبلا جدول های معیار گمراه کننده مشابه را منتشر نموده است، هرچند این جدول ها مقایسه بین عملکرد مدلهای هوش مصنوعی خود بوده است. در این بین ناتان لمبرت محقق هوش مصنوعی در پستی این نکته را ذکر کرد که نتیجه با اهمیت ترین معیار مدلهای هوش مصنوعی، یعنی هزینه رایانشی و مالی هر مدل برای دستیابی به بهترین امتیاز بازهم نامشخص است. این امر نشان میدهد بیشتر معیارهای هوش مصنوعی فقط کمی از قدرت ها و محدودیت های مدلها را نمایش می دهند.
منبع: rahatel.ir
این مطلب را می پسندید؟
(1)
(0)
تازه ترین مطالب مرتبط
نظرات بینندگان رهاتل در مورد این مطلب