هوش مصنوعی Llama 3 متا حتی از گوگل جمنای هم بهتر است

هوش مصنوعی Llama 3 متا حتی از گوگل جمنای هم بهتر استهوش مصنوعیفناوریجمعه ۳۱ فروردین ۱۴۰۳ - ۱۳:۴۰مطالعه 2 دقیقه امیر عبدالملكیتبلیغاتتبلیغاتتبلیغاتمتا ادعا می‌كند هوش مصنوعی Llama 3 نسبت‌به رقبایی از جمله جمنای و جما بهتر است .

تبلیغاتمتا در بیانیه‌ای مطبوعاتی اعلام كرد مدل زبانی بزرگ Llama 3 كه به‌زودی ازطریق ارائه‌دهندگان سرویس‌های ابری مانند AWS منتشر می‌شود، عملكرد بهتری نسبت به اكثر مدل‌های فعلی هوش مصنوعی دارد.Llama 3 درحال‌حاضر دارای دو نسخه با هشت میلیارد پارامتر و ۷۰ میلیارد پارامتر است كه فعلاً فقط پاسخ‌های مبتنی‌بر متن ارائه می‌دهند .

Llama 3 تنوع بیشتری در پاسخ به درخواست‌ها نسبت‌به مدل‌های زبانی بزرگ رقیب نشان می‌دهد.Llama 3 در مواردی كه از پاسخ دادن به سؤالات خودداری می‌كند، امتناع كاذب كمتری دارد و می‌تواند بهتر استدلال كند. متا می‌گوید Llama 3 دستورالعمل‌های بیشتری را می‌فهمد و كدهای بهتری را نسبت به قبل می‌نویسد .

Metaمتا ادعا می‌كند كه دو نسخه‌ی اولیه‌ی Llama 3 در بنچمارك‌های معین نسبت‌به مدل‌های هم‌اندازه مانند جما و جمنای و میسترال و Claude 3 برتری دارد. در معیار MMLU كه معمولاً دانش عمومی را اندازه‌گیری می‌كند، نسخه‌ی هشت میلیارد پارامتری Llama 3 به طور قابل توجهی بهتر از نسخه‌ی هفت میلیارد پارمتری جما و میسترال عمل كرد .

نسخه‌ی ۷۰ میلیارد پارامتری Llama 3 رقابت تنگاتنگی با جمنای پرو ۱٫۵ داشت.نكته‌ی جالب اینجاست كه مدل زبانی بزرگ GPT-4 در مقایسه‌های متا به چشم نمی‌خورد. باید توجه داشت كه بنچمارك مدل‌های هوش مصنوعی اگرچه برای درك میزان قدرتمند بودن آن‌ها مفید واقع می‌شود، اما ناقص است .

دیتاست‌های مورد استفاده برای سنجش مدل‌ها بخشی از آموزش آن‌ها هستند؛ به این معنی كه یك مدل زبانی بزرگ از قبل پاسخ سؤالات را می‌داند.متا می‌گوید كه ارزیاب‌های انسانی، Llama 3 را بالاتر از مدل‌های دیگر از جمله GPT-3 .

5 رتبه‌بندی كردند. این شركت دیتاست‌های جدیدی را برای ارزیاب‌های انسانی ایجاد كرده تا سناریوهای دنیای واقعی را كه ممكن است در آن‌ها از Llama 3 استفاده شود، تقلید كند.مقالات مرتبطمارك زاكربرگ شیپور رقابت با هوش مصنوعی ChatGPT را به صدا درآوردفوری: هوش مصنوعی Meta AI وارد اینستاگرام و واتساپ شددیتاست‌های یادشده شامل مواردی مانند درخواست مشاوره، خلاصه‌نویسی و نوشتن خلاقانه می‌شود .

متا می‌گوید تیمی كه روی این مدل كار می‌كردند به داده‌های ارزیابی جدید دسترسی نداشتند و در نتیجه بر عملكرد مدل تأثیری نگذاشته است.Llama 3 نسخه‌ی ۴۰۰ میلیارد پارامتری هم خواهد داشت كه می‌تواند رشته‌های طولانی‌تری از دستورالعمل‌ها و داده‌ها را درك كند و مدلی چندحالته است كه می‌تواند برای تولید تصویر یا رونویسی یك فایل صوتی به‌كار رود .

منبع : https://www.zoomit.ir/ai-articles/419809-llama-3-benchmark-testing-ai-gemma-gemini-mistral/