Топ-10 великих мовних моделей ШІ за рейтингом LMSYS Chatbot Arena: чи вдалося Claude перевершити GPT4

Рейтинг LMSYS Chatbot Arena складається з 71 великої мовної моделі ШІ, який очолила GPT4 від OpenAI: GPT-4 (1106-preview) — І місце та GPT-4 (0125-preview) — ІІ місце. 

Claude 3 не вдалося подолати GPT4, хоча стартап Anthropic стверджував, що їхня модель перевершує моделі конкурентів Google та OpenAI. Claude 3 Opus посіла ІІІ місце. 

На четвертому місці опинилася модель Bard (Gemini Pro) від Google.

Усі ці моделі отримали рейтинг Elo понад 1200:

• обидві версії GPT4 отримали по 1251;
• Claude 3 — 1233;
• Bard (Gemini Pro) — 1203.

Далі до десятки найкращих моделей ШІ увійшли:

• 5 місце — GPT4 0314 (1185);
• 6 місце — Claude 3 Sonnet (1180);
• 7 місце — GPT4 0613 (1161);
• 8 місце — Mistral Large 2402 французької компанії Mistral (1155);
• 9 місце — Mistral Medium (1147);
• 10 місце — Owen1.5-72B-Chat від Alibaba (1147).

Читайте головні IT-новини країни в нашому Telegram

По темi

Читайте головні IT-новини країни в нашому Telegram

Google оновлює алгоритми, щоб зменшити спам й ШІ-контент у пошуковій видачі на 40%

По темi

Google оновлює алгоритми, щоб зменшити спам й ШІ-контент у пошуковій видачі на 40%