Следите за нашими обновлениями в
Навколо чатвота Grok завжди ажіотаж завдяки заявам Ілона Маска про його неперевершені можливості. Версія Grok 4, за словами Маска, стала найрозумнішим ШІ на планеті, проте останні рейтинги демонструють, що модель має серйозних конкурентів.
Хоча третє місце – це вражаючий результат, все ж це далеко від лідерства, як про це стверджував Маск. Grok 4 поступається моделям від Google та OpenAI. Зокрема, перше місце зайняла модель Gemini 2.5 від Google, а друге розділили між собою моделі o3 та 4o від OpenAI, тоді як GPT-4.5 розділив третю позицію з Grok 4.
Водночас важливо наголосити, що таблиця лідерів LMArena неодноразово зазнавала чимало критики через можливі недоліки в методології.
Дослідження, проведене групою експертів на чолі з компанією Cohere, вказує на систематичні проблеми, зокрема непрозоре тестування та можливість відкликання рейтингів (з його результатами можна ознайомитися на arxiv.org).
Також стало відомо, що версія моделі LLaMA 4 від Meta, яка використовувалася для оцінювання, відрізнялася від публічно доступної, що підірвало довіру до платформи. Це ставить під сумнів об’єктивність рейтингів, але навіть за таких умов Grok 4 не зміг очолити список.
А проте, такі таблиці лідерів, як LMArena, допомагають порівнювати ефективність різних моделей ШІ, хоча їхні результати не завжди є остаточними через суб’єктивність оцінок.
Источник: 24tv.ua