Нові моделі штучного інтелекту від Meta опинились в центрі скандалу
На вихідних Meta представила дві нові моделі штучного інтелекту – легку Scout і середньоформатну Maverick, яка, за їхніми словами, перевершує конкурентів у популярних тестах. Однак виявилося, що статистика, надана Meta, може бути обманливою. У пресрелізі компанія підкреслила успіх Maverick у рейтингу LMArena, але користувачі виявили, що тестувалася експериментальна версія моделі, оптимізована для розмов. LMArena звинуватила Meta у недостовірності тестувань і почала оновлювати правила, щоб запобігти подібним ситуаціям у майбутньому. Компанія вважає, що такі рейтинги стають менш достовірними, коли постачальники ШІ можуть використовувати спеціально налаштовані версії для тестування.
Переглядів: 0