Meta jaunā mākslīgā intelekta modeļu salīdzinājumi ir nedaudz maldinoši

Jaunais Meta AI modelis izceļas testā

Viens no jaunākajiem Meta zīmola AI modeļiem, Maverick, sestdienas testā LM Arena ierindojās otrajā vietā. Šis tests ietver cilvēku vērtētājus, kuri salīdzina dažādu modeļu rezultātus un izvēlas, kurš viņiem patīk labāk. Tomēr šķiet, ka Maverick versija, ko Meta iesniedza LM Arena testam, atšķiras no versijas, kas ir pieejama izstrādātājiem.

Svarīgi: Pēc sākotnējiem novērojumiem, testā izmantotajam modelim varētu būt papildu uzlabojumi vai modifikācijas, kas nav pieejamas plašai lietotāju videi. Tas varētu izskaidrot tā augsto vērtējumu salīdzinājumā ar citiem modeļiem.

https://techcrunch.com/2025/04/06/metas-benchmarks-for-its-new-ai-models-are-a-bit-misleading/