Modelos de mídia: onde o código aberto se posiciona?

Como isso é classificado: estes são escores ELO de preferência humana cega — as pessoas veem duas saídas do mesmo prompt, sem saber qual modelo as produziu, e escolhem a que preferem. É a única maneira honesta de classificar modelos de mídia: nenhum benchmark automatizado pode dizer se uma imagem é boa. Um ELO mais alto significa que as pessoas preferiram mais vezes. A votos coluna mostra quantas comparações sustentam a pontuação — um modelo com poucos votos tem uma posição menos confiável.

Open-weight significa que o modelo pode ser baixado e executado em seu próprio hardware. A API de classificação não diz se um modelo é aberto, então os identificamos por família de modelo. Onde não podemos confirmar de nenhuma forma, marcamos o modelo não verificado em vez de adivinhar — e a figura de "melhor open-weight" acima conta apenas modelos que podemos realmente confirmar. Preferimos subestimar o open source do que enganar você. Viu um erro?

Classificações por Artificial Analysis.