Artificial Analysis: FLUX 3 Image Klein tvåa bland modeller med öppna vikter inom bildgenerering
FLUX 3 Image Klein, en bildmodell med öppna vikter från Black Forest Labs, fick i Artificial Analysis blindomröstningar nästan samma Elo-tal som Qwen-Image-2.1, som leder bland modellerna med öppna vikter. Den ligger klart efter toppen bland alla bildmodeller.
Artificial Analysis (AA) publicerade den 5 november på sitt X-konto en bedömning av de nya FLUX 3-bildmodellerna från Black Forest Labs (BFL). FLUX 3 Image Klein är en modell med öppna vikter och 5,6 miljarder parametrar som BFL släppte den 15 oktober. Enligt AA är den tvåa bland modeller med öppna vikter i benchmarket AA-Image-T2I v2.1 för text till bild och trea i bildredigeringsbenchmarket AA-Image-Editing v2.1.
I AA:s jämförelse ser mänskliga bedömare två bilder som har skapats utifrån samma prompt. De vet inte vilken modell som har gjort vilken bild och väljer den bild de föredrar. Utifrån rösterna räknas ett Elo-tal fram: ju oftare en modells bild vinner, desto högre blir talet. AA testade Klein och FLUX 3 Image via BFL:s API i 1K-upplösning. API:et utökar först prompten till en mer detaljerad version, och sedan skapar modellen bilden. Resultaten gäller alltså bilder som har skapats via API:et.
Skillnaden mot den ledande modellen med öppna vikter ligger inom felmarginalen
Tabellen visar FLUX 3-modellerna från AA:s topplista. Där finns också Kleins föregångare FLUX.2 [klein] 9B, de tre bästa modellerna med öppna vikter och den modell som leder hela jämförelsen.
| Modell | Elo | 95 procents konfidensintervall | Pris / 1 000 bilder |
|---|---|---|---|
| GPT Image 2.5 Sunburst (max) | 1 227 | 1 217–1 237 | 210,72 $ |
| FLUX 3 Image | 1 117 | 1 105–1 129 | 48 $ |
| Qwen-Image-2.1 | 1 044 | 1 032–1 056 | inget API |
| FLUX 3 Image Klein | 1 043 | 1 031–1 055 | 9 $ |
| Fibo 2.0 | 1 040 | 1 028–1 052 | 32 $ |
| FLUX.2 [klein] 9B | 932 | 922–942 | 15 $ |
Källa: topplistan för AA-Image-T2I v2.1. Priserna gäller modelltillverkarens API i 1024×1024-upplösning.
Klein och Qwen-Image-2.1 skiljer sig åt med en poäng, och konfidensintervallen överlappar nästan helt. Ordningen mellan dem går alltså inte att avgöra med de här siffrorna. Även Fibo 2.0 ligger inom samma intervall. På listan över alla modeller är Klein 22:a. FLUX 3 Image, som släpptes den 1 oktober, är 13:e.
Starkast i spelbilder, svagast i bilder för handel
AA jämför också modellerna i tio användningsfall. Båda FLUX 3-modellerna klarar sig bäst med bilder för animation och spel, till exempel spelgrafik, konceptkonst och karaktärsdesign. I den här kategorin ligger Klein 143 Elo-poäng efter den bästa modellen, enligt bilden i AA:s inlägg.
Jämfört med föregångaren FLUX.2 [klein] 9B förbättrades Klein mest inom design av användargränssnitt. AA uppger att föregångaren låg i den svagaste tredjedelen av topplistan för det användningsfallet, medan Klein ligger i den bästa fjärdedelen. Det svagaste användningsfallet är fortfarande detaljhandel och e-handel, skriver AA. Enligt bilden i inlägget ligger Klein där 216 poäng efter kategorins topp. För bilder till live action-film är skillnaden dock något större, 219 poäng.
Licens, pris och tillgänglighet
Klein har släppts under FLUX Kommunity License. Licensen tillåter avgiftsfri icke-kommersiell användning. Bilderna som modellen skapar får användas kommersiellt av privatpersoner och företag med en årsomsättning under 5 miljoner dollar.
I BFL:s API kostar Klein 9 dollar per 1 000 bilder i 1K-upplösning. Det är 40 procent mindre än för FLUX.2 [klein] 9B, uppger AA. Klein finns i BFL:s API och i BFL Playground, och modellvikterna finns på Hugging Face. FLUX 3 Image finns i BFL:s API, på tjänsten fal och på OpenRouter.
Läs mer: Modeller