Ein mysteriöses neues Bildgenerierungsmodell schlägt Modelle von Midjourney, Black Forest Labs und OpenAI im Crowdsourcing-Benchmark für künstliche Analyse.
Das Modell mit dem Namen „red_panda„liegt in der Text-zu-Bild-Bestenliste von Artificial Analysis rund 40 Elo-Punkte vor dem zweitbesten Modell, Flux1.1 Pro von Black Forest Labs. Artificial Analysis verwendet Elo, ein Rangsystem, das ursprünglich zur Berechnung des relativen Fähigkeitsniveaus von Schachspielern entwickelt wurde, um die Leistung der verschiedenen getesteten Modelle zu vergleichen.
Ähnlich wie der Community-KI-Benchmark Chatbot Arena bewertet Artificial Analysis Modelle durch Crowdsourcing. Bei Bildmodellen wählt die künstliche Analyse zufällig zwei Modelle aus und gibt ihnen eine eindeutige Eingabeaufforderung. Anschließend werden die Eingabeaufforderung und die daraus resultierenden Bilder angezeigt, und Benutzer wählen aus, welches ihrer Meinung nach die Eingabeaufforderung besser widerspiegelt.
Zugegebenermaßen gibt es in diesem Abstimmungsprozess eine gewisse Voreingenommenheit. Die Wähler von Artificial Analysis sind größtenteils KI-Enthusiasten, und ihre Entscheidungen spiegeln möglicherweise nicht die Präferenzen der breiteren Gemeinschaft generativer KI-Benutzer wider.
Aber auch hinsichtlich der Generierungsgeschwindigkeit ist red_panda eines der leistungsstärksten Modelle auf der Bestenliste. Das Modell benötigt im Durchschnitt etwa 7 Sekunden, um ein Bild zu erzeugen – über 100-mal schneller als DALL-E 3 von OpenAI.
Woher kommt also red_panda? Welches Unternehmen hat es hergestellt? Und wann können wir mit der Veröffentlichung rechnen? Alles gute Fragen. KI-Labore nutzen dazu zunehmend Community-Benchmarks Vorfreude wecken Allerdings steht die Ankündigung noch bevor, sodass es möglicherweise nicht lange dauert, bis wir es herausfinden.