ChatGPT
Perplexity
Claude
Gemini
Über 100 Werbebriefings und 500 Videos hinweg bewertet, erzielt Director Spitzenplätze in allen drei Qualitätskategorien und liefert die konsistentesten Gesamtwerte.
OpenArt Director belegte Platz 1 im Arc-Ads-Benchmark von Physion Labs, einer unabhängigen menschlichen Bewertung von fünf KI-Agenten zur Werbeerstellung. Er teilt sich den Spitzenplatz mit Runway.
Eine starke Videowerbung vereint eine klare Botschaft, eine fesselnde Geschichte und eine ausgefeilte Umsetzung. Sie muss Aufmerksamkeit erregen und dabei Produkt, Angebot und kreative Richtung treu zum Briefing halten.
Die Bewertung von Physion untersucht, wie gut KI-Agenten diese Anforderungen zusammenführen. Für OpenArt markieren die Ergebnisse einen weiteren Meilenstein beim Aufbau kreativer Intelligenz, die Menschen hilft, Ideen in fertige Kreativarbeit zu verwandeln.
Vom Werbebriefing zum fertigen Creative
Jeder Agent erhielt dieselben 100 Werbebriefings und erstellte 500 Videowerbungen, die über 24 Metriken hinweg bewertet wurden.
Menschliche Prüfer kontrollierten, ob jedes Video der gewünschten Handlung, dem Format, dem eingeblendeten Text, den Werbeaussagen und dem Audio folgte. Sie beurteilten außerdem die Konsistenz über Szenen hinweg und verglichen Werbungen direkt nebeneinander, um ihre kreative Umsetzung zu bewerten.
Director erzielte in allen drei Kategorien einen Spitzenplatz:
- Briefing-Treue und Kohärenz: Befolgt die Anweisungen und hält Geschichte, Produkt, Charaktere und Stil konsistent.
- Produktionsqualität: Erzeugt gut umgesetzte Visuals, Bewegung, Audio, Beleuchtung und Farbe.
- Werbewirkung: Menschliche Einschätzungen zu Aufmerksamkeit, Klarheit, Originalität, Markeneindruck und Überzeugungskraft.
Die Kategorie Effektivität bewertet das Creative selbst anhand menschlicher Einschätzungen – nicht anhand von Live-Kampagnenergebnissen.
Höchste Werte bei vier Produktionsgrundlagen
Director schnitt bei vier einzelnen Kriterien besser ab als jeder andere bewertete Agent, einschließlich Runway:
- Der Handlung folgen: Enthält die geforderten Szenen und Aktionen in der vom Briefing vorgegebenen Reihenfolge.
- Liefert den gewünschten Ton und Dialog: Enthält die geforderten Audioelemente und gesprochenen Zeilen.
- Saubere Visuals rendern: Vermeidet verunstaltete Gesichter, Körper, Objekte und andere visuelle Fehler.
- Audio stabil halten: Hält gleichmäßige Pegel ohne Übersteuerung, Knistern, Aussetzer oder ungewollte Stille.
Das sind praktische Details, die bestimmen, ob ein Creative seinem Briefing folgt und wie viel Aufmerksamkeit seine Umsetzung noch braucht. Directors Höchstwerte bei diesen Kriterien zeigen Stärken darin, Anweisungen in eine kohärente, ausgefeilte Werbung umzusetzen.
Die konsistentesten Gesamtwerte über 100 Briefings hinweg
Director verzeichnete außerdem die geringste Streuung der Gesamtqualitätswerte unter den fünf bewerteten Agenten.
Das ist wichtig, weil Kreativproduktion unterschiedliche Produkte, Botschaften und Storytelling-Anforderungen umfasst. Ein nützlicher Workflow muss all diese Aufgaben meistern.
Das Ergebnis belegt Directors Konsistenz über die getesteten Briefings hinweg – neben seinem Spitzenplatz insgesamt.
Kreative Intelligenz für die Werbung aufbauen
Ein Werbebriefing legt fest, was ein Creative kommunizieren muss. Es in ein fertiges Video zu verwandeln, erfordert zusammenhängende Entscheidungen zu Szenen, Tempo, Komposition und Ton.
Das ist die kreative Intelligenz, die wir mit Director aufbauen: die Absicht eines Kreativen verstehen und die Entscheidungen koordinieren, die nötig sind, um sie auszudrücken.
Director bringt diesen Prozess in einen dialogorientierten Workflow – mit einer professionellen Timeline zum Verfeinern des Ergebnisses. Kreative können ein Konzept entwickeln, dessen Umsetzung steuern und den finalen Schnitt gestalten, während das Briefing im Mittelpunkt der Arbeit bleibt.
OpenArt hat den Anspruch, den agentischen Wandel in der Kreativarbeit anzuführen und leistungsfähige Kreativproduktion für mehr Menschen zugänglich zu machen.
„Unsere Mission ist es, Kreativität zugänglich zu machen. Eine starke kreative Idee sollte nicht von einem großen Produktionsbudget abhängen, um zum Leben zu erwachen“, sagte Coco Mao, CEO von OpenArt. „Wir entwickeln Director, um Menschen zu helfen, ihre Vision in fertige Arbeit zu verwandeln – mit Kontrolle über Geschichte, Botschaft und Endergebnis.“