ChatGPT
Perplexity
Claude
Gemini
Evaluado en 100 briefs de anuncios y 500 vídeos, Director obtiene los primeros puestos en las tres categorías de calidad y ofrece las puntuaciones globales más consistentes.
OpenArt Director ha quedado en el n.º 1 del benchmark Arc Ads de Physion Labs, una evaluación humana independiente de cinco agentes de generación de anuncios con IA. Comparte el primer puesto con Runway.
Un buen anuncio de vídeo reúne un mensaje claro, una historia atractiva y una ejecución pulida. Debe captar la atención manteniendo el producto, la oferta y la dirección creativa fieles al brief.
La evaluación de Physion analiza lo bien que los agentes de IA integran estos requisitos. Para OpenArt, los resultados marcan otro hito en la construcción de una inteligencia creativa que ayuda a las personas a convertir ideas en trabajo creativo terminado.
De un brief de anuncio a un creativo terminado
Cada agente recibió los mismos 100 briefs de anuncios, produciendo 500 anuncios de vídeo evaluados con 24 métricas.
Los evaluadores humanos comprobaron si cada vídeo seguía el guion, el formato, el texto en pantalla, los mensajes comerciales y el audio solicitados. También evaluaron la consistencia entre escenas y compararon los anuncios en paralelo para juzgar su ejecución creativa.
Director obtuvo el primer puesto en las tres categorías:
- Fidelidad al brief y coherencia: Seguir las instrucciones y mantener la coherencia de la historia, el producto, los personajes y el estilo.
- Calidad de producción: Producir imágenes, movimiento, audio, iluminación y color bien ejecutados.
- Eficacia del anuncio: Valoraciones humanas de la atención, la claridad, la originalidad, la impresión de marca y la persuasión.
La categoría de eficacia evalúa el propio creativo mediante juicios humanos, en lugar de los resultados de campañas reales.
Las puntuaciones más altas en cuatro aspectos esenciales de producción
Director puntuó más alto que cualquier otro agente evaluado, incluido Runway, en cuatro aspectos concretos:
- Seguir la historia: Incluir las escenas y acciones requeridas en el orden especificado por el brief.
- Ofrecer el sonido y el diálogo solicitados: Incluir los elementos de audio y las líneas habladas requeridos.
- Renderizar imágenes limpias: Evita caras, cuerpos, objetos y otros defectos visuales deformes.
- Mantener el audio estable: Mantener niveles estables sin recortes, crujidos, cortes ni silencios no deseados.
Estos son detalles prácticos que determinan si un creativo sigue su brief y cuánta atención puede necesitar su ejecución. Las puntuaciones más altas de Director en estos aspectos reflejan sus fortalezas al traducir instrucciones en un anuncio coherente y pulido.
Las puntuaciones globales más consistentes en 100 briefs
Director también registró la menor variación en las puntuaciones de calidad global entre los cinco agentes evaluados.
Esto importa porque la producción creativa implica distintos productos, mensajes y requisitos narrativos. Un flujo de trabajo útil debe rendir en todos esos encargos.
El resultado aporta evidencia de la consistencia de Director en los briefs evaluados, junto con su primer puesto global.
Construyendo inteligencia creativa para la publicidad
Un brief de anuncio establece lo que un creativo necesita comunicar. Convertirlo en un vídeo terminado requiere decisiones conectadas sobre escenas, ritmo, composición y sonido.
Esta es la inteligencia creativa que estamos construyendo con Director: entender la intención de un creador y coordinar las decisiones necesarias para expresarla.
Director lleva ese proceso a un flujo de trabajo conversacional, con una línea de tiempo profesional para pulir el resultado. Los creadores pueden desarrollar un concepto, guiar su ejecución y dar forma a la edición final manteniendo el brief en el centro del trabajo.
La ambición de OpenArt es liderar el cambio agéntico en el trabajo creativo, haciendo que una producción creativa capaz sea accesible a más personas.
«Nuestra misión es hacer que la creatividad sea accesible. Una buena idea creativa no debería depender de tener un gran presupuesto de producción para hacerse realidad», afirmó Coco Mao, CEO de OpenArt. «Estamos construyendo Director para ayudar a las personas a convertir su visión en trabajo terminado, con control sobre la historia, el mensaje y el resultado final.»