AI-forskningsstartup OpenAI har tillkännagett (öppnas i en ny flik) DALL·E 2, en uppdatering av dess text-till-bild-generator som ser ut som ett stort steg framåt.
I huvudsak kan DALL·E 2 skapa konst från naturligt språkinmatning, såsom: "en målning av en räv som sitter på ett fält i gryningen i stil med Claude Monet." OpenAI säger att målet är att skapa "realistiska, originella bilder och konstverk" som kan "blanda koncept, attribut och stilar."
Det är en verkligt imponerande bedrift för ett företag som har inlett flera AI-initiativ, inklusive GPT-3 (öppnas i en ny flik), som kan producera ganska anmärkningsvärd prosa.
Den medföljande OpenAI forskningsartikeln går in mycket mer i detalj om hur DALL E 2 fungerar. Med hjälp av kontrastiva CLIP-modeller exekveras DALL E 2 i två steg: det första skapar en CLIP-bild inbäddad med en texttext, och den andra genererar en bildbaserad på det.
Resultaten är mycket imponerande och kan få stora konsekvenser för konst- och grafisk designindustrin, särskilt videospelsstudior, som för närvarande anställer designers för att mödosamt bygga världar och koncept.
DALL·E 2 bygger på det arbete OpenAI gjorde med DALL·E 1, som tillkännagavs (öppnas i en ny flik) i januari 2021. Namnet är en portmanteau av Salvador Dalí och WALL·E.
En modig ny värld
OpenAI är en av de mest spännande startups som arbetar inom AI just nu.
Grundat 2015 av Elon Musk, Sam Altman, Ilya Sutskever och andra, är målet att producera "vänlig AI" som gynnar mänskligheten som helhet. Den ideella startupen konkurrerar med Alphabets DeepMind.
DALL·E 2 är ett mycket bra exempel på detta arbete i praktiken, och tänjer på gränserna för vad som är möjligt när det gäller att generera bilder med AI. Tjänsten kan till och med redigera befintliga bilder enligt användarens specifikationer.
Det är förstås en lång väg att gå. Forskarna noterade att deras CLIP-baser lätt kan luras att märka ett element som ett annat. Men med tiden kommer dessa defekter att lösas och förbättras.
OpenAI planerar att lansera DALL·E 2 redo att välja ut forskare.