Apple is niet een van de leidende spelers op de markt voor kunstmatige intelligentie, maar het nieuwe open-source AI-model van de technologiegigant voor beeldbewerking laat zien hoeveel het bedrijf aan het veld zou kunnen bijdragen.
Het model, genaamd MLLM-Guided Image Editing (MGIE), maakt gebruik van multimodale grote taalmodellen (MLLM) om tekstopdrachten bij beeldverwerking te interpreteren. Met andere woorden, met deze tool heeft de gebruiker de mogelijkheid om foto's te bewerken op basis van de tekst die hij invoert. Hoewel het niet het eerste hulpmiddel is dat dit kan doen, "zijn menselijke instructies soms te kort om moderne methoden vast te leggen en uit te voeren", aldus het projectdocument.
Het bedrijf ontwikkelde MGIE samen met onderzoekers van de Universiteit van Californië. MLLM's kunnen eenvoudige of dubbelzinnige tekstprompts omzetten in meer gedetailleerde en begrijpelijke instructies die een foto-editor kan volgen. Als een gebruiker bijvoorbeeld een foto van een pepperoni-pizza wil bewerken om 'die gezonder te maken', kan MLLM dat interpreteren als 'groentetoppings toevoegen' en de foto dienovereenkomstig bewerken.
Naast het aanbrengen van basiswijzigingen in afbeeldingen, kan MGIE ook foto's bijsnijden, vergroten of verkleinen en roteren, en de helderheid, het contrast en de kleurbalans verbeteren, allemaal met tekstprompts. Ook kun je de tool gebruiken om bepaalde delen van de foto te bewerken en bijvoorbeeld het haar, de ogen en de kleding van de persoon erop te veranderen, of elementen uit de achtergrond te verwijderen.
Apple heeft het model vrijgegeven GitHub, maar geïnteresseerden kunnen ook de demoversie proberen, die momenteel wordt gehost op Hugging Face Spaces. Het bedrijf heeft nog niet gezegd of het van plan is de leerresultaten van het project te gebruiken als hulpmiddel of als functie die het in een van zijn producten zou kunnen opnemen.
Lees ook: