Notebookcheck Logo

Apple MGIE vrijgegeven als open-source AI beeldbewerkingsprogramma

Een voorbeeld van MGIE invoer en uitvoer. (Bron: arXiv)
Een voorbeeld van MGIE invoer en uitvoer. (Bron: arXiv)
Applehet nieuwste AI-model wordt geprezen als "revolutionair" omdat het taken kan uitvoeren zoals "Photoshop-achtige aanpassingen" op basis van aanwijzingen die verwerkt worden met behulp van multimodale grote taalmodellen (MLLM's). Het heet dan ook MLLM-Guided Image Editing (MGIE) en is in staat om afbeeldingen op pixelniveau te "manipuleren".

AI kan worden gebruikt voor zowel beeldbewerking als generatiedeze toepassing van machinaal leren kan echter moeite hebben om menselijke instructies, die onderhevig kunnen zijn aan technische, opzettelijke of geïdealiseerde cosmetische variatie, te matchen met het werkelijke doel en de bijbehorende uitvoer. Echter, Apple's nieuwe MGIE-model wordt echter al beschouwd als in staat om die technologie te "revolutioneren".

Het wordt gecrediteerd met de verbeterde "interpretatie" van instructies, compleet met context zoals het "beseffen" dat een prompt als "verander de achtergrond en voeg een Star Wars achtergrond toe" de toevoeging van "een lichtzwaard of een ruimteschip" zou kunnen inhouden, dankzij de integratie van MLLM'swaardoor het mogelijk superieure resultaten geeft in kwalitatieve analyse en menselijke evaluatie in vergelijking met zijn rivaal InsPix2Pix of voorganger LLM-Guided Image Editing (LGIE).

Het kan ook gebruikmaken van zijn MLLM om te "redeneren" dat een oproep om een voedselfoto "gezonder" te maken zou kunnen inhouden dat er wat groenten worden toegevoegd. MGIE is in staat om dit te doen op een "Photoshop" niveau, en ook om ofwel plaatselijke ofwel algemene "foto-optimalisatie" uit te voeren met nauwkeurigheid en precisie op pixelniveau.

Deze nieuwste stap van Apple in het AI-onderzoek is gepresenteerd op de International Conference on Learning Representations 2024 (ICLR 2024) in samenwerking met een team van de University of California Santa Barbara (UCSB), dat ook een paper heeft gepubliceerd gebaseerd op hetzelfde werk dat momenteel beschikbaar is op op arXiv.

Een Apple MacBook Air M2 als vernieuwd Premium model in Starlight op Amazon

Apple ontwikkelt een nieuw AI-model voor beeldbewerking. (Bron: arXiv)
Apple ontwikkelt een nieuw AI-model voor beeldbewerking. (Bron: arXiv)

Bron(nen)

Please share our article, every link counts!
> Overzichten en testrapporten over laptops en mobieltjes > Nieuws > Nieuws Archief > Nieuws archieven 2024 02 > Apple MGIE vrijgegeven als open-source AI beeldbewerkingsprogramma
Deirdre O'Donnell, 2024-02- 9 (Update: 2024-02- 9)