Apple stworzyło model AI, który pozwala na manipulację obrazami za pomocą poleceń tekstowych

Apple dołącza do wyścigu o popularność w obszarze AI. Zamiast jednak tworzyć model językowy, Apple poszło w obszar modyfikacji obrazu. 

Apple, choć pozostaje w tyle za ChatGPT i Gemini od Google pod wieloma względami, inwestuje w sztuczną inteligencję, mając na celu wprowadzenie tej technologii do linii iPhone 16 i iOS 18. Pierwsze efekty tych inwestycji zaczynają być widoczne. Badacze z Apple przedstawili nowy model AI, który może edytować obrazy na podstawie poleceń użytkownika wydawanych w języku naturalnym. Technologia ta prawdopodobnie zostanie zaprezentowana podczas wydarzenia WWDC 2024 w czerwcu.

Nowy model AI Apple, nazwany „MGIE” czyli MLLM-Guided Image Editing, to multimodalny duży model językowy, który może interpretować i wykonywać polecenia użytkownika na poziomie piksela. Narzędzie może manipulować i edytować wiele obszarów obrazu, takich jak jasność, ostrość, kontrast i wiele innych. Potrafi również nadać obrazowi efekty artystyczne.

żródło: Apple

Oprócz tego edycja może zmieniać kształt, kolor, rozmiar i teksturę przedmiotu na zdjęciu. Edycja podobna do Photoshopa obejmuje zmianę rozmiaru obrazu, przycinanie, obracanie i dodawanie filtrów. Użytkownicy mogą również zmieniać tło obrazu. Nowy model AI Apple rozumie kontekst i powszechne rozumowanie. Na przykład można dodać obraz pizzy i polecenie, aby uczynić potrawę… bardziej zdrową. Tak, nasze salami zostanie zastąpione np. pomidorami – AI automatycznie doda warzywa do obrazu, rozumiejąc, że zdrowie jest kojarzone z warzywami.

Narzędzie może także manipulować oświetleniem i kontrastem obrazu. Ponadto edycja podobna do Photoshopa może również usuwać obiekty z tła na żądanie użytkownika. Firma nawiązała współpracę z naukowcami z Uniwersytetu Kalifornijskiego, aby stworzyć MGIE, a gdy technologia będzie gotowa, Apple stworzy różne aplikacje na swoje urządzenia, które będą korzystały z tego modelu. Należy spodziewać się, że Apple zapowie więcej funkcjonalności podczas WWDC 2024, równocześnie z iOS 18 i innymi aktualizacjami oprogramowania.