Marzysz o własnym modelu LEGO? AI zrobi dla ciebie instrukcję krok po kroku

Naukowcy z Carnegie Mellon stworzyli LegoGPT – sztuczną inteligencję, która generuje instrukcje budowy modeli LEGO na podstawie opisu tekstowego. 

Naukowcy z Carnegie Mellon University zaprezentowali LegoGPT – narzędzie oparte na sztucznej inteligencji, które potrafi wygenerować szczegółowe instrukcje budowy modeli z klocków LEGO na podstawie zwykłego opisu tekstowego. Wystarczy wpisać, co chcesz zbudować, a system przygotuje plan krok po kroku.

Proces generowania instrukcji budowy przez LegoGPT wygląda następująco: użytkownik wpisuje w systemie tekstowy opis tego, co chce zbudować, na przykład „mały czerwony samochód” lub „wieża z oknami”. Następnie sztuczna inteligencja analizuje polecenie i tworzy wstępny, uproszczony model 3D konstrukcji. Na tym etapie system sprawdza, czy projekt jest możliwy do zrealizowania z dostępnych na rynku klocków.

Następnie AI dzieli budowlę na kolejne etapy i generuje szczegółowe instrukcje krok po kroku, podobnie jak oficjalne instrukcje LEGO. Każdy etap jest weryfikowany pod kątem stabilności – jeśli w którymś momencie konstrukcja okazuje się niestabilna lub elementy się nakładają, system cofa się do poprzedniego kroku i poprawia projekt. Dzięki temu powstaje plan budowy, który można faktycznie zrealizować.

Twórcy wykorzystali bazowy model językowy Llama 3.2 Instruct 1B od Meta, a gotowe instrukcje można realizować zarówno ręcznie, jak i przy użyciu robotów przemysłowych. Zespół podkreśla, że system był trenowany głównie na elementach LEGO, a sam projekt jest dostępny publicznie na GitHubie na licencji MIT.