Uma equipe de engenheiros e especialistas em IA lançaram um projeto que retrocede o mundo digital: o LegoGPT, que cria objetos com peças do famoso brinquedo.
Em um estudo publicado na última quinta-feira (8), os cientistas explicaram o mecanismo, que cria peças de Lego através de prompts. Além disso, o sistema usa a IA para garantir que o resultado possa ser reproduzido no mundo real, seja artesanal ou por assistência robótica.
Os engenheiros criaram um enorme dataset de peças de Lego com suas legendas. O treinamento do modelo de linguagem de grande escala foi autorregressivo, permitindo que o LegoGPT conseguisse prever a próxima peça para adicionar ao design.
Contudo, ao contrário de modelagens autônomas do brinquedo, o LegoGPT produz instruções para criar Legos que não se divergem.
Como os engenheiros criaram a ferramenta
No estudo, a principal autora, Ava Pun, explica que a maioria dos modelos de geração 3D focam em criar objetos diversos com detalhes geométricos.
Como esses designs não podem ser recriados fisicamente, os engenheiros decidiram limitar a quantidade de designs no LegoGPT.
Assim, o modelo gera brinquedos de Lego que correspondem aos prompts, mas se limita a 21 objetos, como bancos, camas, garrafas, tigelas, cadeiras e mesas. Também há objetos mais “elaborados”, como guitarras, sofás, trens, navios, gaiolas e guitarras.
[1/2] We've released the code for LegoGPT. Our autoregressive model generates physically stable and buildable designs from text prompts by integrating physics laws and assembly constraints into LLM training and inference.Code: github.com/AvaLovelace1…Website: avalovelace1.github.io/LegoGPT/
Para isso, os engenheiros modificaram a tecnologia do modelo de linguagem de instruções LLaMA-3.2-1B-Instruct, da Meta, para que o LegoGPT se assemelhasse ao modelo da OpenAI.
Portanto, em vez de previsão da próxima palavra, o LegoGPT remodelou o modelo da Meta para realizar a “previsão de próximo bloco”. Em seguida, os engenheiros ampliaram o modelo de previsão de blocos usando um software que verifica a estabilidade física através de modelos matemáticos.
Como usar o LegoGPT
Tais modelos conseguem simular forças gravitacionais e estruturais e foi treinado com mais de 47 mil estruturas estáveis de Lego com prompts descritivos. Apesar de modificar o modelo da Meta, a IA que gerou os prompts do LegoGPT foi o GPT-4o, da OpenAI.
Se você quer criar seus próprios designs para imprimir em 3D, os engenheiros do LegoGPT disponibilizaram a ferramenta, os modelos e o código, facilitando a replicação do uso.
No entanto, a plataforma não permite adicionar cores e texturas por ser uma versão demo. Para usar o LegoGPT completo, é necessária uma instalação total usando o Python, possibilitando criar designs dos brinquedos mais realistas.
O LegoGPT lista as instruções de instalação e os melhores prompts, mas na versão demo os comandos são bem simples. “Crie uma mesa com superfície retangular”, ou “sofá compacto com design geométrico”. O Giz Brasil usou o seguinte prompt “Silhueta compacta de guitarra com recorte duplo”.
O resultado ficou parecido com uma guitarra? Imagem: Screenshot/Giz Brasil
Com a popularidade do LegoGPT, a fila enorme resultou em mais de uma hora para gerar o brinquedo com todos os blocos. Aliás, por falar em blocos, o LegoGPT lista o número de blocos de estrutura retangular que a IA usou para formar o brinquedo.
Jornalista e mineiro. Já escreveu sobre tecnologia, games e ciência no site Hardware.com.br e outros sites especializados, mas gosta mesmo de falar sobre os Beatles.
fique por dentro das novidades giz
Inscreva-se agora para receber em primeira mão todas as notícias sobre tecnologia, ciência e cultura, reviews e comparativos exclusivos de produtos, além de descontos imperdíveis em ofertas exclusivas
