- Pesquisadores do MIT e parceiros desenvolveram um sistema robótico guiado por IA que transforma descrições em linguagem natural em objetos físicos, via montagem com peças pré-fabricadas.
- Um modelo gera a geometria 3D do objeto a partir do prompt e outro modelo decide onde cada componente deve ficar, com base na função e na geometria.
- O objeto é construído por montagem robótica com peças pré-fabricadas, que podem ser desmontadas e remontadas, reduzindo desperdício.
- O usuário permanece no processo para refinar o design, por meio de novos comandos, e mais de 90% dos participantes preferiram os designs gerados pela IA em comparação com outras abordagens.
- Futuramente, a ideia é lidar com objetos mais complexos e adicionar mais componentes, para facilitar a fabricação local de móveis e outros itens.
O MIT e parceiros desenvolveram um sistema robótico movido a IA que permite fabricar objetos físicos apenas descritos por palavras. O objetivo é tornar o design mais rápido e acessível para não especialistas, reduzindo desperdícios com peças reutilizáveis.
O sistema usa dois modelos generativos de IA: um para criar uma representação 3D da geometria a partir do prompt do usuário e outro para planejar onde cada componente deve ficar, conforme função e forma. Em seguida, o robô monta as peças com componentes pré-fabricados. O usuário pode iterar o design com feedback.
Como funciona o fluxo de design
Um modelo de visão e linguagem (VLM) interpreta o texto e o modelo de imagem, definindo a disposição de componentes estruturais e de painéis para formar o objeto. O usuário inicia com uma instrução, como “faça uma cadeira”, acompanhada de uma imagem gerada pela IA.
Cada superfície recebe rótulos numéricos, que voltam ao VLM para ajustar a montagem até a geometria ficar completa. O usuário mantém o controle, podendo ajustar o prompt para refinar o resultado, por exemplo, limitando painéis a determinadas áreas.
Resultados e impacto
Em estudo com usuários, mais de 90% preferiu os objetos criados pelo sistema em comparação com outras abordagens. A montagem utiliza peças reconfiguráveis que podem ser desmontadas e reaproveitadas, reduzindo resíduos.
Os pesquisadores apontam aplicações para prototipagem rápida de objetos complexos, como componentes aeroespaciais e estruturas arquitetônicas. Em longo prazo, a ideia é fabricar mobiliário localmente em casa, sem depender de envio de produtos prontos.
Perspectivas e quem participou
Conduzido por Alex Kyaw, estudante do MIT, o trabalho contou com Richa Gupta, Faez Ahmed, Lawrence Sass e Randall Davis, entre outros colaboradores, incluindo equipes da Google DeepMind e Autodesk Research. A apresentação ocorreu na conferência NeurIPS.
Entre na conversa da comunidade