Microsoft RoboGen: generare task, skill e ambienti robotici dal testo
In una frase Microsoft e CMU presentano RoboGen: pipeline automatica che usa LLM per generare task robotici, ambienti simulati e skill di training da una semplice descrizione testuale.
Addestrare un robot normalmente richiede tantissimi dati: bisogna mostrare al robot come fare ogni singola cosa, migliaia di volte. RoboGen risolve questo problema in modo diverso: invece di raccogliere dati reali, genera automaticamente situazioni di training usando un modello linguistico.
Si descrive a parole cosa si vuole che il robot faccia (ad esempio "apri un cassetto e prendi una bottiglia"), e RoboGen crea automaticamente l'ambiente virtuale, la sequenza di passi da compiere e il codice di training. Il robot si allena nel simulatore e poi viene trasferito nel mondo reale.
Questo riduce drasticamente il tempo e il costo per insegnare nuovi comportamenti a un robot.
Aziende
Microsoft, Carnegie Mellon University
Tool
RoboGen, GPT-4, Isaac Gym
Tag
Fonti