NVIDIA a Hugging Face rozširujú LeRobot o model GR00T 1.7 a framework Isaac Teleop
NVIDIA a Hugging Face chcú pridať do LeRobot nové modely a workflow pre zber dát, tréning a nasadenie robotických politík. Cosmos 3 je zatiaľ plánovaná integrácia.
NVIDIA a Hugging Face oznámili zámer rozšíriť open source knižnicu LeRobot o ďalšie nástroje pre vývoj robotiky. Do ekosystému má pribudnúť model NVIDIA Isaac GR00T 1.7 a framework NVIDIA Isaac Teleop; model NVIDIA Cosmos 3 je podľa NVIDIA zatiaľ len plánovaný.
LeRobot slúži na tréning, spúšťanie a zdieľanie datasetov, modelov a workflow pre robotiku. Podľa NVIDIA má integrácia zjednotiť postupy od zberu dát až po evaluáciu a deployment. Isaac Teleop má v prostredí LeRobot pomôcť so záznamom ľudských demonstrácií v štandardizovaných formátoch, čo je dôležité najmä pri vytváraní tréningových dát pre manipulation a humanoidné úlohy.
GR00T 1.7 NVIDIA opisuje ako otvorený vision-language-action (VLA) model určený pre humanoidné roboty. V praxi má byť dostupný cez workflow LeRobot na post-training, fine-tuning a testovanie na rôznych robotických platformách. Treba však rozlišovať, že ide o oznámenie smerovania integrácie a nie o nezávisle overené porovnanie výkonu v priemyselnej prevádzke.
Pri Cosmos 3 NVIDIA uvádza budúce využitie na generovanie a rozširovanie robotických dát, simuláciu scenárov a podporu policy development tam, kde sú reálne dáta drahé alebo obmedzené. Keďže táto časť ešte len smeruje do LeRobot, nejde o aktuálne dostupnú funkciu v plnom workflow.
NVIDIA zároveň pripomína širšie prepojenie svojho stacku s LeRobot. Podľa NVIDIA už ekosystém zahŕňa open source physical AI dataset s viac ako 350 000 trajektóriami a 57 miliónmi graspov, pričom dataset bol podľa NVIDIA stiahnutý viac ako 15 miliónov ráz. Dopĺňajú ho aj nástroje Isaac Sim, Isaac Lab, Isaac Lab-Arena a integrácia Jetson Thor s robotom Reachy 2.
Pre priemyselnú robotiku je podstatné najmä to, že sa posilňuje otvorený reťazec pre zber dát, simuláciu, tréning a evaluáciu. Aktuálny stav je však potrebné čítať ako rozšírenie open source vývojových nástrojov, nie ako hotové nasadenie konkrétneho produkčného riešenia.
Zdroj: NVIDIA Blog — Robotics
Primárny zdroj
