Salta al contenuto

IA

NVIDIA sforna 4 modelli da 16B e i robot ora hanno un mondo dei sogni

NVIDIA mette sul tavolo quattro nuovi checkpoint open-weight di Cosmos 3, ciascuno con 16 miliardi di parametri addestrabili. Coprono scene di guida, flussi di sensori e bracci robotici, con una licenza che permette l'uso commerciale.

Foto di copertina: Coolcaesar / CC BY-SA 4.0

TL;DR

  1. NVIDIA ha rilasciato quattro checkpoint open-weight di Cosmos 3 per la simulazione di mondi, ciascuno con 16B di parametri addestrabili.
  2. Obiettivi: dati di guida, flussi camera più LiDAR, da simulatore a video e previsione di azioni per robot bimanuali.
  3. La licenza OpenMDW1.1 consente uso commerciale e non commerciale, secondo i suoi termini.

Cosa è successo

NVIDIA ha aggiunto quattro checkpoint open-weight alla famiglia Cosmos 3, parte della piattaforma Cosmos per costruire world model. Tutti e quattro sono versioni post-addestrate di Cosmos 3 Nano e ognuno ha 16 miliardi di parametri addestrabili.

La formazione è specializzata. Cosmos3-Nano-Transfer-Auto produce dati di guida multi-vista con meteo, luce e orari del giorno diversi. Cosmos3-Nano-Sim-Auto trasmette in streaming osservazioni di camera e LiDAR allineate, per la simulazione della guida.

Cosmos3-Nano-Sim-Transfer prende i controlli da un simulatore più un prompt testuale e restituisce video fotorealistico. Cosmos3-Nano-Sim-Bimanual prevede il video a partire dalle azioni del robot o della camera.

La licenza è OpenMDW1.1, che consente uso commerciale e non commerciale secondo i suoi termini. NVIDIA affianca ai download anche un report tecnico e delle demo.

Perché conta

Un world model è, più o meno, una macchina che immagina cosa succede dopo. Per la robotica e la guida autonoma è un affare serio, perché i test nel mondo reale sono lenti, costosi e ogni tanto coinvolgono un paraurti.

NVIDIA presenta i checkpoint come complementari. Sim-Bimanual prevede le conseguenze visive delle azioni, mentre Sim-Transfer converte i controlli di un simulatore fisico in osservazioni generate. Due strade diverse per la stessa meta: un finto mondo abbastanza convincente in cui allenarsi.

Il checkpoint per meteo e luce è il favorito silenzioso del pubblico. La pioggia a mezzanotte è difficile da mettere in calendario su una pista di prova e banale da chiedere a un modello.

I pesi aperti di un grande produttore di chip abbassano anche la barriera per ricercatori e startup che preferirebbero non trattare una licenza proprietaria prima di insegnare a un braccio a raccogliere oggetti.

Cosa cambia in Europa

L'Europa ha un bel po' di laboratori di robotica e programmi di guida autonoma, e pesi aperti con permesso commerciale fanno comodo. Nel rilascio non c'è nulla di specifico su termini, prezzi o disponibilità per l'UE, quindi confronta il testo della licenza con le tue esigenze di compliance prima di costruirci sopra qualcosa.

Cosa farne

  • Leggi prima la licenza.OpenMDW1.1 consente l'uso commerciale secondo i suoi termini: dai un'occhiata a quei termini prima di mettere in produzione.
  • Abbina checkpoint e lavoro.Chi fa guida guarda i modelli Auto, chi fa manipolazione guarda Sim-Bimanual, chi usa simulatori guarda Sim-Transfer.
  • Parti dal report tecnico.Arriva con il rilascio e ti dirà più di qualsiasi titolo, compreso questo.
  • Guarda le demo prima di scaricare.Giudica la qualità dell'output sul tuo tipo di scenario, non sul video promozionale.

Ciao, sapiens. I robot ora hanno un mondo dei sogni. Tu in questo qui l'affitto devi ancora pagarlo.