Sipas materialeve të publikuara nga NVIDIA, Cosmos 3 është modeli i parë në botë i plotë dhe i hapur i themelit AI fizologjik omnimodal. I ndërtuar mbi arkitekturën hibrid Transformer të patentuar të NVIDIA, modeli integrohet me degët e arsyetimit dhe gjenerimit, duke mundësuar arsyetimin vizual, gjenerimin e botës dhe parashikimin e veprimeve brenda një modeli të vetëm. Ai mund të riprodhojë me saktësi rregullat fizike të botës reale si graviteti, përplasja dhe fërkimi. Ndryshe nga modelet e përgjithshme multimodale të dizajnuara kryesisht për gjenerimin e përmbajtjes argëtuese, Cosmos 3 mbështet në mënyrë natyrale hyrjen dhe gjenerimin e pesë modalityve: tekst, imazhe, video, audio ambientale dhe lëvizjen e njeriut dhe robotëve. I trajnuar paraprakisht në të dhëna të mëdha fizike të annotate, modeli mund të gjenerojë në mënyrë autonome të dhëna të realiste për skena dhe trajektoret e lëvizjes që ndjekin ligjet fizike të botës reale.
Informacioni zyrtar tregon se Cosmos 3 është planifikuar në disa nivele modelesh. Versioni Super, me parametra më të mëdhenj, është i dizajnuar për prodhuesit e automjeteve dhe kompanitë e robotikës humanoide për sintetikën e të dhënave në shkallë të madhe dhe zhvillimin e algoritmeve të avancuara. Versioni Bazë i dedikohet ekipeve të vogla dhe të mesme të kërkimit dhe zhvillimit në industri, ndërsa versioni Tiny është optimizuar për implementim lokal në hardware të përpunimit të skajshëm dhe të integruar. NVIDIA ka hapur plotësisht peshat e modelit, kodin burimor dhe datasetet mbështetëse të vlerësimit, me burimet përkatëse që bëhen të disponueshme në platforma të hapura si Hugging Face dhe GitHub. Zhvilluesit globalë mund të accesojnë këto burime falas dhe t’i përshtatin sipas nevojave. Në terma të efikasitetit të implementimit, NVIDIA thotë se modeli mund të comprimojë ciklet e simulimit dhe larggesës tradicionale për robotikën, drejtimin autonom dhe projektet e binarit digjital industrial nga disa muaj në vetëm disa ditë, duke ndihmuar në uljen e kostos së mbledhjes së të dhënave dhe testeve për zhvillimin e AI fizik.
Përveç njoftimit të produktit, NVIDIA gjithashtu zbuloi strategjinë e saj të ekosistemit duke formuar koalicionin NVIDIA Cosmos, një aleancë bashkëpunimi globale. Anëtarët themelues përfshijnë laboratorë kryesorë të AI dhe kompani robotike si Agile Robots, Black Forest Labs, Runway, LTX, dhe Skild AI. Nën kuadrin e bashkëpunimit të koalicionit, organizatat anëtare mund të ndajnë të gjithë grupin e teknologjisë Cosmos 3, të aksesojnë burimet e kompjuterit në re NVIDIA DGX sipas nevojës, dhe të shkëmbejnë algoritmet, benchmarket dhe të dhënat e testimit të industrisë së botës reale. Aleanca ka si qëllim të zhvillojë së bashku standarde të përbashkëta për modelet e botës së hapur dhe të përshpejtojë iterimin dhe komercializimin e teknologjive të AI fizik të brezit të ardhshëm.
Informacioni publikisht i disponueshëm tregon se disa prodhues automjetesh dhe prodhuesish të pajisjeve të automatizimit kanë filluar tashmë teste të brendshme të projekteve bazuar në Cosmos 3. Scenarët e mundshëm të implementimit përfshijnë zhvillimin e robotëve humanoid, simulimin e drejtimit autonom, inspektimin vizual industrial, dhe krijimin e përmbajtjes digjitale realiste.