Nvidia heeft vandaag aangekondigd dat het een familie van fundamentele AI-modellen uitbrengt, genaamd Cosmos, die kunnen worden gebruikt om mensachtigen, industriële robots en zelfrijdende auto’s te trainen. Terwijl taalmodellen leren hoe ze tekst kunnen genereren door te trainen in grote hoeveelheden boeken, artikelen en posts op sociale media, is Cosmos ontworpen om afbeeldingen en 3D-modellen van de fysieke wereld te genereren.
Tijdens een keynote-presentatie op de jaarlijkse CES-conferentie in Las Vegas liet Nvidia-CEO Jensen Huang voorbeelden zien van Cosmos die wordt gebruikt om activiteiten in magazijnen te simuleren. Cosmos werd getraind op 20 miljoen uur aan echte beelden van ‘mensen die lopen, handen bewegen, dingen manipuleren’, zei Jensen. “Het gaat niet om het genereren van creatieve inhoud, maar om het leren van de AI om de fysieke wereld te begrijpen.”
Onderzoekers en startups hopen dat dit soort fundamentele modellen robots die in fabrieken en huizen worden gebruikt, geavanceerdere mogelijkheden kunnen bieden. Cosmos kan bijvoorbeeld realistische videobeelden genereren van dozen die van planken in een magazijn vallen, die kunnen worden gebruikt om een robot te trainen om ongelukken te herkennen. Gebruikers kunnen de modellen ook verfijnen met behulp van hun eigen gegevens.
Een aantal bedrijven gebruiken Cosmos al, zegt Nvidia, waaronder humanoïde robotstartups Agility en Figure AI, maar ook zelfrijdende autobedrijven zoals Uber, Waabi en Wayve.
Nvidia heeft ook software aangekondigd die is ontworpen om verschillende soorten robots te helpen nieuwe taken efficiënter uit te voeren. De nieuwe functie maakt deel uit van Nvidia’s bestaande Isaac-robotsimulatieplatform waarmee robotbouwers een klein aantal voorbeelden van een gewenste taak kunnen nemen, zoals het vastpakken van een bepaald object, en grote hoeveelheden synthetische trainingsgegevens kunnen genereren.
Nvidia hoopt dat Cosmos en Isaac bedrijven zullen aanspreken die humanoïde robots willen bouwen en gebruiken. Jensen werd op het podium van CES vergezeld door levensgrote afbeeldingen van 14 verschillende mensachtige robots, ontwikkeld door bedrijven als Tesla, Boston Dynamics, Agility en Figure.
Samen met Cosmos heeft Nvidia ook Project Digits aangekondigd, een ‘persoonlijke AI-supercomputer’ van $3000 die een groot taalmodel met maximaal 200 miljard parameters kan draaien zonder de noodzaak van clouddiensten van bijvoorbeeld AWS of Microsoft. Het kondigde ook zijn langverwachte RTX Blackwell GPU’s van de volgende generatie aan en nieuwe softwaretools om AI-agents te helpen bouwen.
