|
Klausykite šio straipsnio  |
Kūrėjai gali naudoti „Apple Vision Pro“, kad nuotoliniu būdu valdytų robotus, kad gautų demonstracinius duomenis. Šaltinis: NVIDIA
Šiandien Denveryje vykusioje SIGGRAPH konferencijoje NVIDIA Corp. paskelbė apie modeliavimo, generuojamojo dirbtinio intelekto ir robotikos tyrimus ir pasiūlymus. Bendrovė teigė, kad teikia paslaugų, modelių ir skaičiavimo platformų rinkinį, kad robotai ir dirbtinio intelekto dizaineriai galėtų „kurti, mokyti ir kurti naujos kartos humanoidinę robotiką“.
„Kita AI banga yra robotika, o vienas įdomiausių pokyčių yra humanoidiniai robotai“, pareiškė Jensenas Huangas, NVIDIA įkūrėjas ir generalinis direktorius. „Mes tobuliname visą NVIDIA robotikos paketą, atverdami prieigą prie pasaulio humanoidinių robotų kūrėjams ir įmonėms, kad jie galėtų naudoti platformas, pagreitinimo bibliotekas ir AI modelius, geriausiai atitinkančius jų poreikius.
The bendrovė yra pristatęs 20 mokslinių darbų pas SIGGRAPH. Revas Labaredianas, Omniverse ir virtualizacijos strategijos viceprezidentas, spaudos konferencijoje sakė, kad NVIDIA grafikos tyrimus vykdo nuo 2001 m., todėl jos ryšys su grafika, modeliavimu ir robotika yra nusistovėjęs.
NVIDIA NIM padeda sukurti skaitmeninius dvynius
Ne tik gali modeliavimas padeda kurti robotus ir jų aplinką, tačiau jis taip pat gali būti pritaikytas mokymo gamybos sistemoms, sakė NVIDIA. Jo NIM mikropaslaugos yra iš anksto sukurti konteineriai, naudojant NVIDIA išvadų programinę įrangą siūloma kaip paslauga. Kompanija tvirtino kad jie gali sutrumpinti modelio diegimo laiką nuo kelių savaičių iki minučių.
„Laikas taikyti generatyvųjį AI dabar, bet tai gali būti bauginanti“, – pripažino Kari Briski, NVIDIA generatyvaus AI programinės įrangos produktų valdymo viceprezidentas. „Įmonėms reikia greito kelio į gamybą, kad investicijos atsipirktų. … Tai paskatino NVIDIA NIM standartizuoti dirbtinio intelekto modelių diegimą, o CUDA pagrįsta CUDA.
„Dvi naujos AI mikropaslaugos leis robotikams pagerinti modeliavimo darbo eigą generatyvus fizinis AI in NVIDIA Isaac Simetaloninė robotikos modeliavimo programa, sukurta remiantis NVIDIA Omniverse platforma“, – tvirtino bendrovė.
MimicGen NIM generuoja sintetinius judesio duomenis, pagrįstus įrašais teleoperacija naudojant erdvinius skaičiavimo įrenginius, tokius kaip Apple Vision Pro.
Robocasa NIM generuoja robotų užduotis ir modeliavimui paruoštas aplinkas NVIDIA OpenUSD Universali scenos aprašo sistema, skirta kurti ir bendradarbiauti 3D pasauliuose.
Bendrovė taip pat paskelbė NIM mikropaslaugos padėti vystytis skaitmeniniai dvyniaitaip pat USD jungtis, kad vartotojai galėtų srautiniu būdu masiškai NVIDIA RTX „Apple Vision Pro“ spindulių sekimo duomenų rinkiniai.
USD paieškos NIM, skirtas darbui su „OpenUSD“, gali atlikti teksto 3D išteklių paieškas. Šaltinis: NVIDIA
OSMO leidžia orkestruoti robotą iš debesies
Dabar pasiekiama NVIDIA OSMO yra valdoma debesies paslauga, kurią robotikos kūrėjai gali naudoti norėdami organizuoti ir išplėsti kelių etapų darbo eigą paskirstytuose skaičiavimo ištekliuose, tiek patalpose, tiek debesyje.
„OSMO labai supaprastina robotų mokymo ir modeliavimo darbo eigą, sutrumpina diegimo ir kūrimo ciklo laiką nuo kelių mėnesių iki mažiau nei savaitės“, – sakė NVIDIA. „Vartotojai gali vizualizuoti ir valdyti įvairias užduotis, pvz., generuoti sintetinius duomenis, mokyti modelius, vykdyti mokymąsi sustiprinti ir diegti programinės įrangos testavimą. humanoidaiautonominiai mobilūs robotai (AMR), ir pramoninis manipuliatoriai“.
NVIDIA darbo eigos sujungia tikrus ir sintetinius duomenis
Treniruočių pagrindas modeliai NVIDIA pažymėjo, kad humanoidams ir kitiems robotams paprastai reikia daug duomenų. Teleoperacija Tai vienas iš būdų užfiksuoti žmonių demonstracinius duomenis, tačiau tai gali būti brangu ir atimti daug laiko.
NVIDIA paskelbė apie darbo eigą, kuri naudoja AI ir Omniverse, kad kūrėjai galėtų mokyti robotus su mažesniu duomenų kiekiu, nei buvo reikalaujama anksčiau. Pirma, kūrėjai naudoja Apple Vision Pro, kad užfiksuotų santykinai nedidelį skaičių demonstracijų su nuotoliniu valdymu.
Tada jie imituoja Isaac Sim įrašus ir naudoja MimicGen NIM, kad iš įrašų generuotų sintetinius duomenų rinkinius. Kūrėjai gali apmokyti Projektas GR00T humanoidinio pagrindo modelis su tikrais ir sintetiniais duomenimis, taupantis laiką ir išlaidas, sakė NVIDIA.
Tada robotai gali naudoti Robocasa NIM Izaoko laboratorija sistema, skirta robotų mokymuisi, kad būtų galima generuoti roboto modelio perkvalifikavimo patirtį. Per visą darbo eigą NVIDIA teigė, kad OSMO gali priskirti skaičiavimo užduotis skirtingiems ištekliams, pašalindama kelias savaites trunkančias administracines užduotis.
Pavyzdžiui, Furjė sakė, kad NVIDIA technologija padės jai generuoti sintetinius duomenis, skirtus bendrosios paskirties platformos mokymui.
„Žmogoidinių robotų kūrimas yra nepaprastai sudėtingas – reikia neįtikėtinai daug tikrų duomenų, nuobodžiai paimtų iš realaus pasaulio“, – sakė „Fourier“ generalinis direktorius Alexas Gu. „Naujasis NVIDIA modeliavimas ir generatyvūs AI kūrėjo įrankiai padės paleisti ir paspartinti mūsų modelio kūrimo darbo eigą.
Registruokitės dabar ir sutaupykite.
Humanoidinės įmonės pradeda ankstyvą prieigą
NVIDIA nauja Humanoidų robotų kūrėjų programa siūlo išankstinę prieigą prie NIM ir OSMO, taip pat naujausių NVIDIA Isaac Sim leidimų Omniverse, Isaac Lab, Jetson Thor compute ir Project GR00T pamatų modeliuose.
Bendrovė teigė, kad robotikos kūrėjai, įskaitant 1x, Bostono dinamika„ByteDance Research“, AI laukas, PaveikslasFurjė, Galbot, LimX Dynamics, Mente, Neura RoboticsRobotEra ir Skild AI jau prisijungė prie ankstyvos prieigos programos.
„Boston Dynamics ir NVIDIA turi ilgą glaudaus bendradarbiavimo istoriją, siekdamos peržengti robotikos įmanomų galimybių ribas“, – sakė Aaronas Saundersas, „Boston Dynamics“ vyriausiasis technologijų pareigūnas. „Mes tikrai džiaugiamės, kad šio darbo vaisiai spartina pramonę apskritai, o ankstyvos prieigos programa yra puikus būdas pasiekti geriausias savo klasėje technologijas.
NVIDIA įvykius SIGGRAPH yra a pokalbis prie židinio tarp Huango ir Lauren Goode, vyresniosios rašytojos Laidinis, apie robotikos ir dirbtinio intelekto poveikį pramonės skaitmeninimui. Jis taip pat turės pokalbis su Metos Marku Zuckerbergu.