Humanoid Robot Storm, NVIDIA fører en ny bølge af legemliggjort intelligens med en tre-lags computerplatform

Nov 13, 2024 Læg en besked

Jo mere teknologien udvikler sig, jo tættere er den på livet.

I de seneste to år har AI indtaget den absolutte C-position på listen over varme emner inden for teknologi. Efter eksplosionen af ​​ChatGPT, som en anden vigtig gren af ​​AI-udvikling, er "embodied intelligens" ved at blive et varmt emne med udbredt bekymring rundt om i verden. Pludselig er "embodied robotter" også blevet en ny vinge i videnskabs- og teknologiindustrien.

 

Ifølge definitionen af ​​CCF-eksperter refererer embodied intelligens til et intelligent system baseret på opfattelsen og handlingen af ​​den fysiske krop, som indhenter information, forstår problemer, træffer beslutninger og realiserer handlinger gennem interaktionen mellem agenten og omgivelserne, således som at producere intelligent adfærd og tilpasningsevne, og dets nøgleord er "legemliggørelse", det vil sige, det er ikke bare abstrakte algoritmer og data, men interagerer med verden gennem fysiske former.

 

Den såkaldte embodied robot, det vil sige førstepersons intelligens med initiativ, er i bund og grund en robot, der kan interagere med omgivelserne og opfatte og selvstændigt kan planlægge, træffe beslutninger, handle og have evnen til at eksekvere. Ikke kun humanoide robotter, enhver håndgribelig intelligent maskine, der kan bevæge sig gennem rummet, er en form for legemliggjort robot, hvis kernemål er at kunne høre menneskeligt sprog, derefter nedbryde opgaver, planlægge underopgaver, interagere med miljøet og til sidst fuldføre de tilsvarende opgaver.

 

At dømme ud fra den nuværende udviklingsstatus for industrien er humanoide robotter den bedste bærende form for legemliggjort intelligens. Drevet af politik, kapital og markedet har globale teknologigiganter som NVIDIA, OpenAI, Microsoft og Amazon genindsprøjtet markedet, og teknologicirklen ser ud til at have udgivet et signal om den næste afsætningsmulighed - æraen for humanoid robotter nærmer sig.

 

news-772-392

Øg robotbanen og led den nye bølge af humanoide robotter

Som en global leder inden for AI-computerkraft kredser NVIDIAs layout inden for intelligente robotter hovedsageligt omkring de tre kerneområder store modeller, data og udviklingsplatforme, med det ultimative mål at opbygge et underliggende udviklingsøkosystem for robotter.

 

Siden 2018 har NVIDIA arbejdet på intelligente robotter. På det tidspunkt lancerede NVIDIA NVIDIA Isaac, en ny hardware, software og en virtuel verdensrobotsimulator, Jetson Xavier, en computerplatform designet specielt til robotteknologi og relaterede robotsoftwareværktøjssæt, der affyrede det første skud i området intelligent robotik.

 

Fra 2019 til 2022 åbnede NVIDIA op for et allround-layout inden for intelligente robotter. Disse omfatter Isaac SDK SDK i 2019, Omniverse-platformen i 2021 og Isaac Nova Orin i 2022.

 

I 2023 har NVIDIA udgivet en ny runde af "generative AI + robotics"-planer, der gør et stærkt indtog inden for intelligent robotik. Ved at udnytte den nyeste generative AI og avancerede simuleringsteknologier har NVIDIA annonceret det nye Jetson AGX Orin-modul i industriel kvalitet og nye versioner af Isaac ROS- og Isaac Sim-software, der forbedrer ydeevnen på tværs af produktlinjen og sænker barrieren for adgang.

 

Når det kommer til embodied intelligens, er NVIDIA-grundlæggeren Jensen Huangs "platform" aldrig stoppet.

Huang har gentagne gange sagt i offentlige taler, at "den næste bølge af AI vil være legemliggjort intelligens." Ved dette års GTC24 sagde Huang også, at "at udvikle en grundlæggende model til en generel humanoid robot er et af de mest spændende emner i AI-rummet i dag."

 

I februar etablerede NVIDIA også GEAR, et forskningslaboratorium for generel brug af agenter, som fokuserer på forskning inden for multimodale modeller, robotter til generelle formål, virtuelle verdensbaserede agenter, simulering og syntetiske data for at fremme intelligente applikationer på tværs af flere modaliteter og scenarier.

 

Det er værd at nævne, at på GTC24 lancerede NVIDIA GR00T (Generalist Robot 00 Technology) og Jetson Thor, en ny humanoid robotcomputer, som ikke kun markerer et stort gennembrud inden for humanoid. robotteknologi til NVIDIA, men sætter også et nyt benchmark for hele robotindustrien.

 

I detaljer omfatter GR{{0}T's kernefunktioner naturlig sprogforståelse, adfærdsimitation og multimodal læring, som effektivt kan ændre den måde, humanoide robotter lærer den virkelige verden på: ved at forstå naturlig sprogtekst, menneskeligt sprog, videoer, live demonstrationer osv., kan robotten efterligne menneskelige kropsbevægelser eller anden adfærd, for at opnå interaktion med den virkelige verden.

 

news-849-451

 

Jetson Thor er NVIDIAs nye computerplatform designet specifikt til humanoide robotter, som er "hjernen" i humanoide robotter.

Computerplatformen bag den er afgørende for at opnå effektive humanoide robotter, og Jetson Thor er drivkraften bag GR00T.

 

Jetson Thor, der er i stand til at udføre komplekse opgaver og interagere sikkert og naturligt med mennesker og maskiner, har en modulær arkitektur optimeret til ydeevne, strømforbrug og størrelse og kan nemt integreres i forskellige typer humanoide robotter, hvilket understøtter robottens overordnede ydeevne. og i høj grad forenkle design og udvikling af humanoide robotter.

 

Hvad mere er, bringer Jetson Thor AI-egenskaber, der er i stand til at drive humanoide robotter. I forlængelse af arven fra Jetson-seriens høje ydeevne leverer Jetson Thor 800 billioner 8-bit floating-point AI-ydelse pr. sekund for at køre multimodale generative AI-modeller såsom GR00T, drevet af den næste- generation NVIDIA Blackwell-arkitektur og transformermotor.

 

Sammenlignet med NVIDIAs tidligere generation af Hopper-arkitektur, leverer Blackwell-arkitekturen adskillige gange bedre ydeevne i alle aspekter. Derudover er der tilføjet ny præcision til Blackwell Tensor-kernerne, og andengenerations-transformermotoren bygget på denne arkitektur understøtter 4-bit floating-point AI-inferens, hvilket fordobler regnekraften og modelstørrelsen.

 

Derudover integrerer Jetson Thor en funktionel sikkerhedsprocessor, en højtydende CPU-klynge og 100 GB Ethernet-båndbredde for at levere overlegen ydeevne, uanset om det er realtidsopfattelse og beslutningstagning i komplekse miljøer eller stabil drift under høje belastninger.

 

Tre-lags computerplatformen rammer markedet og accelererer udviklingen af ​​den globale humanoide robotindustri

"Processor + Platform + Udviklingsværktøjer" er den "tre-i-en", som NVIDIA har for at komme ind på hvert nyt marked, og det samme gælder for humanoide robotter.

Til forskel fra traditionelle automatiserede maskiner eller simple fjernstyrede enheder har humanoide robotter mere komplekse kropsstrukturer og perceptionsevner og kan interagere med miljøet mere naturligt og fleksibelt. Fremkomsten af ​​denne type robot markerer AI's spring fra en enkelt databehandling til en omfattende opfattelse, beslutningstagning og handlingsevne. Bag alt dette er højtydende computerkraft rygraden i NVIDIAs styrke.

 

Som NVIDIAs flagskibsprodukt inden for AI er NVIDIA AI-supercomputeren en superintelligent platform, der integrerer højtydende databehandling, deep learning og big data-analyse.

 

I udviklingsprocessen af ​​humanoide robotter er modeltræning en afgørende del, som skal håndtere enorme mængder data og komplekse algoritmer. NVIDIA AI-supercomputeren med dens kraftfulde GPU-parallelle computeregenskaber kan accelerere denne proces betydeligt, forkorte modeltræningscyklussen og forbedre træningseffektiviteten, hvilket gør det muligt hurtigt at udvikle og iterere humanoide robotter. Derudover kan humanoide robotter gennem effektiv modeltræning også forstå miljøet mere præcist og udføre instruktioner og dermed demonstrere mere kraftfulde egenskaber i praktiske applikationer.

 

Udover sin computerkraft har NVIDIA mange års erfaring med simulering, og dens komplette løsning til robotteknologi, NVIDIA Isaac, har fået meget opmærksomhed siden starten.

 

Isaac-platformen byder på en række NVIDIA-accelerationsbiblioteker, AI-grundmodeller og avancerede simuleringsteknologier, som robotproducenter kan integrere i deres teknologistakke.

 

Isaac Sim: Byg en sømløs bro mellem det virtuelle og det virkelige

Isaac Sim er en NVIDIA-bygget robotsimuleringsreferenceapplikation og en af ​​kernekomponenterne i NVIDIA Isaac, med nøglefunktioner som et yderst realistisk robotsimuleringsmiljø, modulært design og fleksibel applikation, understøttelse af tilpasning og udvidelse og problemfri integration med andre NVIDIA værktøjer.

 

news-787-421

 

Bygget på Omniverse-platformen, integrerer Isaac Sim Omniverses avancerede teknologier og værktøjer, såsom PhysX-fysikmotoren, real-time ray tracing, path tracing og Material Definition Language (MDL), for at give et yderst realistisk, interaktivt virtuelt miljø til design og test af humanoide robotter.

 

I denne virtuelle verden kan udviklere simulere en række komplekse scenarier, fra simpel objektgreb til komplekse miljøudforskning, uden egentlig at bygge en fysisk prototype, for fuldt ud at evaluere robottens adfærd og ydeevne. Dette reducerer ikke kun R&D-omkostningerne markant, men accelererer også iterationscyklussen, hvilket gør det muligt for humanoide robotter at tilpasse sig til forskellige applikationsscenarier hurtigere.

 

Styrken ved Isaac Sim er også, at den integrerer en avanceret fysikmotor og AI-algoritmer, som kan simulere næsten virkelige fysiske interaktioner, såsom kollisioner, friktion, tyngdekraft osv., hvilket giver en træningsplads tæt på den virkelige verden for robotter.

 

Derudover kan Isaac Sim integreres problemfrit med ROS2, hvilket gør det nemt for udviklere at forbinde deres robots hjerne til den virtuelle verden for effektiv udvikling og test, som alle driver udviklingen og adoptionen af ​​robotsimuleringsteknologi.

 

Isaac Lab: Den intelligente vugge for humanoid robotlæring

Hvis Isaac Sim er "træningspladsen" for humanoide robotter, så er Isaac Lab den "intelligente vugge" for humanoide robotter. Isaac Lab er en letvægtsapplikation bygget oven på Isaac Sim, der er optimeret til forstærkning, mimik og overførselslæring for at træne alle typer robotforekomster. Her kan udviklere bruge avancerede teknologier som forstærkningslæring og imitationslæring til at lære robotter, hvordan de opfatter deres omgivelser, træffer beslutninger og udfører opgaver.

 

Isaac Lab er tæt integreret med Isaac Sim, der danner en komplet lukket sløjfe fra simulering til læring. I øjeblikket kan Isaac Lab understøtte samtidig træning og simulering af tusindvis af robotter.

 

news-561-316

Lanceringen af ​​NVIDIAs Layer 3-computerplatform markerer en ny udviklingsfase for den humanoide robotindustri. Sammen danner NVIDIA AI-supercomputeren, NVIDIA Isaac Sim-simuleringsplatformen og NVIDIA Jetson Thor humanoid robotcomputeren et komplet økosystem til udvikling, test og anvendelse af humanoide robotter. Etableringen af ​​dette økosystem accelererer ikke kun udviklingen og optimeringen af ​​humanoide robotter, men giver også uendelige muligheder for anvendelse af humanoide robotter inden for intelligent fremstilling, kommercielle tjenester, medicinsk sundhed, hjemmetjenester og andre områder.

 

Med den kontinuerlige udvikling af teknologi og den fortsatte udvidelse af markedet forventes den humanoide robotindustri at indvarsle en mere strålende morgendag, og NVIDIA Layer 3-computerplatformen vil være en uundværlig innovationsmotor og drivkraft i denne proces.

 

Epilog og fremtiden

I nutidens hurtige udvikling af videnskab og teknologi bliver humanoide robotter gradvist en bro, der forbinder virkeligheden og fremtiden, de bærer ikke kun menneskers længsel efter intelligent liv, men også et vigtigt symbol på hele samfundets videnskabelige og teknologiske fremskridt. .

Med sin dybe teknologiakkumulering og fremadrettede strategiske vision bygger NVIDIA gradvist et unikt økosystem inden for humanoide robotter. Fra at levere en højtydende computerplatform, til at skabe et simuleringsmiljø til at understøtte den faktiske drift af modeller, demonstrerer NVIDIAs all-round, flerlags layout ikke kun sin urokkelige tillid til fremtiden for humanoide robotter, men tilfører også en stærk impuls. i udviklingen af ​​hele branchen.

 

Derudover er finalen på GTC24 også 9 humanoide robotter. Det kan ses, at robotter i dag er blevet placeret i en vigtig position på NVIDIAs forretningskort, og æraen med embodied robot transformation tilhørende NVIDIA er begyndt.