Apple Vision Pro ile Robotları Uzaktan Kontrol Edin, NVIDIA: 'İnsan-Makine Entegrasyonu Zor Değil'

Jensen Huang, "AI'nın bir sonraki dalgası robotlardır ve en heyecan verici gelişmelerden biri insansı robotlardır." dedi. Bugün, Project GR00T önemli bir adım attı.

Dün, NVIDIA'nın kurucusu Jensen Huang, SIGGRAPH 2024 ana konuşmasında genel amaçlı insansı robot modeli "Project GR00T" hakkında konuştu. Model bir dizi işlevsel güncelleme aldı.

Texas Üniversitesi'nden yardımcı profesör Yuke Zhu ve NVIDIA'da kıdemli araştırma bilimcisi, RoboCasa ve MimicGen büyük ölçekli ev robotu simülasyon eğitim çerçevelerinin NVIDIA Omniverse platformu ve Isaac robot geliştirme platformuna nasıl entegre edildiğini gösteren bir video paylaştı.

Video, NVIDIA'nın AI, Omniverse ve Jetson Thor'dan oluşan üç hesaplama platformunu kapsıyor ve bunları geliştirici iş akışlarını basitleştirmek ve hızlandırmak için kullanıyor. Bu hesaplama platformlarının birleşik yetenekleri ile fiziksel AI ile desteklenen insansı robotlar dönemine girmeye hazırız.

Öne çıkanlar arasında geliştiricilerin Apple Vision Pro'yu kullanarak insansı robotları uzaktan kontrol edebileceği yer alıyor.

Bu arada, NVIDIA'da başka bir kıdemli araştırma bilimcisi Jim Fan, Project GR00T'taki güncellemelerin heyecan verici olduğunu belirtti. NVIDIA, robot verilerini ölçeklendirmek için sistematik bir yaklaşım kullanarak robotik alandaki en zorlu sorunlardan bazılarını ele alıyor.

Fikir basit: insanlar gerçek robotlarda gösterim verileri toplar ve NVIDIA bu verileri simülasyonlarda bin kat veya daha fazla ölçeklendirir. GPU hızlandırmalı simülasyonlarla, insanlar artık insan veri toplama sürecinin zaman alıcı, iş gücü gerektiren ve maliyetli olan kısmını değiştirmek için hesaplama gücünü kullanabilirler.

Kısa süre önce, uzaktan çalışmanın temel olarak ölçeklenemez olduğunu düşündüğünü belirtti çünkü atomik dünyada her robot için günde 24 saat sınırı ile her zaman kısıtlıyız. GR00T'te kullanılan yeni sentetik veri hattı, dijital dünyada bu sınırlamayı kırıyor.

NVIDIA'nın insansı robotlardaki en son gelişmeleri hakkında bir internet kullanıcısı, Apple Vision Pro'nun en havalı kullanım alanını bulduğunu yorumladı.

NVIDIA, bir sonraki dalgayı: fiziksel AI'yi yönlendirmeye başlıyor.

NVIDIA ayrıca insansı robotları hızlandırma sürecini bir blog yazısında detaylandırdı. İşte tam içerik:

Dünyada insansı robotların gelişimini hızlandırmak için, NVIDIA, dünya genelindeki önde gelen robot üreticileri, AI model geliştiricileri ve yazılım üreticileri için bir dizi hizmet, model ve hesaplama platformu duyurdu. Bu, onlara bir sonraki nesil insansı robotları geliştirme, eğitme ve inşa etme imkanı tanıyor.

Bu set, robot simülasyonu ve öğrenimi için yeni NVIDIA NIM mikro hizmetleri ve çerçevelerini, çok aşamalı robot iş yüklerini çalıştırmak için NVIDIA OSMO orkestrasyon hizmetini ve AI ile simülasyonu destekleyen uzaktan operasyon iş akışını içeriyor. Bu, geliştiricilerin robotları minimum insan gösterim verisi ile eğitmelerine olanak tanıyor.

Jensen Huang, "AI'nın bir sonraki dalgası robotlardır ve en heyecan verici gelişmelerden biri insansı robotlardır. Tüm NVIDIA robot yelpazesini geliştiriyoruz, bunu insansı robot geliştiricilerine ve şirketlerine açıyoruz, onlara ihtiyaçlarına en uygun platformları, hızlandırılmış kütüphaneleri ve AI modellerini kullanma imkanı tanıyoruz." dedi.

NVIDIA NIM ve OSMO ile geliştirmeyi hızlandırma.

NIM mikro hizmetleri, NVIDIA çıkarım yazılımı ile güçlendirilmiş önceden oluşturulmuş konteynerler sunarak dağıtım süresini haftalardan dakikalar seviyesine indiriyor.

İki yeni AI mikro hizmeti, robotik uzmanların NVIDIA Isaac Sim'deki fiziksel AI simülasyon iş akışlarının oluşturulmasını geliştirmesine olanak tanıyacak.

MimicGen NIM mikro hizmeti, Apple Vision Pro gibi uzaktan kaydedilen veri ile sentetik hareket verileri üretir. Robocasa NIM mikro hizmeti, OpenUSD'de robot görevleri ve simülasyon ortamları oluşturur.

Bulut tabanlı yönetilen hizmet NVIDIA OSMO artık mevcut ve kullanıcıların karmaşık robot geliştirme iş akışlarını yerel veya bulut üzerindeki dağıtılmış hesaplama kaynakları arasında koordine etmelerine ve ölçeklendirmelerine olanak tanıyor. OSMO, robot eğitimi ve simülasyon iş akışlarını önemli ölçüde basitleştirerek dağıtım ve geliştirme döngülerini birkaç aydan bir haftanın altına indiriyor.

İnsansı robot geliştiricileri için gelişmiş veri toplama iş akışları sağlamak.

İnsansı robotların arkasındaki temel modelleri eğitmek, büyük miktarlarda veri gerektirir. İnsan gösterim verisini elde etmenin bir yolu uzaktan çalışmadır, ancak bu yöntem giderek daha pahalı ve zaman alıcı hale gelmektedir.

SIGGRAPH bilgisayar grafikleri konferansında NVIDIA AI ve Omniverse uzaktan operasyon referans iş akışını sergileyerek, araştırmacılar ve AI geliştiricileri, minimum miktarda uzaktan yakalanan insan gösterimlerinden büyük miktarda sentetik hareket ve algı verisi üretebilirler.

İlk olarak, geliştiriciler Apple Vision Pro kullanarak uzaktan gösterimlerin küçük bir kısmını kaydeder. Daha sonra, NVIDIA Isaac Sim'de kayıtları simüle ederler ve MimicGen NIM mikro hizmetini kullanarak kayıtlardan sentetik veri setleri üretirler.

Geliştiriciler, Project GR00T insansı robotunun temel modelini eğitmek için hem gerçek hem de sentetik verileri kullanarak önemli zaman tasarrufu sağlar ve maliyetleri azaltır. Daha sonra, robot modelini yeniden eğitmek için Isaac Lab'deki Robocasa NIM mikro hizmetini kullanarak deneyimler oluştururlar. İş akışı boyunca, NVIDIA OSMO, hesaplama görevlerini farklı kaynaklara sorunsuz bir şekilde tahsis ederek geliştiricilerin yönetim yükünü haftalarca azaltır.

NVIDIA insansı robot geliştirici teknolojilerine erişimi genişletiyor.

NVIDIA, insansı robot geliştirmeyi basitleştirmek için üç hesaplama platformu sunuyor: modelleri eğitmek için NVIDIA AI süper bilgisayarı; robotların simüle edilmiş bir dünyada öğrenip becerilerini geliştirmesi için Omniverse üzerine inşa edilmiş NVIDIA Isaac Sim; ve modelleri çalıştırmak için NVIDIA Jetson Thor insansı robot bilgisayarı. Geliştiriciler, bu platformların tamamına veya bir kısmına özel ihtiyaçlarına göre erişebilir ve kullanabilirler.

Yeni NVIDIA İnsansı Robot Geliştirici Programı aracılığıyla, geliştiriciler yeni ürünlere ve NVIDIA Isaac Sim, NVIDIA Isaac Lab, Jetson Thor ve Project GR00T genel insansı robot temel modelinin en son sürümlerine erken erişim kazanabilirler.

1x, Boston Dynamics, ByteDance, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra ve Skild AI, erken erişim programına katılan ilk şirketler arasında yer alıyor.

Geliştiriciler artık NVIDIA Humanoid Robot Geliştirici Programına katılarak NVIDIA OSMO ve Isaac Lab'a erişim sağlayabilir ve yakında NVIDIA NIM mikro hizmetlerine erişim elde edebilirler.

Blog bağlantısı: https://nvidianews.nvidia.com/news/nvidia-accelerates-worldwide-humanoid-robotics-development

En son AI bilgileri için WriteGo ile takipte kalın