Danimarka'nın en eski şehirlerinden biri ve otomasyon merkezi olan Odense'deki ROSCon'da NVIDIA ve robotik ekosistemi ortakları, Robot İşletim Sistemi (ROS) geliştiricileri için üretken yapay zeka araçları, simülasyon ve algılama iş akışlarını duyurdu.
Ortaya çıkanlar arasında, ROS geliştiricilerinin ROS'a konuşlandırması için yeni üretken AI düğümleri ve iş akışları da vardı. NVIDIA Jetson platformu uç yapay zeka ve robot teknolojisi için. Üretken Yapay Zeka Robotların çevrelerinin bağlamını algılamasına ve anlamasına, insanlarla doğal bir şekilde iletişim kurmasına ve otonom olarak uyarlanabilir kararlar almasına olanak tanır.
Üretken Yapay Zeka ROS Topluluğuna Geliyor
HATIRLAROS 2 üzerine inşa edilen robotik akıl yürütmeyi ve eylemi geliştirmek için üretken yapay zekayı kullanır. Birleştirir büyük dil modelleri (LLM'ler), görme dili modelleri (VLM'ler) ve geri almayla artırılmış nesil Robotların uzun vadeli anlamsal hafızalar oluşturmasına ve sorgulamasına olanak sağlamak ve çevrelerinde gezinme ve etkileşimde bulunma yeteneklerini geliştirmek.
Konuşma tanıma özelliği, WhisperTRT ROS 2 düğümü. Bu düğüm şunu kullanır: NVIDIA TensorRT optimize etmek OpenAI'nin Whisper modeli NVIDIA Jetson'da düşük gecikmeli çıkarımı etkinleştirerek duyarlı insan-robot etkileşimi sağlar.
Ses kontrollü ROS 2 robotları proje şunu kullanır: NVIDIA Riva Robotların sözlü komutları anlamasını ve yanıt vermesini sağlayan ASR-TTS hizmeti. NASA Jet Propulsion Laboratuvarı bağımsız olarak gösterdi ROSAROS için yapay zeka destekli bir aracı olan ve kendi üzerinde çalışan Nebula-SPOT robotu ve NVIDIA Nova Carter robot içeri NVIDIA Isaac Sim.
ROSCon'da, Kanonik gösteriyor NanoOWLüzerinde çalışan sıfır atışlı bir nesne algılama modelidir. NVIDIA Jetson Orin Nano modül üzerinde sistem. Robotların önceden tanımlanmış kategorilere bağlı kalmadan geniş bir yelpazedeki nesneleri gerçek zamanlı olarak tanımlamasına olanak tanır.
Geliştiriciler bugün kullanmaya başlayabilirler Üretken Yapay Zeka için ROS 2 DüğümleriRobot yeteneklerini geliştirmek için NVIDIA Jetson için optimize edilmiş LLM'leri ve VLM'leri getiriyor.
'Sim-First' Yaklaşımıyla ROS İş Akışlarını İyileştirme
Simülasyon AI özellikli robotları konuşlandırmadan önce güvenli bir şekilde test etmek ve doğrulamak kritik öneme sahiptir. NVIDIA Isaac Sim, üzerine kurulu bir robotik simülasyon platformu USD'yi açROS geliştiricilerine, robotları ROS paketlerine kolayca bağlayarak test etmeleri için sanal bir ortam sağlar. Yeni bir Isaac Sim ile Yeni Başlayanlar İçin ROS 2 İş Akışları KılavuzuRobot simülasyonu ve testi için uçtan uca iş akışını gösteren artık kullanıma sunuldu.
Yüksükotubir üyesi NVIDIA Başlangıç yeni başlayanlar için program, bir entegrasyon gösterdi Bu, geliştiricilerin Foxglove'un Isaac Sim üzerine kurulu özel uzantısını kullanarak simülasyon verilerini gerçek zamanlı olarak görselleştirmesine ve hata ayıklamasına yardımcı olur.
Isaac ROS 3.2 için Yeni Yetenekler
NVIDIA Isaac ROSaçık kaynak üzerine inşa edilmiş ROS2 yazılım çerçevesi, robotik geliştirmeye yönelik hızlandırılmış bilgi işlem paketleri ve yapay zeka modellerinden oluşan bir pakettir. Yaklaşan 3.2 sürümü robot algısını, manipülasyonunu ve çevre haritalamasını geliştiriyor.
Önemli iyileştirmeler NVIDIA Isaac Manipülatörü robotikte al ve yerleştir ve nesne takip ardışık düzenlerinin gelişimini hızlandırmak için FoundationPose ve cuMotion'u entegre eden yeni referans iş akışlarını içerir.
Bir diğeri ise NVIDIA Isaac AlgılayıcıOtonom bir mobil robotun (AMR) çevresel farkındalığını ve depolar gibi dinamik ortamlarda performansını iyileştirmek için yeni bir görsel SLAM referans iş akışı, gelişmiş çoklu kamera algılama ve 3D yeniden yapılandırma özelliklerine sahip.
NVIDIA Isaac'ı Benimseyen İş Ortakları
Robotik şirketleri, NVIDIA Isaac hızlandırmalı kitaplıklarını ve yapay zeka modellerini platformlarına entegre ediyor.
- Bir Teradyne Robotics şirketi olan Universal Robots, bir başlattı yeni AI Hızlandırıcı araç seti Yapay zeka destekli cobot uygulamalarının geliştirilmesini sağlamak.
- Miso Robotik AI destekli robotik patates kızartması yapma Flippy Fry İstasyonunu hızlandırmak ve yemek servisi otomasyonunda verimlilik ve doğrulukta ilerlemeler sağlamak için Isaac ROS'u kullanıyor.
- Wheel.me ile ortaklık yapıyor RGo Robotik ve NVIDIA'nın bir üretime hazır AMR Isaac Perceptor'ı kullanarak.
- Ana Cadde Özerkliği Isaac Perceptor'ı kullanarak sensör kalibrasyonunu kolaylaştırın.
- Orbbec Isaac Perceptor için kullanıma hazır bir AMR çözümü olan Perceptor Geliştirici Kitini duyurdu.
- DUDAKLAR Şirketi bir tanıttı çoklu kamera algılama geliştirme seti Gelişmiş AMR navigasyonu için.
- Kanonik ROS geliştiricileri için, kullanıma hazır uzun vadeli destek sunan tam sertifikalı bir Ubuntu ortamını vurguladı.
ROSCon'da Ortaklarla Bağlantı Kurmak
Canonical, Ekumen, Foxglove, Intrinsic, Open Navigasyon, Siemens ve Teradyne Robotics dahil olmak üzere ROS topluluğu üyeleri ve ortakları Danimarka'da atölye çalışmaları, konuşmalar, stant demoları ve oturumlar sunacak. Öne çıkanlar şunları içerir:
- Open Navigasyon LLC'den Steve Macenski ile “Nav2 Kullanıcı Buluşması” Birds of a Feather oturumu
- BMW AG'den Michael Gentner ve Siemens AG'den Carsten Braunroth ile “Büyük Ölçekli Fabrika Otomasyonunda ROS”
- NVIDIA'dan Kalyan Vadrevu ile “Yapay Zekanın Robot Manipülasyonu İş Akışlarına Entegrasyonu” Kuş Tüyü oturumu
- NVIDIA'dan Markus Wuensch ile “Simülasyonda Büyük Ölçekte Robot Öğrenimini Hızlandırma” Birds of a Feather oturumu
- Açık Navigasyon'dan Macenski ile “Nav2 Bağlantısının Kullanımı Hakkında”
Ayrıca Teradyne Robotics ve NVIDIA, 22 Ekim Salı günü Danimarka'nın Odense kentinde bir öğle ve akşam resepsiyonuna ortak ev sahipliği yapacak.
Açık Kaynak Robotik Vakfı (OSRF), ROSCon'u düzenliyor. NVIDIA destekçisidir Açık RobotikOSRF ve onun tüm girişimlerinin şemsiye kuruluşudur.
En son güncellemeler için şu adresi ziyaret edin: ROSCon sayfası.