NVIDIA sprístupnila Cosmos 3 Edge pre lokálnu physical AI
Kompaktný model Cosmos 3 Edge má priniesť spracovanie obrazu, videa a senzorických dejov priamo na edge zariadenia v robotike a priemyselnej kontrole.
NVIDIA na konferencii SIGGRAPH oznámila dostupnosť modelu Cosmos 3 Edge určeného pre physical AI systémy pracujúce priamo na okraji siete. Model má štyri miliardy parametrov a podľa výrobcu je optimalizovaný na pamäťovo úspornejšie nasadenie a vysokú priepustnosť na platformách Jetson, RTX PRO, DGX a GeForce RTX.
Cosmos 3 Edge dokáže spracúvať a generovať text, obraz, video, okolitý zvuk aj opis akcie. NVIDIA ho preto smeruje do robotiky, autonómnych vozidiel a inteligentnej infraštruktúry. Priemyselným príkladom je lokálna analýza živých kamerových streamov pri kontrole kvality, logistike alebo monitorovaní prevádzky bez potreby posielať každý dátový tok do cloudu.
Výrobca uvádza, že model možno dodatočne trénovať na vlastných robotických a senzorových dátach a následne nasadiť na Jetson Thor pre riadenie manipulácie alebo pohybu robota v reálnom čase. Agile Robots, Doosan Robotics, Siemens a Skild AI podľa oznámenia technológiu zatiaľ vyhodnocujú pre robotické workflow. To znamená, že všeobecná dostupnosť modelu ešte nie je dôkazom hotového sériového nasadenia u týchto partnerov.
Modely Cosmos 3 Edge, Nano a Super sú dostupné cez Hugging Face; NVIDIA zároveň zverejnila inferenčné a post-tréningové frameworky a recepty na GitHube. Údaje o výkone a prvenstve v benchmarku VANTAGE-Bench pochádzajú z oznámenia výrobcu a pri konkrétnom priemyselnom použití ich bude potrebné overiť na vlastných kamerách, dátach a cieľovom hardvéri.
Zdroj: NVIDIA Blog
Primárny zdroj
