A NVIDIA lança novos modelos físicos de IA enquanto parceiros globais apresentam robôs de última geração.
Resumo das notícias:
- De manipuladores móveis a humanoides, a Boston Dynamics, a Caterpillar, a Franka Robots, a Humanoid, a LG Electronics e a NEURA Robotics lançam novos robôs e máquinas autônomas construídos com tecnologias da NVIDIA.
- A NVIDIA lança novos modelos e dados abertos do NVIDIA Cosmos e GR00T para aprendizado e raciocínio de robôs, o Isaac Lab-Arena para avaliação de robôs e a estrutura de computação edge-to-cloud OSMO para simplificar os fluxos de trabalho de treinamento de robôs.
- A NVIDIA e a Hugging Face integram modelos e bibliotecas abertas do NVIDIA Isaac ao LeRobot para acelerar a comunidade de robótica de código aberto.
- O módulo Jetson T4000, com arquitetura NVIDIA Blackwell, já está disponível, oferecendo 4 vezes mais eficiência energética e poder computacional para IA.
CES — A NVIDIA anunciou hoje novos modelos abertos, estruturas e infraestrutura de IA para IA física e apresentou robôs para todos os setores, desenvolvidos por parceiros globais.
As novas tecnologias da NVIDIA agilizam os fluxos de trabalho em todo o ciclo de desenvolvimento de robôs, impulsionando a próxima geração da robótica , incluindo a construção de robôs generalistas-especialistas capazes de aprender rapidamente diversas tarefas.
Líderes globais do setor, incluindo Boston Dynamics, Caterpillar, Franka Robotics, Humanoid , LG Electronics e NEURA Robotics, estão usando a plataforma de robótica da NVIDIA para lançar novos robôs com inteligência artificial.
“O momento ChatGPT para a robótica chegou. Os avanços na IA física — modelos que entendem o mundo real, raciocinam e planejam ações — estão desbloqueando aplicações totalmente novas”, disse Jensen Huang, fundador e CEO da NVIDIA. “O conjunto completo de processadores robóticos Jetson da NVIDIA, CUDA, Omniverse e modelos abertos de IA física capacita nosso ecossistema global de parceiros a transformar setores com robótica orientada por IA.”
Novos modelos abertos impulsionam o aprendizado e o raciocínio de robôs.
Transformar as máquinas atuais, caras, de tarefa única e difíceis de programar, em robôs generalistas-especialistas capazes de raciocinar exige enorme capital e conhecimento especializado para construir modelos fundamentais.
A NVIDIA está criando modelos abertos que permitem aos desenvolvedores evitar o pré-treinamento, que consome muitos recursos, e se concentrar na criação da próxima geração de robôs com IA e máquinas autônomas. Esses novos modelos, todos disponíveis no Hugging Face, incluem:
- NVIDIA Cosmos™ Transfer 2.5 e NVIDIA Cosmos Predict 2.5 — modelos de mundo abertos e totalmente personalizáveis que permitem a geração de dados sintéticos com base física e a avaliação de políticas de robôs em simulação para IA física.
- NVIDIA Cosmos Reason 2 é um modelo de linguagem de visão (VLM) de raciocínio aberto que permite que máquinas inteligentes vejam, compreendam e ajam no mundo físico como humanos.
- NVIDIA Isaac™ GR00T N1.6 , um modelo de visão, linguagem e ação (VLA) de raciocínio aberto, desenvolvido especificamente para robôs humanoides, que permite o controle total do corpo e utiliza o NVIDIA Cosmos Reason para um melhor raciocínio e compreensão contextual.
A Franka Robotics, a NEURA Robotics e a Humanoid estão usando fluxos de trabalho habilitados para GR00T para simular, treinar e validar novos comportamentos para robôs. A Salesforce está usando o Agentforce, o Cosmos Reason e o NVIDIA Blueprint para busca e sumarização de vídeos , a fim de analisar as imagens capturadas por seus robôs e reduzir o tempo de resolução de incidentes pela metade.
A LEM Surgical está usando o NVIDIA Isaac for Healthcare e o Cosmos Transfer para treinar os braços autônomos de seu robô cirúrgico Dynamis, equipado com NVIDIA Jetson AGX Thor ™ e Holoscan. A XRlabs está usando o Thor e o Isaac for Healthcare para permitir que endoscópios cirúrgicos, começando pelos exoscópios, guiem os cirurgiões com análises de IA em tempo real.
Novas estruturas de simulação e computação de código aberto para o desenvolvimento de robótica.
A simulação escalável é essencial para o treinamento e avaliação de robôs, mas os fluxos de trabalho atuais permanecem fragmentados e difíceis de gerenciar. A avaliação comparativa (benchmarking) geralmente é manual e difícil de escalar, enquanto os pipelines de ponta a ponta exigem uma orquestração complexa em recursos computacionais distintos.
A NVIDIA lançou hoje novas estruturas de código aberto no GitHub que simplificam esses fluxos de trabalho complexos e aceleram a transição da pesquisa para casos de uso no mundo real.
NVIDIA Isaac Lab-Arena é uma estrutura de código aberto, disponível no GitHub, que fornece um sistema colaborativo para avaliação e comparação de políticas de robôs em larga escala em simulação, com as camadas de avaliação e tarefas projetadas em estreita colaboração com a Lightwheel . O Isaac Lab-Arena se conecta a benchmarks líderes do setor, como Libero e Robocasa, padronizando os testes e garantindo que as habilidades dos robôs sejam robustas e confiáveis antes da implantação em hardware físico.
NVIDIA OSMO é uma estrutura de orquestração nativa da nuvem que unifica o desenvolvimento robótico em um único centro de comando fácil de usar. O OSMO permite que os desenvolvedores definam e executem fluxos de trabalho, como geração de dados sintéticos , treinamento de modelos e testes de software em loop em diferentes ambientes de computação — de estações de trabalho a instâncias de nuvem mistas — acelerando os ciclos de desenvolvimento.
O OSMO já está disponível e é utilizado por desenvolvedores de robôs como a Hexagon Robotics, além de estar integrado ao conjunto de ferramentas do Microsoft Azure Robotics Accelerator .
NVIDIA e Hugging Face aceleram o desenvolvimento de IA física de código aberto.
A robótica é agora a categoria de crescimento mais rápido na Hugging Face, onde os modelos e conjuntos de dados abertos da NVIDIA lideram os downloads em meio a uma crescente comunidade de código aberto.
Para fortalecer essa comunidade, a NVIDIA está trabalhando com a Hugging Face para integrar as tecnologias de código aberto Isaac e GR00T à principal plataforma de robótica de código aberto LeRobot, proporcionando acesso simplificado a ferramentas integradas de software e hardware que aceleram o desenvolvimento de ponta a ponta. Essa colaboração une os 2 milhões de desenvolvedores de robótica da NVIDIA à comunidade global de 13 milhões de criadores de IA da Hugging Face.
Os modelos GR00T N e Isaac Lab-Arena já estão disponíveis na biblioteca LeRobot para facilitar o ajuste fino e a avaliação. O humanoide Reachy 2, de código aberto da Hugging Face, será totalmente interoperável com o computador robótico NVIDIA Jetson Thor™ , permitindo que os desenvolvedores executem qualquer VLA, incluindo o GR00T N1.6. O robô de mesa Reachy Mini, também de código aberto da Hugging Face, é totalmente interoperável com o NVIDIA DGX Spark™ para criar experiências personalizadas com os modelos de linguagem NVIDIA e modelos abertos de voz e visão computacional que são executados localmente.
Desenvolvedores de robôs humanoides adotam o NVIDIA Jetson Thor.
O NVIDIA Jetson Thor atende aos enormes requisitos de computação para robôs humanoides com capacidade de raciocínio. Na CES, desenvolvedores de robôs humanoides estão apresentando novos robôs de última geração, agora integrados ao Jetson Thor.
A NEURA Robotics está lançando um humanoide de terceira geração projetado pela Porsche, além de um humanoide menor otimizado para controle preciso. A Richtech Robotics está lançando o Dex, um humanoide móvel para manipulação e navegação sofisticadas em ambientes industriais complexos. A AGIBOT está apresentando humanoides para os setores industrial e de consumo, e o Genie Sim 3.0, uma plataforma de simulação de robôs integrada ao Isaac Sim . A LG Electronics revelou um novo robô doméstico projetado para realizar uma ampla gama de tarefas domésticas.
A Boston Dynamics, a Humanoid e a RLWRLD integraram o Jetson Thor em seus humanoides existentes para aprimorar suas capacidades de navegação e manipulação.
Levando a IA Física para a Vanguarda Industrial:
Oferecendo um caminho de atualização econômico e de alto desempenho para clientes do NVIDIA Jetson Orin ™, o novo módulo NVIDIA Jetson™ T4000 traz a arquitetura NVIDIA Blackwell para máquinas autônomas e robótica em geral por US$ 1.999 em um volume de 1.000 unidades. Ele oferece 4 vezes o desempenho da geração anterior com 1.200 TFLOPS FP4 e 64 GB de memória, tudo dentro de um envelope configurável de 70 watts, ideal para autonomia com restrições de energia.
A NVIDIA IGX Thor , que estará disponível ainda este mês, leva a robótica para a borda industrial, oferecendo computação de IA de alto desempenho com suporte a software empresarial e segurança funcional. A Archer está usando a IGX Thor para levar a IA à aviação, aprimorando recursos críticos em segurança de aeronaves, integração do espaço aéreo e sistemas prontos para autonomia.
Parceiros como AAEON, Advantech , ADLINK , Aetina , AVerMedia , Connect Tech, EverFocus , ForeCR , Lanner , RealTimes, Syslogic, Vecow e YUAN oferecem sistemas com tecnologia Thor, equipados para IA de ponta, robótica e aplicações embarcadas.
Além disso, a Caterpillar está expandindo sua colaboração com a NVIDIA para levar inteligência artificial avançada e autonomia a equipamentos e canteiros de obras nos setores de construção e mineração. O CEO da Caterpillar, Joe Creed, compartilhará detalhes ao lado do vice-presidente de Robótica e IA de Borda da NVIDIA, Deepu Talla, durante uma apresentação na CES na quarta-feira, 7 de janeiro.
Imagem em destaque cedida por Caterpillar (canto superior esquerdo), LEM Surgical (canto superior direito), AGIBOT (canto inferior esquerdo) e Franka Robotics (canto inferior direito)
Fonte: NVIDIA
