Voltar

Arquitetura Qwen3-VL-4B Avança Controle Robótico Bimanual com Dados Humanos

Aprofundamento CEVIU

Aprofundamento

A arquitetura SHAPE (Supervision from Human Action tokens with Parallel Executable streams), baseada na Qwen3-VL-4B, é um modelo de visão-linguagem-ação (VLA) que aprimora o controle robótico bimanual. Ele opera prevendo tokens de ação discretos de porções do efetor final (EEF) como uma tarefa auxiliar. O grande diferencial está no uso de um especialista em flow-matching compartilhado, que gera dois fluxos de ação executáveis em paralelo: um para o efetor final e outro para as articulações. Essa abordagem permite uma leitura de ações via cinemática inversa, facilitando a transferência de dados humanos para o robô de forma mais eficaz.

A pesquisa mostra que essa supervisão discreta é fundamental para aprender com dados humanos, direcionando os gradientes do modelo e moldando representações ricas em informações de ação em diferentes domínios. Em testes, o SHAPE alcançou um desempenho de 0,80 em seis tarefas, superando outras arquiteturas como a π0.5, que obteve 0,63. O pré-treinamento com dados humanos e tokens discretos permite que o SHAPE aprenda novas tarefas a partir de demonstrações humanas, eliminando a necessidade de conjuntos de dados robóticos específicos para cada tarefa, um avanço significativo para robôs bimodais com mãos de 22 graus de liberdade (DoF).

O que mudou

A abordagem do SHAPE se alinha com uma tendência recente em robótica, onde o uso de dados humanos para pré-treinamento de modelos se mostra cada vez mais eficaz. Por exemplo, em 18 de setembro de 2026, o CEVIU noticiou que o Helix 2.5 da Figure também usou seu próprio dataset de vídeos humanos, o Index, para refinar suas habilidades. No entanto, o SHAPE inova ao focar na previsão de tokens de ação discretos dos efetores finais como tarefa auxiliar, e no uso de um especialista em flow-matching para gerar fluxos de ação paralelos, o que não foi detalhado nas notícias anteriores sobre os avanços da Figure. Embora o objetivo seja similar (aprender com dados humanos para generalizar), a metodologia técnica do SHAPE para processar e aplicar esses dados representa uma evolução na forma como a cinemática inversa é empregada para transferir habilidades humanas para robôs dexterous.

Por que isso importa

Para engenheiros de robótica e desenvolvedores de IA, o sistema SHAPE representa uma evolução promissora na forma como robôs dexterous aprendem e operam. A capacidade de transferir eficientemente habilidades a partir de demonstrações humanas, sem a necessidade de dados robóticos específicos para cada tarefa, pode acelerar drasticamente o desenvolvimento e a implementação de robôs em ambientes complexos. Isso significa menos tempo gasto em programação manual ou coleta de dados exaustiva para cada nova habilidade, abrindo caminho para robôs mais adaptáveis e versáteis em diversas aplicações, especialmente para robôs bimodais com mãos complexas. A melhoria no desempenho e a eficiência do pré-treinamento com dados humanos também sugerem um caminho para sistemas robóticos mais autônomos e intuitivos.

Linha do tempo

  1. Dyna-2 impulsiona robótica com 1 milhão de horas de vídeo, provando leis de escala para destreza zero-shot

  2. IA para Robótica Aprende Habilidades com Vídeos da Internet

  3. Helix 2.5 da Figure Opera em 30 Ambientes Domésticos Inéditos com Alta Eficiência Zero-Shot

  4. Robô humanóide da Figure domina tarefas domésticas complexas com Helix 2.5 e IA zero-shot

  5. Agentes de Codificação Revolucionam Robótica com Abordagem Graph-as-Policy

  6. Novo método capacita modelos 'frontier' a controlar robôs bípedes em tarefas zero-shot

  7. Arquitetura Qwen3-VL-4B Avança Controle Robótico Bimanual com Dados Humanos

Perguntas frequentes

O que é a arquitetura SHAPE?

SHAPE (Supervision from Human Action tokens with Parallel Executable streams) é um modelo de visão-linguagem-ação (VLA) baseado na arquitetura Qwen3-VL-4B. Ele prevê tokens de ação discretos de efetores finais e usa um especialista em flow-matching para gerar fluxos de ação paralelos, otimizando o controle robótico bimanual.

Como o SHAPE aprende tarefas?

O SHAPE aprende tarefas a partir de demonstrações humanas, utilizando dados humanos para pré-treinamento e supervisionando o modelo com tokens de ação discretos. Isso elimina a necessidade de dados robóticos específicos para cada nova tarefa, tornando o aprendizado mais eficiente.

Qual a vantagem do SHAPE em relação a outras arquiteturas?

Em comparação com a arquitetura π0.5, que alcançou 0,63, o SHAPE demonstrou um desempenho superior de 0,80 em seis tarefas. Sua principal vantagem é a capacidade de transferir de forma mais eficiente dados humanos para o robô, graças à leitura dos efetores finais via cinemática inversa e à geração de fluxos de ação paralelos.

O que são mãos de 22-DoF em robôs?

Mãos de 22-DoF (graus de liberdade) referem-se à capacidade de movimento e destreza das mãos de um robô. Um número maior de DoF indica maior flexibilidade e habilidade para realizar tarefas complexas, replicando a complexidade das mãos humanas, o que é crucial para manipulação fina em ambientes diversos.

Fontes

Avalie este artigo:
Categoria
CEVIU Hardware
Publicado
20 de novembro de 2026
Editoria
CEVIU Hardware

Quer receber mais sobre CEVIU Hardware?

Conteúdo curado diariamente, direto no seu e-mail.

Conteúdo curado diariamenteDiversas categoriasCancele quando quiser

IA aplicada na indústria

No CEVIU Experts, quem conhece um setor por dentro e sabe aplicar IA nele fica visível para as empresas que precisam resolver um problema ali.

Você trabalha com IA na indústria?

Sua ficha reúne o setor que você conhece, as competências de IA que domina e o que mostra como prova. Publicar depende só de você.

Tem um problema parecido para resolver?

Descreva o que a sua empresa precisa resolver e publique como demanda. Procurar direto entre os Experts de Indústria também é caminho.