Recentemente, o Centro Nacional de Terras, em parceria com a Weitai Robotics, lançou o primeiro conjunto de dados do mundo — e atualmente o maior e mais completo — de operações robóticas multimodais de visão e tato entre diferentes tipos de robôs:
Baihu – VTouch.
O lançamento desse dataset marca uma evolução importante na percepção visual-tátil dos robôs, saindo de um único formato para interações reais entre múltiplas plataformas robóticas.
Baihu – VTouch inaugura um novo paradigma de coleta de dados para interações reais multimodais de visão e tato em diferentes corpos robóticos. O conjunto de dados não inclui apenas informações de sensores visuotáteis de alta precisão, mas também integra visão RGB-D em profundidade, posições articulares e outros dados essenciais, totalizando mais de 60.000 minutos de registros. Para garantir ampla generalização, a coleta de dados abrangeu diversas configurações, como robôs humanoides de tamanho completo (Qinglong), robôs humanoides com rodas e até dispositivos inteligentes portáteis.
Em termos de detalhamento, o dataset utiliza sensores de alto desempenho com resolução de 640×480 e taxa de atualização de 120 Hz, capazes de capturar com precisão variações mínimas durante o contato com objetos. Até o momento, já foram acumulados cerca de 90,72 milhões de pares de amostras reais de contato, com foco em mais de 260 tarefas intensivas em contato, distribuídas em quatro grandes cenários: doméstico, alimentação, industrial e operações especiais.
Pesquisas indicam que, com a introdução da percepção visuotátil, cerca de 70% das tarefas passaram a apresentar descrições mais contínuas dos estados de contato. Isso fornece uma base de dados fundamental para avanços em manipulação robótica de alta precisão, controle refinado de força e capacidade de auto-recuperação após falhas durante a execução de tarefas.