Notícias

May 26, 2023

WiMi desenvolveu um sistema fechado

PEQUIM, 27 de julho de 2023 /PRNewswire/ -- A WiMi Hologram Cloud Inc. (NASDAQ: WIMI) ("WiMi" ​​ou a "Empresa"), fornecedora líder global de tecnologia de Realidade Aumentada de Holograma ("AR"), anunciou hoje que

PEQUIM, 27 de julho de 2023 /PRNewswire/ -- WiMi Hologram Cloud Inc. (NASDAQ: WIMI) ("WiMi" ​​ou a "Empresa"), fornecedora líder global de tecnologia de Realidade Aumentada de Holograma ("AR"), anunciou hoje que um O método de assistência guiado por AR é descrito para fornecer feedback visual aprimorado ao usuário para controle de circuito fechado usando um IMC híbrido que combina sinais de EEG e rastreamento ocular para controle intuitivo e eficaz do braço robótico.

Um método de controle de braço robótico de interface cérebro-máquina de sinal híbrido de circuito fechado baseado em realidade aumentada por WiMi aprimora o feedback visual para o usuário combinando IMC baseado em sinais de eletroencefalograma (EEG) e técnicas de rastreamento ocular para obter controle de circuito fechado durante o controle do braço robótico. O sistema integra as funções de IMC, rastreamento ocular, processamento de imagem, automação e interface AR para permitir ao usuário realizar tarefas de manipulação de objetos. O processamento de imagem é usado para segmentar todos os objetos retangulares potenciais da imagem do espaço de trabalho. O usuário pode usar o rastreamento ocular para selecionar os objetos segmentados. A saída decodificada do IMC é usada para (1) confirmar o objeto selecionado pelo usuário, (2) alternar a sequência de ações e (3) controlar continuamente a abertura e a altura do acessório durante a preensão e levantamento. O objeto selecionado pelo usuário e o status das operações de preensão e elevação são transmitidos ao usuário em tempo real por meio de uma tela de computador usando tecnologia AR. Finalmente, o braço robótico realiza tarefas de alongamento, agarramento, levantamento, entrega e liberação com base na saída da decodificação híbrida do IMC. O equipamento do dispositivo do sistema inclui um rastreador ocular, fone de ouvido EEG, computador, braço robótico e câmera USB. A interação entre o usuário e o sistema é realizada usando IMC de olhar híbrido e feedback visual aprimorado por AR.

Um sistema de controle de braço robótico BMI de sinal híbrido de circuito fechado baseado em AR de WiMi inclui:

Interface de controle de realidade aumentada: Através da tecnologia AR, uma interface de controle intuitiva e fácil de usar é projetada para que os usuários possam controlar o movimento do braço robótico por meio de gestos ou voz.

Aquisição de sinais EEG: Os sinais elétricos do cérebro do usuário são capturados por meio de equipamento EEG e transmitidos para um computador.

Processamento de sinais EEG: Usando algoritmos de processamento de sinais, os sinais EEG são filtrados, características são extraídas e outras operações são realizadas para extrair os comandos para o movimento do braço robótico que o usuário deseja controlar.

Gerar Sinais de Controle: Com base nos sinais EEG do usuário, são gerados sinais de controle para controlar o movimento do braço robótico.

Controle do braço robótico: o sistema de controle do braço robótico, incluindo a seleção e construção de dispositivos de hardware, como drivers de motor, sensores de posição e chips de controle.

Realização do controle de circuito fechado: As informações de feedback coletadas sobre a posição do braço robótico são transmitidas de volta ao computador para realizar o controle de circuito fechado e garantir o movimento preciso e estável do braço robótico.

Controle em tempo real: transmissão em tempo real de sinais de controle do usuário e informações de feedback da posição do braço robótico para o sistema de controle do braço robótico, realizando controle em tempo real.

O WiMi testou o sistema de circuito fechado desenvolvido (com feedback AR) em comparação com o atual sistema de circuito aberto convencional (apenas com inspeção visual). Os resultados mostram que o feedback AR reduz significativamente os comandos de disparo para agarrar e levantar objetos em comparação com testes que utilizam apenas inspeção visual normal. Além disso, a altura livre do acessório durante a elevação foi reduzida. Os usuários do IMC híbrido se beneficiaram das informações fornecidas pela interface AR, o que aumentou a eficiência e reduziu a carga cognitiva durante o processo de preensão e levantamento. O sistema de circuito fechado de feedback AR fornece uma maneira nova e eficaz para os usuários controlarem o braço robótico usando BMI híbrido, melhorando ainda mais o sistema de controle convencional ao integrar processamento de imagem mais avançado e algoritmos de aprendizado de máquina para melhorar a segmentação do objeto no espaço de trabalho e decodificação de sinal IMC.