Notizia

May 26, 2023

WiMi ha sviluppato un progetto Closed

PECHINO, 27 luglio 2023 /PRNewswire/ -- WiMi Hologram Cloud Inc. (NASDAQ: WIMI) ("WiMi" ​​o la "Società"), fornitore leader mondiale di tecnologia Hologram Augmented Reality ("AR"), ha annunciato oggi che

PECHINO, 27 luglio 2023 /PRNewswire/ -- WiMi Hologram Cloud Inc. (NASDAQ: WIMI) ("WiMi" ​​o la "Società"), fornitore leader mondiale di tecnologia Hologram Augmented Reality ("AR"), ha annunciato oggi che un Viene delineato un metodo di assistenza guidata dall'AR per fornire un feedback visivo migliorato all'utente per il controllo a circuito chiuso utilizzando un BMI ibrido che combina segnali EEG e tracciamento oculare per un controllo intuitivo ed efficace del braccio robotico.

Un metodo di controllo del braccio robotico con interfaccia cervello-macchina a segnale ibrido a circuito chiuso basato sulla realtà aumentata di WiMi migliora il feedback visivo per l'utente combinando il BMI basato sui segnali dell'elettroencefalogramma (EEG) e le tecniche di tracciamento oculare per ottenere il controllo a circuito chiuso durante il controllo del braccio robotico. Il sistema integra le funzioni di BMI, tracciamento oculare, elaborazione delle immagini, automazione e interfaccia AR per consentire all'utente di eseguire attività di manipolazione di oggetti. L'elaborazione delle immagini viene utilizzata per segmentare tutti i potenziali oggetti rettangolari dall'immagine dell'area di lavoro. L'utente può utilizzare il tracciamento oculare per selezionare gli oggetti segmentati. L'output decodificato dal BMI viene utilizzato per (1) confermare l'oggetto selezionato dall'utente, (2) cambiare la sequenza di azioni e (3) controllare continuamente l'apertura e l'altezza del dispositivo durante la presa e il sollevamento. L'oggetto selezionato dall'utente e lo stato delle operazioni di presa e sollevamento vengono restituiti all'utente in tempo reale tramite lo schermo di un computer utilizzando la tecnologia AR. Infine, il braccio robotico esegue attività di allungamento, presa, sollevamento, consegna e rilascio in base all'output della decodifica ibrida del BMI. L'attrezzatura del dispositivo del sistema include un eye tracker, una cuffia EEG, un computer, un braccio robotico e una fotocamera USB. L'interazione tra l'utente e il sistema viene eseguita utilizzando il BMI dello sguardo ibrido e il feedback visivo potenziato dall'AR.

Un sistema di controllo del braccio robotico BMI a segnale ibrido a circuito chiuso basato su AR di WiMi include:

Interfaccia di controllo della realtà aumentata: attraverso la tecnologia AR, è progettata un'interfaccia di controllo intuitiva e facile da usare in modo che gli utenti possano controllare il movimento del braccio robotico attraverso gesti o voce.

Acquisizione dei segnali EEG: i segnali elettrici provenienti dal cervello dell'utente vengono catturati utilizzando apparecchiature EEG e trasmessi a un computer.

Elaborazione dei segnali EEG: utilizzando algoritmi di elaborazione del segnale, i segnali EEG vengono filtrati, le caratteristiche vengono estratte e vengono eseguite altre operazioni per estrarre i comandi per il movimento del braccio robotico che l'utente desidera controllare.

Genera segnali di controllo: in base ai segnali EEG dell'utente, vengono generati segnali di controllo per controllare il movimento del braccio robotico.

Controllo del braccio robotico: il sistema di controllo del braccio robotico, inclusa la selezione e la costruzione di dispositivi hardware come driver del motore, sensori di posizione e chip di controllo.

Realizzazione del controllo a circuito chiuso: le informazioni di feedback raccolte sulla posizione del braccio robotico vengono ritrasmesse al computer per realizzare il controllo a circuito chiuso e garantire il movimento preciso e stabile del braccio robotico.

Controllo in tempo reale: trasmissione in tempo reale dei segnali di controllo dell'utente e delle informazioni di feedback sulla posizione del braccio robotico al sistema di controllo del braccio robotico, realizzando il controllo in tempo reale.

WiMi ha testato il sistema a circuito chiuso sviluppato (con feedback AR) rispetto all’attuale sistema convenzionale a circuito aperto (con solo ispezione visiva). I risultati mostrano che il feedback AR riduce significativamente i comandi di attivazione per afferrare e sollevare oggetti rispetto ai test che utilizzano solo la normale ispezione visiva. Inoltre è stata ridotta la distanza in altezza dell'attrezzatura durante il sollevamento. Gli utenti di BMI ibrido hanno beneficiato delle informazioni fornite dall'interfaccia AR, che ha aumentato l'efficienza e ridotto il carico cognitivo durante il processo di presa e sollevamento. Il sistema a circuito chiuso di feedback AR fornisce agli utenti un modo nuovo ed efficace di controllare il braccio robotico utilizzando l'IMC ibrido, migliorando ulteriormente il sistema di controllo convenzionale integrando algoritmi di elaborazione delle immagini e apprendimento automatico più avanzati per migliorare la segmentazione dell'oggetto nell'immagine. spazio di lavoro e decodifica del segnale BMI.