O artista Everything Is Hacked criou um teclado humano usando um sistema de linguagem de sinais chamado flag semaphore.
O sistema, que utiliza diferentes posições dos braços para representar letras e números, foi adaptado pelo artista para criar um teclado que permite digitar letras, números e comandos.
Para isso, ele precisou aprender a identificar cada posição dos braços com a letra correspondente e adicionar seus próprios movimentos para as teclas adicionais.
Com a técnica desenvolvida, ele conseguiu digitar as letras de diferentes músicas enquanto praticava exercícios físicos.
O sistema usa as tecnologias OpenCV e MediaPipe para realizar a detecção em tempo real das posições dos braços e enviar os comandos para o computador.
O projeto é uma prova de conceito interessante que demonstra como tecnologias de visão computacional podem ser utilizadas de forma criativa para novas interações homem-máquina.