graças à pulseira TapID VR
cada superfície imaginável como um teclado
As tecnologias de realidade virtual estão avançando em cada vez mais áreas. A simulação de ambientes em conexão com tecnologias como óculos de realidade virtual oferece possibilidades quase ilimitadas. No entanto, os sistemas de RV ainda são raramente usados em aplicações cotidianas.
A maioria dos aplicativos de VR hoje em dia são operados com os controladores nas mãos do usuário ou com as mãos no ar para que a posição possa ser capturada por uma câmera. O usuário geralmente também fica de pé durante a interação. Digitar em um teclado virtual, por exemplo, apresenta outro problema: os dedos se movem apenas ligeiramente e as câmeras não podem capturar o movimento com a mesma precisão dos teclados mecânicos atuais. O feedback tátil usual também está ausente ao digitar no ar.
Os pesquisadores da ETH Zurich desenvolveram o TapID, um sistema de detecção de inércia baseado no pulso que complementa as poses das mãos com rastreamento de fone de ouvido para acionar entradas em RV.
O protótipo incorpora vários sensores de aceleração em uma pulseira de borracha flexível normal. Ao combinar os sinais registrados, o TapID detecta de forma confiável eventos de contato de superfície. Mais importante ainda, graças às vibrações, os sensores podem detectar com qual dedo a pessoa tocou a superfície – e. B. uma mesa, uma parede ou mesmo sua própria coxa. Porque quando você digita, cada dedo faz o pulso vibrar de forma diferente. Isso permite chamadas em viva-voz na sala virtual. Por exemplo, o tampo da mesa ou sua própria coxa podem ser usados como teclado.
Os pesquisadores descobriram que seu novo design de sensor pode detectar pequenas diferenças no perfil de vibração no pulso, a fim de distinguir entre os movimentos individuais característicos dos dedos. Um pipeline de aprendizado de máquina personalizado desenvolvido pelos pesquisadores processa os dados coletados em tempo real. Em combinação com o sistema de câmera integrado nos óculos VR, que registra a posição das mãos, o TapID gera uma entrada extremamente precisa.
Os pesquisadores já testaram seu desenvolvimento em um teclado virtual e um piano virtual. No entanto, o método não funciona apenas com a pulseira de borracha. Também pode ser transportado para pulseiras de fitness existentes e smartwatches do dia-a-dia, pois são todos equipados com sensores inerciais.
“ Nossa solução de sensor é portátil e tem o potencial de tornar os sistemas VR adequados para o trabalho de produtividade em trânsito. Com o TapID, os usuários podem operar aplicativos a qualquer hora e em qualquer lugar com as mãos ou coxas ”, diz Christian Holz, professor do Instituto de Sistemas Interativos Inteligentes da ETH Zurique.
No final de março, os pesquisadores apresentarão seu desenvolvimento na conferência IEEE VR. Então, eles querem melhorar a tecnologia com mais assuntos de teste e desenvolver mais aplicativos para integrar o TapID.