Essas luvas me permitem usar minhas mãos em VR, e é o futuro
NotíciaHá um momento inevitável quando você está em uma experiência de realidade virtual (VR) e você olha para baixo. Talvez você deseje que não tivesse, porque é nesse momento que você não vê suas mãos.
É então que você se lembra de que não está realmente no espaço sideral ou dirigindo um carro de corrida de Fórmula 1. Muitas vezes é inesperado e geralmente decepcionante. Você pode sentir suas mãos segurando o controle em seu colo, mas quando você olha para baixo ou as segura, elas não se manifestam diante de seus olhos. Você é retirado da experiência, mesmo que só um pouquinho.
O Manus VR espera resolver este problema e fazê-lo de uma forma mais imersiva do que outras soluções de controlador de realidade virtual para headsets como Oculus Rift, PlayStation VR e HTC Vive Pre.
Em vez de segurar um controle, Manus usa luvas para não apenas trazer suas mãos, mas também seus dedos para o mundo virtual.
"O que muitas vezes vemos é que, assim que alguém coloca o fone de ouvido [VR], a primeira coisa que tentam é pegar coisas, mesmo que suas mãos não estejam lá", disse Jules Blok, principal programador da Manus, ao techradar. GDC 2016 na semana passada. "Mesmo com os controladores de movimento, ainda vemos pessoas colocando-os longe para tentar pegar algo com as mãos. Então, claramente, havia uma necessidade de rastrear isso."
A equipe com sede na Holanda decidiu criar uma solução que usa rastreamento posicional existente de controladores de RV misturados com sensores em suas luvas para medir a postura da mão e os movimentos dos dedos. Sensores duplos nos dedos ajudam a rastrear apertos, curvas e pontos, permitindo que os usuários transformem seus movimentos em funções.
Sensores de dedo podem soar como a maneira óbvia e fácil de trazer seus dígitos para o mundo digital, mas a Blok diz que está longe disso.
"Muito do que ouvimos de outras empresas que tentaram usar sensores flexíveis é que elas tiveram problemas para calibrá-las", disse ele. "Colocamos muita pesquisa em ter um bom perfil de calibração que funcione para uma ampla gama de diferentes mãos".
O resultado, como descreverei abaixo, é maravilhoso. Esta foi apenas uma pequena demonstração em uma convenção, e há melhorias a serem feitas, mas Manus está no caminho para talvez um dia resolver um dos problemas mais prementes da VR.
Todas as mãos
As luvas que Manus deixou o público tentar na GDC são sua amostra de engenharia. O kit de desenvolvimento, lançado no terceiro trimestre de 2016 por US $ 250, se parece mais com luvas de bicicleta, mas elas foram guardadas atrás de uma caixa de vidro..
Quando me sentei para experimentar a demo de Manus, a primeira coisa que o Blok fez foi prender dois controladores HTC Vive Pre aos meus antebraços. Eu certamente os notei em outros usuários de antemão, e Blok explicou que esta é uma solução temporária para rastreamento posicional. Eventualmente, a equipe quer construir pulseiras personalizadas para cada fone de ouvido que se integre aos sistemas específicos.
Em seguida Blok me ajudou a escorregar nas luvas, que tinham uma sensação de poliéster. Eu poderia dizer que havia sensores costurados, e um pequeno pacote de rumble oferecia algum peso, mas eles eram macios e ofereciam destreza decente..
Finalmente veio o fone de ouvido e fones de ouvido, e de repente eu estava em uma casa de bonecas VR onde eu tive que ajudar um órfão a encontrar o caminho de casa resolvendo uma série de quebra-cabeças.
Não ficou imediatamente óbvio o que eu deveria fazer (não havia instruções ou dicas visuais), então por um minuto eu simplesmente brinquei com minhas mãos pela primeira vez na realidade virtual.
Foi delicioso. As mãos que vi - um par de luvas geométricas azul-púrpura que são transparentes para o esqueleto, por alguma razão - responderam ao que quer que eu estivesse fazendo no mundo real. Eu poderia fazer um punho, apontar com um dedo e mover minhas mãos para cima e ao redor de mim, e as mãos virtuais imitaram meus gestos.
O tempo de resposta foi geralmente bom, embora houvesse atrasos e falhas ocasionais. As mãos também desapareceram se a luva escorregou muito do controlador Vive, então eu tive que puxá-las um pouco mais apertadas ou arriscar minhas mãos sumindo diante dos meus olhos..
Quando eu "tocava" em um objeto - havia botões, alavancas e teclas de piano que eu podia pressionar - um leve estrondo e o movimento correspondente do objeto não era o suficiente para me fazer sentir como se estivesse interagindo com um objeto tangível, mas foi o suficiente para um jogo que se passa num reino de fantasia e ainda é uma demonstração. Só o fato de poder usar minhas mãos e dedos para interagir com o jogo era impressionante o suficiente para o momento.
Eventualmente, Blok gentilmente puxou um dos meus fones de ouvido e me disse o que eu precisava fazer, então era hora de colocar minhas mãos - todas elas - para funcionar. Primeiro, eu tive que pegar vaga-lumes flutuantes, empurrar para baixo uma alavanca (para abrir uma lanterna correspondente) e colocar os vaga-lumes um por um nas estruturas de arame para iluminar o caminho para o órfão..
Para realizar os movimentos com minhas mãos reais e observar os objetos virtuais responderem como se eu estivesse realmente agarrando, pressionar e movê-los era extremamente satisfatório.
Em seguida, eu tive que limpar e remontar uma série de pedaços de pedra quebrados em uma escada para o órfão subir. Isso era mais buggy do que o primeiro quebra-cabeça, pois as peças tinham que ser colocadas na posição correta para segurar, e se eu as movesse rápido demais ou meu aperto não travasse no lugar certo, as peças cairiam no chão..
Mas era um bom desafio agarrar uma pedra e movê-la apertando meus dedos e estendendo meu braço até onde precisava ir. Eu poderia até mesmo sutilmente manipular as peças em posição com pequenos movimentos dos dedos, como se eu estivesse realizando uma tarefa precisa no mundo real.
Então veio um simples recado de empurrar plugues com o dedo indicador para deixar o órfão passar por um corredor. Meu último desafio foi imitar músicas de três teclas em um piano virtual. Não vou dizer que senti que estava tocando um instrumento, mas novamente houve aquela satisfação em apontar e pressionar na vida real e ver uma ação no jogo resultar disso.
Depois de um alegre adeus, a órfã pulou para casa e minha demonstração acabou. Eu teria gostado de jogar de novo.
O que mais me impressionou na experiência foi o quanto eu senti uma parte do mundo Willow da Pillow porque usei minhas mãos. Em vez de ser um observador passivo da ação, eu estava a acção. Qualquer movimento que realizei teve um impacto direto no mundo virtual dos órfãos, e isso é algo que eu nunca experimentei tão intensamente antes.
Enquanto você pode pegar objetos usando os controladores Oculus Touch para o Rift, você não está realmente abrindo e fechando os dedos para fazê-lo. Em vez disso, você pressiona e segura um botão de disparo. Então, fazer um punho em torno de uma rocha e vê-la se mover em tempo real foi uma grande mudança em relação ao que eu já experimentei com VR.
Não é tudo divertido e jogos
Enquanto minhas mãos ajudaram a me atrair para o reino de fantasia púrpura do Willow da Pillow, Manus tem um longo caminho a percorrer antes de todos nós estarmos usando luvas e pegando objetos em VR.
Para conseguir o agnosticismo do dispositivo que quer e construir pulseiras personalizadas que funcionem para cada fone de ouvido, Blok disse que as empresas de RV têm que abrir seus sistemas de rastreamento de posição. Oculus ainda não fez isso, embora a empresa esteja trabalhando com o OSVR da Razer. E enquanto o seu kit de desenvolvimento será lançado com o suporte do HTC Vive Pre, Manus ainda está em negociações com a empresa para obter acesso ao seu hardware..
É um obstáculo, mas o co-fundador da Manus VR, Bob Vlemmix, está otimista com os fabricantes de fones de ouvido, com base na resposta positiva que as luvas conquistaram..
"Nós até tivemos [o fundador do Oculus] Palmer Luckey tentando [as luvas]", disse Vlemmix. "Ele disse que foi ótimo e muito legal."
Não termina com suporte de hardware, no entanto. Para que os usuários tenham a melhor experiência, Blok disse que os jogos terão que ser criados especificamente para rastreamento de mãos. Isso, novamente, envolve SDKs abertos, que ainda não estão disponíveis em todo o fórum.
Além disso, com os desenvolvedores apenas começando a quebrar a superfície dos jogos visuais de realidade virtual, eles realmente vão querer se concentrar no desenvolvimento de títulos que incorporem mãos também??
"Essa é uma das coisas em que estou sempre pensando", disse Vlemmix. "Isso aumenta o nível de imersão ... Estamos recebendo muitos pedidos de desenvolvedores. Eles realmente querem isso, então não acho que isso seja um problema."
A Manus quer entregar suas luvas para os consumidores em 2017. Ela planeja adicionar melhorias, como o rastreamento de polegar e dedo, para uma leitura ainda mais precisa dos movimentos das mãos. Ele também está trabalhando na melhoria da física para que você possa ter uma noção de peso e forma dos objetos virtuais com os quais você interage..
Há claramente desafios em transformar as luvas Manus em uma solução viável que satisfaça as necessidades das mãos de RV, embora, com o meu curto período de tempo com elas, eu possa dizer que voltar a uma experiência só de olhos será incrivelmente difícil..
Apesar de ser uma demonstração bastante básica, essa foi a experiência de realidade virtual mais interativa que já tive, o que a tornou mais imersiva também. Eu não estava apenas jogando um jogo de realidade virtual: as luvas da Manus VR me permitem fazer parte do jogo.
As luvas são perfeitas? Não por um tiro longo. Este poderia ser o futuro da realidade virtual? Parece absolutamente.
- Nossas mãos atualizadas sobre a revisão do PlayStation VR