O feedback saudável ajuda você a saber quando você tocou uma tecla em seu telefone com um pequeno pulso reconfortante. Dá-lhe a sensação de disparar uma ronda no Call of Duty com um solavanco curto e agudo ... e agora permite-lhe experimentar o peso e a pressão de levantar e cortar o tecido do estômago.

Somos grandes fãs de aplicações de feedback tátil que adicionam uma dimensão sensorial tátil a experiências de realidade virtual, então quando soubemos que havia uma experiência de RV cirúrgica no Fórum Global de Educação e Habilidades (GESF) que estávamos participando em Dubai, foi com um sentimento de excitação palpável que nos dirigimos para a concessão VR Fundamental.

Com sua ferramenta de treinamento cirúrgico Fundamental Surgery, o Fundamental VR conseguiu criar o feedback mais visceral que já experimentamos. Uma vez que você está preso em um fone de ouvido de realidade virtual, você recebe varinhas de controle que se correlacionam com braços mecânicos que aparecem na sua frente na tela..

Pela experiência que tentamos, as varinhas controlaram um conjunto de pinças e uma ferramenta de cauterização, mas elas podem ser usadas para manipular um bisturi, um formão de osso, uma seringa - praticamente qualquer ferramenta que um cirurgião precisará usar durante uma operação..

A experiência é independente do dispositivo (usamos um fone de ouvido de realidade mista do Windows), mas o Fundamental também tinha um Oculus Rift e o HTC Vive, e ficou feliz em trocar para qualquer dispositivo que quiséssemos experimentar.

A experiência em si é uma simulação muito curta e simples. Você é colocado no lugar de um cirurgião, de pé sobre um paciente virtual coberto de lençol, com uma tela acima de uma barriga carnuda exposta com ferramentas saindo dela.

A tela mostra a alimentação da câmera inserida no tronco, que é uma visão do interior de um corpo humano, do lado de fora do estômago.

Se prepare

Você é encarregado de pegar e levantar o revestimento do estômago, em seguida, cortar uma camada fina usando a ferramenta de cauterização, deslizando-o em um pequeno buraco e usando o calor para separar a seção do revestimento do estômago.

Levamos alguns segundos para adquirir a percepção de profundidade necessária para agarrar o forro com nossas pinças, mas quando o fizemos, a coisa mais estranha aconteceu ... sentimos o peso do revestimento. Parecia real. Não se sentiu gostar era real, parecia real.

Nós nunca tínhamos experimentado nada parecido, e estávamos a meio caminho entre a surpresa e o horror. Tivemos que erguer o forro até o ponto em que ele ficou em posição e, como não temos o toque hábil de um cirurgião, nós o estragamos. O 'estouro' físico do forro escorregando de nossas pinças realmente nos fez mordaça.

Por fim, colocamos o forro no lugar certo e abrimos um buraco para colocarmos a ferramenta de cauterização. Sim. Isso aconteceu. Lutando contra algumas náuseas muito intensas nós cortamos o forro usando o calor da ferramenta de cauterização, e a sessão (felizmente) acabou.

Conversando com o criador

Depois de tomar um momento para nos recompor, tivemos uma conversa com o cofundador e CEO da Fundamental VR, Richard Vincent, e perguntamos como isso tornava as haptics tão efetivas, e o que ela planeja fazer com a tecnologia..

“A cirurgia é sobre o toque e é sobre a visão; com apenas um deles, é um jogo,” Vincent disse. “Construir a inteligência háptica que nos permite mapear todas as ferramentas e tecidos, e todas as possíveis colisões entre eles, nos levou cerca de um ano, e agora estamos em um ponto em que podemos implantar de forma confiável praticamente qualquer experiência com tecidos..”

E chegar a esse ponto levou um monte de tentativa e erro. “Isso é um processo de obtenção de cirurgiões em,” Vincent continuou. ”Nós temos uma ferramenta de calibração que nos permite ir 'Este é o ponto onde você estava inserindo isto para dentro naquela localização, se sentiu bem? e então nós temos cerca de sete variáveis ​​diferentes para ajustar como o quão mole é, o quanto você tem que empurrar antes que finalmente ceda ou penetre.”

Felizmente, havia um médico na vida real - Dimitri Amiras, um radiologista consultor do Imperial College NHS Trust, com sede no Reino Unido. Aproveitamos a oportunidade para perguntar se a "gamificação" da cirurgia reduziria o risco emocional associado a uma operação real..

“A gamificação levará o cirurgião a um passo atrás do que ele está realmente fazendo e, na verdade, permitirá que eles se concentrem na operação em si.,“ Amiras nos contou. “Se o cirurgião está pensando sobre os filhos da pessoa esperando em casa, não há maneira de fazer a operação. Você pode ter empatia depois, mas nesse momento você precisa se concentrar no procedimento.”

Para uma experiência de uma cirurgia cerebral na vida real em um vídeo de 360 ​​graus, confira este vídeo feito pela Fundamental:

Enquanto a experiência de simulação que experimentamos parecia muito real, ainda parecia muito semelhante a um jogo, e nos perguntamos quantos membros da equipe de Vincent vieram da indústria de jogos..

“A equipe é formada por muitas pessoas do ramo de jogos, porque é onde as habilidades em performance de RV foram realmente refinadas nos últimos dois anos.,” ele nos disse. ”O melhor lugar para encontrar programadores Unity ou Unreal com experiência realmente boa é jogar.”

No momento, a Cirurgia Fundamental está sendo usada para treinar futuros cirurgiões, mas podemos ver aplicações óbvias na RV do consumidor, e não somos os únicos - Vincent disse que foi abordado por números de várias indústrias diferentes para seu algoritmo. . Por enquanto, no entanto, ele mantém o foco puramente cirúrgico.

  • Quer ler algumas notícias de RV em seguida? Confira: Oculus VR autônomo Oculus Go pode ser lançado no início de maio