A realidade virtual se funde com a robótica para criar interações físicas perfeitas

Os cientistas da computação de Princeton estão trabalhando para trazer realidade virtual ao mundo físico, com o potencial de melhorar uma variedade de experiências, incluindo colaboração remota, educação, entretenimento e jogos.

Algum dia, a tecnologia de realidade virtual e aumentada provavelmente será comum, disse Paraso Abtahi, professor assistente de ciência da computação. Será importante que os usuários dessa tecnologia possam interagir perfeitamente com o mundo físico.

Abtahi e o associado de pesquisa de pós -doutorado Mohamed Kari estão trabalhando para tornar isso possível emparelhando a tecnologia de realidade virtual com um robô físico que o usuário pode controlar. Suas pesquisas serão apresentadas no próximo mês no Simpósio ACM sobre software e tecnologia da interface do usuário em Busan, Coréia.

Alguém que usa esse sistema pode, enquanto usa um fone de ouvido de realidade mista, selecione uma bebida de uma lista de opções e depois colocá -la, virtualmente, na mesa na frente deles. Ou, de maneira mais fantasticamente, eles podem pedir a uma abelha animada para entregar um saco de batatas fritas no sofá.

No começo, a bebida e os chips podem ser apenas pixels. Mas depois de um minuto, eles se materializarão fisicamente, como se por mágica. Mas não é mágico – é um robô, tornado invisível para o usuário, que entregou o lanche. “Visualmente, parece instantâneo”, disse Abtahi.

Ao remover “todos os detalhes técnicos desnecessários, até o próprio robô”, disse Kari, a experiência parece perfeita. O objetivo é fazer com que a tecnologia desapareça e tenha a interação entre humano e computador parecer intuitivo.

Um desafio técnico -chave nesse sistema é a comunicação. O usuário deve ser capaz de comunicar seus desejos de maneira simples – selecionando uma caneta do outro lado da sala, por exemplo, e movendo -a para a mesa na frente deles. Kari e Abtahi criaram uma técnica de interação em que um simples gesto manual permite ao usuário selecionar um objeto, mesmo de longe.

Esses gestos são então traduzidos em comandos para o robô executar. O robô está equipado com seu próprio fone de ouvido de realidade mista, para que saiba onde colocar objetos no ambiente virtual.

Outro desafio técnico é adicionar e apagar objetos físicos do campo de visão do usuário. Usando uma tecnologia chamada 3D Gaussian Splating, Abtahi e Kari criam uma cópia digital realista do espaço físico. Uma vez que tudo na sala for digitalizado, ele permite que o sistema apagar algo da vista, como um robô em movimento ou adicione algo, como uma abelha animada.

Para conseguir isso, cada centímetro da sala e todos os objetos dentro dele devem ser digitalizados e renderizados digitalmente. No momento, o processo é um tanto tedioso, disse Abtahi. Simplificando -o, talvez atribuindo a tarefa a um robô, seja um assunto para pesquisas futuras em seu laboratório.