Gemini e Copilot com poderes de visão em tempo real

Dois dos mais utilizados assistentes digitais com Inteligência Artificial generativa do mundo ganharam esta semana, de surpresa, uma nova funcionalidade: visão em tempo real. Tanto a Google como a Microsoft abriram o acesso à câmara no Gemini Live e no Copilot Live, respetivamente, nos smartphones (e nos PC) de forma a que as IA possam ver e responder sobre o mundo que as rodeia, em tempo real.

No entanto, em ambos os casos, existem algumas limitações.

Do lado da Google, esta funcionalidade está limitada (pelo menos para já) aos seus smartphones Pixel 9, e aos Samsung S25, o novo topo de gama do fabricante sul-coreano.

Pela parte da Microsoft, o anúncio foi feito a 7 de abril, por ocasião dos 50 anos da empresa, mas, pelo menos até à data de publicação desta notícia, o serviço não estava ainda disponível na União Europeia.

O Gemini no Pixel 9 é, de facto, capaz de “ver” e reconhecer em tempo real grande parte do que se passa na câmara, desde objetos, como plantas, bonecos, etc. É capaz de perceber, por exemplo, perante que eletrodoméstico está presente e ir buscar o respetivo manual de instruções. É ainda, se instado a isso, capaz de se “lembrar” que objeto “viu” atrás, durante a sessão, e em que lugar estava, descrevendo-o.

Também pode dar conselhos ou alternativas de decoração, utilizando técnicas de realidade aumentada e sobreposição de imagem.