Recentemente, o porta-voz do Google, Alex Joseph, confirmou ao The Verge por e-mail que o Google introduziu oficialmente novos recursos de IA no Gemini Live, que permitem responder às perguntas dos usuários em tempo real por meio da tela do telefone ou da câmera do smartphone.

Essa inovação ocorre quase um ano depois que o Google revelou pela primeira vez o projeto Project Astra por trás dela. O Projeto Astra visa aprimorar a experiência interativa dos assistentes digitais por meio de tecnologia avançada de inteligência artificial.

据悉，这一新功能已经在部分小米手机上出现，这一发现由9to5Google率先报道。随后，一位Reddit用户上传了一段视频，展示了Gemini的新屏幕阅读功能。这是谷歌在3月初预告的两项新功能之一，计划在本月晚些时候，作为Google One AI Premium计划的一部分，向Gemini的高级订阅用户推出。

Além do recurso de leitura de tela, o Astra também introduziu outro recurso atraente – interpretação de vídeo em tempo real. Com esse recurso, o Gemini é capaz de analisar a câmera do smartphone em tempo real e responder às perguntas do usuário com base no conteúdo da filmagem. Em um vídeo de demonstração divulgado pelo Google, um usuário pergunta à Gemini qual pigmento é melhor para a cerâmica recém-esmaltada.

Os novos recursos do Google demonstram mais uma vez sua liderança no campo de assistentes de inteligência artificial. Ao mesmo tempo, os concorrentes estão pressionando por tecnologias semelhantes. A Amazon está se preparando para um teste antecipado limitado do Alexa Plus, enquanto a Apple atrasou o lançamento de uma versão atualizada de seu Siri. Espera-se que ambos os produtos tenham recursos semelhantes aos novos recursos do Astra. Embora a Samsung tenha seu próprio assistente Bixby, o Gemini ainda é o assistente inteligente padrão em muitos dispositivos.