La aplicación Gemini para iOS obtiene la función de vista en vivo para ayuda visual en tiempo real

Google está trayendo una nueva función de vista en vivo a sus aplicaciones Gemini en iOS y Android, lo que permite a los usuarios transmitir sus alrededores a Gemini para obtener comentarios sobre lo que están viendo. La integración se implementa a partir de hoy.

En una demostración, Gemini identificó objetos que el usuario estaba mirando, corrigió suposiciones incorrectas sobre lo que era un objeto y proporcionó contexto respondiendo preguntas. La vista en vivo de Gemini puede identificar objetos en tiempo real, brindar asistencia con proyectos de bricolaje o mejoras para el hogar, ayudar a organizar espacios, ayudar con las compras y más.

También puede compartir la pantalla de su iPhone o iPad con Gemini para recibir comentarios sobre algo que ve en línea.

La opción en vivo de Gemini podría ser útil para aquellos que son ciegos o que tienen baja visión, ya que puede proporcionar una alimentación vocal en vivo de los alrededores de una persona. Live se basa en Project Astra, que Google previstó en E/S el año pasado, y previamente se implementó en dispositivos Pixel.

Este verano, Google también planea agregar contexto personal a Gemini para características como la respuesta inteligente de Gmail. Gemini podrá usar información relevante en Google Apps para proporcionar una experiencia más personalizada. Por ejemplo, la función de respuesta de IA en Gmail puede sonar como usted, en lugar de tener una voz genérica. Es capaz de escanear correos electrónicos pasados ​​para que coincidan con el tono, el estilo y la elección de palabras, además puede buscar notas, documentos de Google Drive y más para agregar contexto a los correos electrónicos.