Google ha lanzado una nueva función en Lens que permite a los usuarios hacer preguntas sobre lo que ven en un vídeo. La función está impulsada por la IA de Gemini, capaz de proporcionar respuestas contextuales en tiempo real.

Google ha dado un paso importante en la integración de inteligencia artificial en su herramienta de búsqueda visual, Google Lens, al añadir la capacidad de responder preguntas sobre los objetos que aparecen en vídeos. A partir de ahora, los usuarios de Android e iOS que hablen inglés y tengan la aplicación de Google instalada podrán capturar vídeos a través de Lens y recibir respuestas inmediatas sobre los elementos que ven, todo en casi tiempo real .

Esta actualización marca un avance significativo en la evolución de Google Lens, que hasta ahora se había centrado principalmente en la búsqueda y reconocimiento de imágenes estáticas. Según Lou Wang, director de gestión de productos de Lens, la nueva funcionalidad está basada en un modelo «personalizado» de Gemini, el sistema de inteligencia artificial desarrollado por Google. Con este modelo, Lens no solo reconoce los objetos del video, sino que también puede interpretar preguntas complejas sobre ellos, brindando respuestas con contexto adicional e información relevante​.

Cómo funciona la nueva función de Lens.

Para acceder a esta nueva función, los usuarios deben estar inscritos en el programa Search Labs de Google, y activar la opción de «Resumen de IA y más». Una vez hecho esto, los usuarios pueden mantener presionado el botón del obturador en su teléfono para activar el modo de captura de video de Lens. Mientras se graba el video, es posible hacer preguntas sobre los objetos que aparecen, como por ejemplo «¿Qué tipo de pez es este?», y Lens responderá con descripciones proporcionadas por Google AI​.

Google ha señalado que esta nueva función permite que Lens analice los fotogramas más relevantes del video y los use como base para sus respuestas. Esto ayuda a garantizar que las respuestas sean precisas y estén bien fundamentadas. Aunque Google ha demostrado la función en eventos privados, no se ha mostrado una demostración en vivo, lo que deja margen para dudas sobre su rendimiento final.

Competencia en el análisis de video con IA.

Esta función llega en un momento en el que otras grandes empresas tecnológicas también están trabajando en soluciones similares. Por ejemplo, Meta ha anunciado que sus gafas Ray-Ban Meta incluirán capacidades de vídeo de inteligencia artificial en tiempo real, permitiendo a los usuarios hacer preguntas sobre lo que ven a su alrededor. Del mismo modo, OpenAI ha incorporado análisis de video en tiempo real en su herramienta ChatGPT, lo que permite a los usuarios recibir respuestas inmediatas a preguntas sobre el contexto de un video​.

Sin embargo, Google se ha adelantado con esta función en Lens, aunque con una diferencia importante: la experiencia de Lens no es interactiva en tiempo real. Aunque responda preguntas sobre videos, no permite una conversación continua como lo hacen otras herramientas, lo que podría limitar su potencial a largo plazo.

Lens y el comercio electrónico.

Además de la nueva funcionalidad de vídeo, Lens sigue mejorando en otras áreas. A partir de hoy, la aplicación también incluye nuevas capacidades de comercio electrónico. Cuando Lens reconoce un producto en una imagen, proporcionará detalles sobre el precio, las ofertas disponibles, la marca y las reseñas. Esto también permitirá a los usuarios ver anuncios relacionados con esos productos, lo que refleja la importancia que Google da a la publicidad en su plataforma. Según la compañía, aproximadamente 4 mil millones de búsquedas mensuales en Lens están relacionadas con compras, lo que hace de esta una oportunidad lucrativa para integrar anuncios en los resultados de búsqueda​.

Con estas nuevas actualizaciones, Google Lens sigue avanzando como una herramienta de búsqueda visual poderosa, aprovechando la inteligencia artificial para mejorar la experiencia del usuario y competir con otras soluciones tecnológicas de vanguardia.