Este martes, durante el Google I/O 2018, la compañía informó que ahora Google Lens estará disponible desde la cámara en dispositivos de LG, Motorola, Xiaomi, Sony, Nokia, Transsion, TCL, OnePlus, BQ, Asus y, por supuesto, los Pixel.

Leyendo el texto de la cámara

Una de las primeras funciones que añadió Google es la capacidad de reconocer textos del mundo real. La idea es que puedas copiar y pegar texto para realizar búsquedas. “Supongamos que estás en un restaurante y ve el nombre de un plato que no reconoces: Lens te mostrará una imagen para darte una mejor idea. Esto requiere no solo reconocer formas de letras, sino también el significado y el contexto detrás de las palabras. Aquí es donde todos nuestros años de comprensión del lenguaje en la búsqueda ayudan”, afirma el comunicado de Google.

Ok Google, ¿qué cosas hay similares a esto?

Otra nueva función que Google Lens añadió es la capacidad de que el buscador no solo reconozca las cosas, sino que además te indique qué objetos similares existen. El objetivo es que sugiera cosas con el mismo estilo, de tal forma que tengas la opción de explorar el catálogo e incluso encontrar, a través de referencias, otro tipo de objetos. 

Lens en tiempo real  

La última mejora anunciada es que Lens es capaz de reconocer los objetos mostrados en tiempo real. Esto quiere decir que, mientras se mueve la cámara, la función es capaz de rastrear lo que ve, sin necesidad de detenerse mucho tiempo. Esto es importante, pues signfica que la función está activa, incluso mientras navegas los espacios a tu alrededor. Todos estos cambios serán aplicados en las próximas semanas.

Imágenes: Captura de pantalla.

Al dar clic en el ícono aparecerán unos puntos que analizaran la imagen. Este proceso no toma más de 3 segundos. A continuación, el sistema te dará en la pantalla la información que la inteligencia artificial logré extraer de la imagen. Aquí te dejamos unos ejemplos.

¿Qué es Google Lens?

Google Lens es una función que permite a los equipos reconocer los elementos en las fotos. Para usarla, la foto debe estar previamente tomada y debe poder visualizarse dentro de la app.

Esta aplicación van más allá de solo reconocer lugares; por ejemplo, si se ha tomado una foto a una tarjeta de presentación, será posible crear un contacto rápidamente desde la imagen. También es posible saber la raza de un perro o el lugar en el cual fue tomada la fotografía.

Esta funcionalidad llegó en primer momento a los equipos Pixel. No obstante, Google anunció recientemente que estaba disponible para otros equipos Android y, posteriormente, para equipos con iOS (iPhone y iPad).

Imágenes: ENTER.CO

Google Lens para todos

Rolling out today, Android users can try Google Lens to do things like create a contact from a business card or get more info about a famous landmark. To start, make sure you have the latest version of the Google Photos app for Android: https://t.co/KCChxQG6Qm
Coming soon to iOS pic.twitter.com/FmX1ipvN62

— Google Photos (@googlephotos) 5 de marzo de 2018

En la publicación del 5 de marzo se puede leer: “A partir de hoy, los usuarios de Android podrán probar Google Lens para hacer cosas como crear un contacto desde una tarjeta de presentación u obtener más información sobre un lugar famoso. Para empezar, asegúrate de tener la más reciente versión de la aplicación de Google Fotos para Android. Pronto llegará a iOS.”

De esta forma, todos los usuarios, una vez llegue la actualización de Google Fotos, podrán probar esta funcionalidad. Dentro de lo que se podrá hacer, se espera que los usuarios puedan conocer la raza de un perro o el nombre de una flor, como afirma The Verge. Además, comenta el medio, ciertos dispositivos de gama alta podrán acceder a Google Lens a través de Google Assistant. Dentro de estos se encuentran dispositivos de Samsung, Huawei, LG, Motorola, Sony y Nokia.

Esta es una gran noticia debido a que, hasta ahora, Google Lens tan solo estaba disponible para los Google Pixel. Eso sí, el despliegue de la funcionalidad se hará de manera escalonada, por lo que es posible que algunos usuarios reciban esta actualización en los próximos días.

Imagen: Google.

Google dice que la imagen a continuación, por ejemplo, fue descrita por el software como “dos pizzas puestas sobre una estufa“. El software omitió la copa de vino, pero para no haber intervención humana es muy impresionante.

El software de reconocimiento de imágenes implementa un proceso que permite que la máquina aprenda a describir las imágenes y mejore las descripciones a medida que se entrena más. Tiene dos capas: una primera, entrenada para ‘ver’ y distinguir clases de objetos dentro de una imagen, y una red neuronal recurrente, que puede convertir información gráfica en palabras.

El resultado, aunque no es perfecto, impresiona mucho. Algunas imágenes son descritas con toda precisión, mientras que en otras aun falla bastante. En la que está a la izquierda, por ejemplo, el sistema vio “un perro que salta para agarrar un ‘frisbee’“.

En las pruebas BLEU, diseñadas para medir la precisión de un sistema de reconocimiento de imágenes, el algoritmo suele obtener un puntaje de entre 27 y 59 puntos –según reporta Techcrunch–, mientras que los seres humanos tienen un puntaje medio de 69 puntos.

Los investigadores de Google que participaron en el proyecto aseguran que “esta clase de sistema, eventualmente, podría ayudar a quienes tienen discapacidad visual a entender imágenes, proveer texto en lugar de imágenes en partes del mundo en el que las conexiones son lentas, y hacer que las búsquedas en Google Imágenes sean más fáciles para todos“. Aunque el software no está disponible para todos los usuarios, se espera que sea implementado pronto en algunos servicios de la empresa.

Si quieren leer el artículo académico en inglés en el que se detalla el algoritmo y el modelo computacional que dio origen al software, aquí está.

Imágenes: Chase Elliott Clark (vía Flickr), Google