A veces, la forma más fácil de entender la información nueva es verla. Hoy en E / S, anunciamos funciones en Google Search y Google Lens que usan la cámara, la visión por computadora y la realidad aumentada (AR) para superponer información y contenido en su entorno físico, para ayudarlo a hacer las cosas durante todo el día.

AR en la Búsqueda de Google

Con las nuevas funciones de AR en Search que se lanzarán a finales de este mes, puede ver e interactuar con objetos 3D directamente desde Search y colocarlos directamente en su propio espacio, lo que le brinda una sensación de escala y detalle. Por ejemplo, una cosa es leer que un gran tiburón blanco puede medir 18 pies de largo. Es otro verlo de cerca en relación con las cosas que te rodean. Entonces, cuando busque animales seleccionados, obtendrá una opción directamente en el Panel de conocimiento para verlos en 3D y AR.

También estamos trabajando con socios como NASA, New Balance, Samsung, Target, Visible Body, Volvo, Wayfair y más para mostrar su propio contenido en la Búsqueda. Entonces, ya sea que esté estudiando anatomía humana en la escuela o comprando un par de zapatillas, podrá interactuar con modelos 3D y ponerlos en el mundo real, directamente desde la Búsqueda.

Nuevas funciones en Google Lens

La gente ya le ha hecho a Google Lens más de mil millones de preguntas sobre las cosas que ven. Lens aprovecha el aprendizaje automático (ML), la visión por computadora y decenas de miles de millones de datos en el Gráfico de conocimiento para responder estas preguntas. Ahora, estamos evolucionando Lens para brindar más respuestas visuales a preguntas visuales.

Digamos que estás en un restaurante, pensando qué pedir. Lens puede resaltar automáticamente qué platos son populares, directamente en el menú físico. Cuando tocas un plato, puedes ver cómo se ve realmente y qué dice la gente al respecto, gracias a las fotos y reseñas de Google Maps.

Para lograrlo, Lens primero tiene que identificar todos los platos del menú, buscando elementos como la fuente, el estilo, el tamaño y el color para diferenciar los platos de las descripciones. A continuación, hace coincidir los nombres de los platos con las fotos y reseñas relevantes para ese restaurante en Google Maps.

Lens puede ser particularmente útil cuando se encuentra en un lugar desconocido y no conoce el idioma. Ahora, puede apuntar su cámara al texto y Lens detectará automáticamente el idioma y superpondrá la traducción justo encima de las palabras originales, en más de 100 idiomas.

También estamos trabajando en otras formas de conectar información digital útil con cosas en el mundo físico. Por ejemplo, en el Museo de Young en San Francisco, puede usar Lens para ver historias ocultas sobre las pinturas, directamente de los curadores del museo a partir del próximo mes. O si ve un plato que le gustaría cocinar en un próximo número de ¡Buen provecho revista, podrá apuntar su cámara a una receta y hacer que la página cobre vida y le muestre exactamente cómo hacerla.

Llevando Lens a Google Go

Más de 800 millones de adultos en todo el mundo luchan por leer cosas como horarios de autobuses o formularios bancarios. Así que nos preguntamos: "¿Qué pasaría si usáramos la cámara para ayudar a las personas que tienen dificultades con la lectura?"

Cuando apuntas tu cámara al texto, Lens ahora puede leerlo en voz alta. Destaca las palabras a medida que se pronuncian, para que pueda seguirlas y comprender el contexto completo de lo que ve. También puede tocar una palabra específica para buscarla y aprender su definición. Esta función se lanza primero en Google Go, nuestra aplicación de búsqueda para usuarios de teléfonos inteligentes por primera vez. Lens en Google Go tiene un poco más de 100 KB y funciona en teléfonos que cuestan menos de $ 50.

Todas estas funciones en la Búsqueda de Google y Google Lens brindan información visual para ayudarlo a explorar el mundo y hacer las cosas a lo largo del día al colocar la información y las respuestas donde son más útiles, justo en el mundo frente a usted.