Google está listo para potenciar Google Home con la inteligencia Gemini

Si bien los chatbots llamativos pueden obtener toda la atención, la IA generativa tiene un potencial real para Hacer que el hogar inteligente sea más sencillo y accesibleAmazon ya ha anunciado su planes para una Alexa más inteligente para alimentar tu hogar. Ahora es el turno de Google de prometer que puede producir un Asistente de Google mejor, más inteligente y más útil.

Antes de su evento de hardware de otoño la próxima semana, Google anunció tres nuevos Géminis, potenciado por la inteligencia experiencias que planea traer a su Página principal de Google La plataforma de hogar inteligente se lanzará a finales de este año. Hay una nueva función de inteligencia de cámara que genera subtítulos descriptivos para las secuencias de video de Cámaras Nestuna entrada de lenguaje natural para crear Rutinas de Google Homey un Asistente de Google más inteligente para altavoces y pantallas inteligentes Nest con una voz completamente nueva.

La mayoría de estas funciones, aparte de la nueva voz, estarán protegidas por un muro de pago detrás del sitio web de Google. Suscripción a Nest Awaresu suscripción de grabación de video para cámaras Nest que comienza en $8 al mes ($80 al año). Las funciones se lanzarán primero en Programa de versión beta de vista previa pública de Google a un número limitado de suscriptores de Nest Aware y se extenderá a más usuarios el próximo año.

Este es solo el comienzo de brindar más inteligencia a la plataforma de hogar inteligente de la compañía, dijo Anish Kattukaran, jefe de producto de Google Home. El borde en una entrevista previa a los anuncios. “Esto marca el camino para la próxima era de Google Home”.

Todo esto será una buena noticia para los sufridos usuarios de Google Home, muchos de los cuales están cansados ​​de lidiar con dispositivos de bajo rendimiento y Pantallas inteligentes envejecidas y viendo Las funciones en las que confían se cancelanTambién han estado luchando por una transición laboriosa desde la aplicación Nest a la aplicación Google Home.

El lanzamiento de esta semana de la Transmisor de Google TV 4K (que es un centro de Google Home) y un nuevo Termostato inteligente Nestcombinado con la promesa de un Asistente de Google más inteligente, significa que las cosas empiezan a verse bien dentro de Google.

Parece que el Asistente de Google también ha llegado para quedarse. En lugar de implantar Gemini en los altavoces Nest y las pantallas inteligentes para controlar tu hogar inteligente, Google está implementando la inteligencia de Gemini entre bastidores. “Gemini es una familia de modelos y la estamos optimizando para elementos de Google Home”, explica Kattukaran.

Google está utilizando la inteligencia de Gemini en las cámaras Nest para permitirles comprender lo que ven y escuchan y luego decirle lo que es más importante. Esto significa que, en lugar de simplemente recibir una alerta sobre una persona o un paquete y luego tener que mirar el video para ver qué sucedió, Google Home agregará una descripción detallada de lo que vio la cámara. Los modelos aprenderán y se entrenarán con sus datos (en la nube, pero para su hogar) y se volverán más inteligentes con el tiempo para comprender mejor lo que sucede alrededor de su hogar.

Un ejemplo que compartió Kattukaran fue un clip de una persona descargando comestibles de un automóvil con la leyenda:

Un joven con ropa informal, de pie junto a un todoterreno negro estacionado. Lleva bolsas de la compra. El coche está parcialmente en el garaje y la zona parece tranquila.

Dejando a un lado los detalles interpretativos, el título proporciona mucho contexto que, además de ser útil, podría traducirse en una automatización más inteligente del hogar. Por ejemplo, si una cámara detecta un animal y entiende que “el perro está cavando en el jardín”, el siguiente paso podría ser crear una automatización para “activar los aspersores”.

También habrá una opción para usar texto para buscar en las imágenes en la pestaña de actividad de Google Home. Esto podría ser útil si, por ejemplo, mi gato se escapa después del anochecer. Podría pedirle que me muestre la última vez que vio al gato en lugar de tener que desplazarme por todos los videos etiquetados con un animal para encontrarlo.

Una nueva función “Ayúdame a crear” en la aplicación Google Home te permite describir lo que quieres que suceda (como “cerrar las puertas y apagar las luces a la hora de dormir”) y hacer que cree un rutina para hacerlo automáticamente.

Debes usar la entrada de texto o voz en la aplicación Home en tu teléfono (no funciona a través de los parlantes Nest), pero Kattukaran dice que tendrá todas las capacidades actuales de la Aplicación Google HomeEsto incluye todos los actuales Arrancadores, condiciones y accionesademás de acceso a cualquier dispositivo conectado a Google Home, incluido Dispositivos de materiaNo es tan complejo ni sofisticado como Editor de scripts de Googledice, pero debería hacer que la creación de automatizaciones sea fácil para cualquier persona.

Además de las automatizaciones más sencillas y la inteligencia de la cámara, Google dice que está mejorando las “experiencias centrales” de su Asistente de Google (como reproducir música y configurar temporizadores) en todos los altavoces y pantallas inteligentes Nest actuales.

Además, Google Assistant está incorporando nuevas voces con diferentes estilos, tonos y acentos. La empresa lanzó una demostración de la primera voz nueva que participa en una conversación. Como se puede escuchar en el video, conserva el tono femenino pero suena más suave y natural.

El Asistente de Google no solo debería sonar más natural, sino que también debería comunicarse de forma más natural. Kattukaran dice que no necesitará una nomenclatura específica para hacer lo que quieres, puede manejar pausas, um y ah, y responder preguntas de seguimiento. No vi una demostración en persona de esto, pero suena similar a las funciones Amazon anunció Alexa el otoño pasado (que aún no han llegado).

Kattukaran afirma que el nuevo Asistente de Google podrá mantener el contexto de su conversación y comenzar a aprender y comprender su hogar. Las capacidades impulsadas por Gemini se ejecutarán “en la nube, para su hogar” de acuerdo con Principios de privacidad de Googleél dice.

“Es específico para su hogar y sus modelos de datos. Estamos siendo muy intencionales en ir despacio. En el hogar, el margen de error es muy bajo; no podemos equivocarnos”, dice. El objetivo es que los modelos construyan un conocimiento de su hogar, como las habitaciones y los dispositivos que tiene, y luego se basen en esa línea de base para volverse más inteligentes con el tiempo.

Estos cambios están diseñados para acercar el asistente de voz digital a la visión en la que Google y sus competidores han estado trabajando durante años: un asistente digital que pueda ser realmente útil.

“Cuando comenzamos con ese asistente de primera generación, la promesa era Los Supersónicos; “La idea era crear un asistente sumamente útil que pudiera ayudarte a resolver problemas de manera proactiva”, dice Kattukaran. “Logramos muchos avances, pero luego nos estancamos, en todos los asistentes, no solo en nosotros. Llegamos a un techo tecnológico. Eso se ha elevado con los LLM y los modelos de lenguaje que son más multimodales”.

Como señala Kattukaran, “el hogar es una bestia”. Es complicado y desordenado, con múltiples personajes y escenarios. Es bastante difícil de manejar para un humano, lo que lo convierte en un desafío significativo para una computadora. Pero parece que Amazon, Google y Apple ahora están compitiendo hacia un futuro en el que nuestros hogares tengan un asistente inteligente que reconozca el contexto y pueda ayudarlo a responder a nuestras necesidades. Será fascinante ver cómo se desarrolla esto.