¿Google ya solucionó su problema de respuestas de IA?

Hace dos semanas, mucha gente en el mundo de la tecnología (e incluso algunas personas que no estaban en la tecnología) estaban charlando sobre Las respuestas generadas por IA de Google. Y cómo a veces te decían que hicieras cosas como comer piedras o hacer pizza usando pegamento.

Esta semana, sigo viendo y escuchando algunas discusiones sobre las malas respuestas de IA de Google. (Gracias (?) por el saludo, Desertor.)

Pero veo y oigo mucho menos de eso. Y definitivamente no he visto una publicación viral en las redes sociales sobre una mala respuesta de IA desde hace algún tiempo.

Entonces. ¿Google ya arregló sus respuestas de IA, que llama “Descripciones generales de IA”? ¿O dejó de mostrar respuestas de IA con tanta frecuencia, por lo que es menos probable que las personas encuentren respuestas malas?

Google, que me refirió a la publicación de blog publicada hace una semana, donde explicó por qué había generado algunas malas respuestas de IA, insistió en que no había muchas y también dijo que estaba restringiendo su uso. Como “para temas de noticias difíciles, donde la frescura y la factualidad son importantes”.

Y Google PR también ofreció una declaración actualizada: “Diseñamos descripciones generales de IA para que aparezcan en consultas en las que sean útiles y proporcionen valor más allá de las funciones existentes en la página de resultados, y continúan mostrándose en una gran cantidad de búsquedas. Continuamos “Refinar cuándo y cómo mostramos las descripciones generales de IA para que sean lo más útiles posible, incluyendo una serie de actualizaciones técnicas en las últimas semanas para mejorar la calidad de la respuesta”.

Pero aquí hay dos puntos de datos más que sugieren que… algo pasó.

En primer lugar: la gente realmente parece haber dejado de quejarse de estas cosas en las redes sociales.

Aquí hay datos de Brandwatch, una empresa de monitoreo de redes sociales, que muestran que las personas que usan X (la compañía que todavía llamo Twitter) comenzaron a prestar atención a las descripciones generales de inteligencia artificial de Google al día siguiente. Evento I/O de Google del 14 de mayo. Y luego, una semana después, las cosas realmente despegaron, presumiblemente cuando la gente vio ejemplos de respuestas muy malas que Google estaba repartiendo. (Algunas de esas malas respuestas, como señala Google, eran en realidad falsas; tenga en cuenta la corrección al final de este artículo). New York Times informe.)

Es posible, por supuesto, que Google esté generando tantas respuestas malas como antes. Y que los usuarios de X/Twitter han pasado a algún otro objeto brillante.

Pero también es muy probable que simplemente no vean tantos de ellos. Para empezar, Google ya ha dicho que ha estado trabajando para solucionar algunos de sus problemas, incluido “limitar la inclusión de contenido satírico y humorístico” en las respuestas, y simplemente no utilizar respuestas de IA en algunos casos.

Y otro argumento a favor de que “hay menos que ver” proviene de BrightEdge, una empresa de optimización de búsquedas. BrightEdge dice que ha estado rastreando las descripciones generales de IA de Google desde que Google comenzó a probarlas el otoño pasado, inicialmente con personas que se registraron para probarlas a través de su plataforma experimental. laboratorios de google.

En un momento dado, dice el fundador de BrightEdge, Jim Yu, algunas palabras clave generaban respuestas de IA el 84% del tiempo. Pero en el momento de Google I/O, cuando la compañía anunció que las respuestas de IA se implementarían para la mayoría de los usuarios, ese número se había reducido a alrededor del 30%. Y una semana después del anuncio, esa cifra había vuelto a caer, esta vez a alrededor del 11%. (Google PR dice que está en desacuerdo con la metodología de BrightEdge y dice que sus resultados son inexactos; Google no ofreció sus propias estadísticas).

gráfico de resultados de IA en las páginas de resultados de búsqueda de Google

Borde brillante



¡Ninguno de los cuales es concluyente! Pero, por ahora, parece que Google podría haber capeado lo peor de una tormenta que él mismo creó.

Fuente