La demostración de Bing con tecnología de inteligencia artificial de Microsoft incluyó varios errores pequeños

Microsoft ha cautivado a la prensa y al público con su nuevo Bing impulsado por IA. Pero resulta que la tecnología cometió varios errores durante la demostración pública de Microsoft la semana pasada.

Los errores incluían información inventada sobre un informe de ganancias financieras de Gap, que fue notado por el ingeniero y escritor Dmitri Brereton, quien publicó una publicación(Se abre en una nueva ventana) repasando los errores.

Durante la demostración de Microsoft(Se abre en una nueva ventana), que se puede ver en línea, la compañía le pidió a Bing, impulsado por ChatGPT, que proporcionara los puntos clave del informe de ganancias del tercer trimestre de Gap. El programa procede a hacerlo, excepto que parte del resumen está completamente apagado.

(Crédito: Microsoft)

Por ejemplo, Bing, impulsado por IA, dice que Gap reportó un margen operativo del 5,9%. Sin embargo, el informe de ganancias de la compañía(Se abre en una nueva ventana) establece claramente que el margen operativo fue de 4.6%.

Bing, impulsado por IA, también dice que Gap proyectó un crecimiento de las ventas netas de dos dígitos bajos. Pero el informe real establece que «las ventas netas podrían bajar a mediados de un solo dígito año tras año en el cuarto trimestre del año fiscal 2022».

En una parte anterior de la demostración, Microsoft también usó el nuevo Bing para consultar «¿Cuáles son los pros y los contras de las 3 aspiradoras para mascotas más vendidas?» El motor de búsqueda produce rápidamente un resultado, enumerando los beneficios y los inconvenientes de tres aspiradoras para mascotas.

(Crédito: Microsoft)

Sin embargo, Brereton señala que Bing cometió un error al describir la aspiradora de mano Bissell Pet Hair Eraser. Enumera el producto que tiene una «longitud de cable corto de 16 pies» como una estafa. Sin embargo, la aspiradora es un modelo inalámbrico diseñado para ser portátil. Además de esto, Bing parece proporcionar una respuesta para las aspiradoras para mascotas más recomendadas, no necesariamente las más vendidas.

En otra parte de la demostración, Bing cometió un error al enumerar las recomendaciones de vida nocturna de la Ciudad de México. El motor de búsqueda dice que un establecimiento llamado Cecconi’s Bar «tiene un sitio web donde puede hacer reservas y ver su menú». Pero una búsqueda en Cecconi’s Bar no encontró tal sitio web. Tiene que llamar(Se abre en una nueva ventana) hacer una reservación.

Además, Microsoft también promocionó la capacidad de Bing para crear un cuestionario sobre la música de los 90. El motor de búsqueda así lo hizo, enumerando con precisión al músico correcto para cada pregunta. Pero extrañamente, todas las respuestas para el cuestionario de 10 preguntas son «Respuesta A», sin variación alguna.

(Crédito: Microsoft)

Microsoft no respondió de inmediato a una solicitud de comentarios. Pero las preguntas frecuentes de la empresa(Se abre en una nueva ventana) porque el nuevo Bing admite que la tecnología no siempre será precisa. “Bing a veces tergiversará la información que encuentra, y es posible que vea respuestas que suenan convincentes pero que están incompletas, son inexactas o inapropiadas”, escribió la compañía.

De hecho, la demostración de Microsoft muestra la tecnología sintetizando temas complejos en artículos y listas fáciles de leer, la mayoría de las veces. Pero en algunos casos, la tecnología puede estar apagada, y puede ser difícil para un usuario saberlo, a menos que verifique la respuesta de cerca. Dicho esto, Microsoft ha dicho anteriormente que está trabajando para refinar la integración de ChatGPT con Bing.

Aún así, la precisión de Bing y otros chatbots impulsados ​​​​por IA sin duda enfrentarán un mayor escrutinio a medida que se presenten al público. El propio rival ChatGPT de Google, Bard, también publicó por error una inexactitud en una demostración pública la semana pasada.