Le costó a Google alrededor de $ 100 mil millones en capitalización de mercado después de que su nuevo chatbot de IA (inteligencia artificial) Bard cometiera un error fáctico durante su primera demostración. Se culpó a la compañía por apresurarse a ponerse al día con Bing, impulsado por ChatGPT de Microsoft, y no concentrarse en mejorar el servicio. Resulta que la demostración de Bing también estaba plagada de errores. Cometió más errores que Bard, y están saliendo ahora.
La demostración de Bing AI de Microsoft estaba plagada de errores
El investigador independiente de inteligencia artificial Dmitri Brereton recientemente detalló algunos errores evidentes que cometió Bing durante su demostración. En particular, el motor de búsqueda de Microsoft se equivocó al resumir el informe financiero de Gap Inc. para el tercer trimestre de 2022. La marca de ropa con sede en San Francisco reportó un margen bruto de 37.4% durante el trimestre, con un margen bruto ajustado de 38.7% excluyendo deterioros. Pero Bing informó incorrectamente un margen bruto del 37,4%, incluidos los costos de ajuste y deterioro.
Incluso si disculpa a Bing por esta confusión, luego comenzó a inventar números por su cuenta. Dijo que Gap reportó un margen operativo de 5.9% en el tercer trimestre de 2022, ajustado por deterioro y costos de reestructuración. Este número no aparece en ninguna parte del documento oficial de la marca de ropa. La cifra correcta es 4,6%, o 3,9% corregido pero excluyendo el deterioro. Bing también se equivocó acerca de las ganancias diluidas por acción. Reportó un valor de $0.42 ajustado por deterioro. El documento de Gap enumera ganancias diluidas por acción de $0,77 (ajustado por deterioro es $0,71).
Los errores de Bing no terminan ahí. Dijo que Gap «espera un crecimiento de las ventas netas de dos dígitos bajos» para el año fiscal 2022, y estima «un margen operativo de aproximadamente el 7% y ganancias diluidas por acción de $ 1.60 a $ 1.75». El problema es que la compañía no ha comentado sobre su perspectiva de margen operativo o ganancias diluidas por acción. Además, dijo que «las ventas netas en el cuarto trimestre del año fiscal 2022 podrían disminuir en un solo dígito promedio año tras año», no el año completo. Claramente, el Bing impulsado por ChatGPT no entendió el informe de Gap y falló horriblemente.
También se le pidió a Bing que comparara el informe financiero de Gap con el de Lululemon para el mismo período. Allí también cometió varios errores. El margen bruto de Lululemon fue del 55,9 %, pero Bing informó del 58,7 %. El margen operativo fue del 19%, no del 20,7%. Las ganancias diluidas por acción fueron de $2,00, no de $1,65. Bing informó incorrectamente que el efectivo y los equivalentes de efectivo de Gap ascendían a 1400 millones de dólares (deberían ser 679 millones de dólares). Por último, pero no menos importante, el valor de los activos de Gap debería ser de 3040 millones de dólares, no de 1900 millones de dólares.
Bing incluso se equivocó en algunas cosas básicas
Durante la demostración, Bing tampoco logró diferenciar entre una aspiradora con cable y una inalámbrica y proporcionó detalles inexactos y fabricados sobre bares en la Ciudad de México. Pero estos errores continuaron después de la demostración en el escenario. Ahora que el nuevo Bing está disponible para el público, las personas se dan cuenta de que proporcionar información básica es igual de malo. Afirma que 2022 aún está por llegar. “Avatar: The Way of Water aún no se ha lanzado. El lanzamiento está programado para el 16 de diciembre de 2022, que está en el futuro. Hoy es 12 de febrero de 2023, que es antes del 16 de diciembre de 2022”, dijo Bing cuando se le preguntó si la película se había estrenado.
Bing también alucinó con el Super Bowl y expulsó a Croacia de la Unión Europea. En general, el nuevo motor de búsqueda basado en ChatGPT de Microsoft funciona terriblemente mal en algunas tareas básicas en las que esperaría que la IA sobresalga. Con suerte, el gigante de Windows hará las cosas bien pronto y Google se unirá pronto. Los expertos de la industria ven una carrera de dos caballos entre Google y Microsoft en esta revolución de IA durante la próxima década. Queda por ver quién sale victorioso. Ambos tuvieron un comienzo bastante malo, pero deberían recuperarse rápidamente y… que comience el juego.
