¿Ni siquiera sabe cómo hacer preguntas de secundaria, ChatGPT, Wenxin Yiyan, Claude mostrando patas de pollo?

“Los resultados que calculé con varios modelos son diferentes…”

El 14 de julio, un grupo de amigos usó IA para ayudar a calcular un problema matemático: ¿cuál es el volumen en mililitros de una plataforma redonda con una altura de 11 cm, un diámetro de 7,8 cm en la parte inferior superior y un diámetro de 6,2 cm en la parte inferior? ¿El fondo?

Este internauta usó Claude-2, GPT-4 y ChatGPT, y los resultados fueron: 3634,57 ml, 359,4 ml y 469,3 ml.

Otro amigo del grupo utilizó las palabras de Wenxin para obtener un resultado de 64474,666666666635 mililitros.

“No puedo hacer las preguntas de secundaria”, “Buen chico, todas son diferentes”, comentó el grupo de amigos a toda prisa.

También lo probé con ChatGPT por curiosidad, y el resultado fue 1436,08 ml.

Los pasos de cálculo dados por ChatGPT son completamente correctos, la fórmula de volumen de la tabla circular = πh*(R^2+r^2+R*r)/3.

Sin embargo, el resultado calculado es incorrecto.

Le pedí a ChatGPT que respondiera nuevamente y el resultado fue 513,47 ml.

Es indignante, los pasos de cálculo son completamente correctos y el resultado final es diferente cada vez.

También utilicé la “IA” que viene con el navegador Baidu, que es un modelo grande compatible con Wenxin Yiyan.

El primer resultado es: 193522.10746113118 ml

Esto está tan mal que volví a preguntar y obtuve el resultado: 1168,75 ml

Todavía no está bien, volví a preguntar y el resultado fue: 1099620ml

Después de repetidas preguntas, Baidu AI ya no está instalado y está completamente roto.

Anteriormente se informó que GPT-4 obtuvo la máxima puntuación en el examen de licenciatura en matemáticas del MIT, y más tarde se reveló que una gran parte del conjunto de datos de prueba estaba contaminado. En otras palabras, el modelo es como un estudiante al que le dijeron la respuesta antes del examen, lo cual es una “trampa” flagrante.

También se informó anteriormente que ChatGPT se anuló mientras tomaba la prueba de matemáticas del examen de ingreso a la universidad china.

Los modelos a gran escala son, sin duda, una tecnología que se ha buscado recientemente. Sin embargo, los casos frecuentes de vuelcos de automóviles parecen ser lo que dijo Zhang Tianrong, ex físico y escritor de divulgación científica. La esencia de los modelos de lenguaje es la victoria de la probabilidad. teoría "La máquina **, el convertidor hace una continuación razonable de la entrada, y no es difícil entender los chistes serios sin sentido.

Si el modelo grande es la victoria de la teoría de la probabilidad, entonces el despertar de la inteligencia artificial está lejos de llegar.