Reflexiones sobre la capacidad de razonamiento de los grandes modelos lingüísticos

Recientemente, LeCun cuestionó en Twitter la capacidad de razonamiento de los grandes modelos lingüísticos (LLM), señalando que sus capacidades emergentes son principalmente el resultado del aprendizaje contextual. Experimentos de investigación demuestran que los LLM muestran un rendimiento deficiente en tareas de planificación complejas, presentando limitaciones en su capacidad de razonamiento. El artículo también destaca problemas en la investigación de tareas de planificación para LLM, incluyendo la confusión entre el conocimiento del plan y la ejecución del plan. Mejorar la capacidad de planificación de los LLM sigue siendo un desafío. Esta discusión proporciona una visión importante para comprender las capacidades reales de los LLM en los ámbitos del razonamiento y la planificación.