Durante algún tiempo, se ha clasificado a los distintos LLM en función de su capacidad para superar las pruebas de acceso a la escuela o a la universidad. Esta capacidad solo era sorprendente en apariencia. Los modelos no demostraban su capacidad para "razonar" o resolver problemas, sino que se limitaba a reconocer patrones, identificando correlaciones estadísticas entre la entrada proporcionada y la salida requerida. Es más o menos como un estudiante que memoriza todas las respuestas, sin haber entendido ninguna de ellas.
|
etiquetas: ia , llm , mmlu , herramientas , razonamiento , puntos de referencia