edición general
181 meneos
26166 clics

¿Son los LLM un simple predictor estadístico de palabras?

Cada vez que se habla de Inteligencia Artificial Generativa, los comentarios se llenan de la misma frase repetida como un mantra: "es solo estadística", "no razona, solo predice la siguiente palabra". La respuesta corta a la pregunta del título es: . Pero la respuesta larga es que eso no significa lo que mucha gente cree que significa. Reducir un LLM a eso es como decir que un cerebro humano es "solo un montón de células intercambiando iones": técnicamente cierto, pero absolutamente inútil para explicar el razonamiento humano.

De la frecuencia a la topología

El error base de la crítica habitual es asumir que los LLM funcionan mediante tablas de frecuencias o permutaciones simples, como el autocompletar de tu móvil de 2015.

Lo que aprenden estos modelos durante el pre-entrenamiento no es una lista de qué palabra suele ir detrás de otra. Lo que hacen es aprender a iterar a lo largo de una función de distribución extraordinariamente compleja. Esta función encapsula la estructura lógica, semántica y sintáctica de todo el corpus de texto que ha producido la humanidad.

Imaginad un mapa multidimensional (el espacio latente). En este mapa, el modelo no memoriza frases; entiende la topología de los conceptos. "Rey" está cerca de "Reina" en la misma dirección y distancia vectorial que "Hombre" está de "Mujer".

  • El modelo no "copia y pega".
  • El modelo navega por esta función matemática.

Esto es lo que le permite "saber cosas" y hablar siguiendo las reglas humanas. No está recuperando datos de una base de datos, está reconstruyendo información navegando por esa distribución aprendida.

La importancia del post-entrenamiento y RLHF

Aquí es donde la mayoría de los comentarios críticos se equivocan más. Si nos quedáramos solo con la predicción de palabras (el modelo base), tendríamos un sistema capaz de hablar, pero incoherente y sin propósito.

Lo que dota de sentido a los LLM modernos no es la predicción estadística, sino el Post-entrenamiento mediante Aprendizaje por Refuerzo con Retroalimentación Humana (RLHF).

En esta fase, no se enseña al modelo a hablar, sino a comportarse como nosotros queremos.

Es aquí donde los ingenieros enseñan al modelo en qué sentido debe desplazarse por esa función de distribución para ser útil. Se le premia o castiga algorítmicamente para moldear su "intencionalidad". Gracias al RLHF, el modelo aprende, entre otras cosas, a:

  1. Encadenar ideas (Reasoning): No solo busca la palabra que "suena bien", sino la que sigue una lógica deductiva paso a paso.
  2. Usar herramientas: El modelo aprende a reconocer cuándo su función de distribución no tiene el dato preciso (ej. una raíz cuadrada compleja) y decide detenerse para llamar a una calculadora o ejecutar código Python.
  3. Consultar datos externos: Aprende a buscar en internet cuando su "memoria" está desactualizada.

Conclusión

Decir que un LLM no tiene propósito porque "su mecanismo base es predecir tokens" es caer en un reduccionismo que nos impide ver la realidad. Esa predicción es el mecanismo de transporte, pero la ruta que elige el modelo viene determinada por un entrenamiento que va mucho más allá de la estadística simple.

Vemos a mucha gente cómoda en la simplificación del "loro estocástico" porque es una respuesta fácil a un problema complejo. Pero si queremos debatir seriamente sobre el futuro de la tecnología, deberíamos molestarnos en indagar cómo funciona esa función de distribución y cómo el aprendizaje por refuerzo está creando sistemas que, efectivamente, razonan (aunque sea de una forma diferente a la nuestra).

221 meneos
713 clics
Un niño de 4 años aparece muerto en una playa de Almería: detenida la madre y su pareja

Un niño de 4 años aparece muerto en una playa de Almería: detenida la madre y su pareja

Luca, un niño de cuatro años ha sido hallado muerto en la noche de este miércoles en una playa situada entre Garrucha y Mojácar (término municipal de este último), en la provincia de Almería, tras un aviso por desaparición que activó un despliegue policial urgente. La Guardia Civil ha detenido a la madre del menor y a otro hombre cuya relación con la mujer aún se investiga, pero según fuentes consultadas, no es el padre del menor fallecido. La causa del fallecimiento apunta a muerte violenta, a falta del informe forense que confirme los hechos.
234 meneos
923 clics
«Estamos siendo bombardeados constantemente con mensajes destructivos»

«Estamos siendo bombardeados constantemente con mensajes destructivos»

Periodista internacional y experto en geopolítica, Daniel Iriarte nos propone en su libro ‘Guerras cognitivas’ (Arpa) entrar en un mundo asombroso e inquietante: servicios de inteligencia, grupos terroristas y mercenarios de la desinformación tratando de cambiar el sentido de nuestro pensamiento, redibujar fronteras y alterar resultados electorales. Todo ello gracias a tecnologías cada día más potentes y accesibles y, sobre todo, apoyándose en nuestros propios sesgos y prejuicios.
235 meneos
600 clics
El Departamento de Educación pide a cientos de empleados despedidos por DOGE que regresen temporalmente (Eng)

El Departamento de Educación pide a cientos de empleados despedidos por DOGE que regresen temporalmente (Eng)

La agencia está pidiendo a los empleados despedidos de la Oficina de Derechos Civiles que regresen y colaboren para ayudar a gestionar los casos de discriminación escolar ya que tras los despidos es imposible la gestión .
209 meneos
1611 clics
El matonismo como estrategia (Roger Senserrich)

El matonismo como estrategia (Roger Senserrich)

La semana pasada, la Casa Blanca publicó la Estrategia de Seguridad Nacional de Estados Unidos. Es un documento corto (29 páginas), falto de detalle y, en ocasiones, espantosamente mal redactado. Comparado con documentos similares de administraciones precedentes1 (incluyendo el de 2017, bajo el propio Trump), es un panfleto ridículo, casi un documento de campaña.
200 meneos
641 clics
Operación 'Tinta': 26 detenidos por pintar grafitis en trenes de toda España

Operación 'Tinta': 26 detenidos por pintar grafitis en trenes de toda España

La Policía Nacional ha detenido a 26 personas por pintar grafitis en trenes de diferentes puntos de España que generaron un perjuicio económico que asciende a más de 900.000 euros. Doce de los arrestos se han realizado en Madrid, nueve en Cataluña y los demás en Valencia, San Sebastián, A Coruña, Mieres (Asturias) y Medina del Campo (Valladolid), informa la Dirección General de la Policía. La operación "Tinta" ha requerido un exhaustivo análisis de las denuncias y una gran coordinación de diferentes unidades policiales.
297 meneos
1486 clics
Duro interrogatorio de Rufián a Aznar (Hemeroteca).

Duro interrogatorio de Rufián a Aznar (Hemeroteca).  

El diputado republicano ha reprochado al ex presidente la corrupción de su partido, la boda de su hija, la guerra de Irak, su política económica y hasta le ha acusado deformar parte de una formación “fundada por los golpistas del 36”.
289 meneos
801 clics
'La invasión de los bárbaros', la película que lucha por llegar a los cines: "Nos llegaron a decir que no iba a interesar al público"

'La invasión de los bárbaros', la película que lucha por llegar a los cines: "Nos llegaron a decir que no iba a interesar al público"  

La operación para salvar las obras del Museo del Prado de los bombardeos de Madrid en otoño de 1936, ha dado mucho de lo que hablar en La Ventana, sobre todo en la sección Acontece que no es Poco de Nieves Concostrina. Sin embargo, en noviembre, esta trama salió de los estudios de la SER para convertirse en una película. Grabada en valencia y basada en una obra de teatro, La invasión de los bárbaros utiliza este episodio de la Guerra Civil como punto de partida para hablar de memoria histórica, represión franquista y fosas comunes.
98 191 0 K 410 Cine
98 191 0 K 410 Cine
284 meneos
370 clics
Los obispos contra el aborto seguro

Los obispos contra el aborto seguro

El presidente de los obispos rechaza la iniciativa popular que pide una interrupción voluntaria del embarazo segura en todos los países de la UE y que ha sido avalada por el Parlamento Europeo esta semana
243 meneos
630 clics
Argentina: ¿Por qué los inversores extranjeros se retiran del negocio supermercadista?. Consumo en baja, márgenes reducidos y reglas inestables explican la salida de multinacionales

Argentina: ¿Por qué los inversores extranjeros se retiran del negocio supermercadista?. Consumo en baja, márgenes reducidos y reglas inestables explican la salida de multinacionales

El peso comenzó a erosionarse en los últimos años y hoy se redujo considerablemente, en un contexto marcado por la caída del poder adquisitivo y un cambio profundo en los hábitos de compra. El consumo de desplazó hacia formatos de cercanía, y a la par, los asalariados reasignaron ingresos por el fuerte aumento de tarifas de servicios públicos y otros gastos indispensables, como salud y telefonía. A eso se suma una elevada presión tributaria, mayores costos de energía, transporte y seguridad, y el encarecimiento del financiamiento.
263 meneos
797 clics

Irán rechaza exigencias de EEUU y critica a Washington por buscar “sumisión” en lugar de un acuerdo

La respuesta iraní se produjo después de que la portavoz del Departamento de Estado de EEUU, Morgan Ortagas, reiterara en el Consejo de Seguridad la disposición de Washington a dialogar, pero solo bajo la condición de que las conversaciones fueran "directas y significativas". Ortagas insistió en el principio de "cero enriquecimiento" dentro de Irán y urgió a Teherán a "tomar la mano extendida de la diplomacia" del presidente Trump. En un comunicado oficial, la Misión iraní en Nueva York manifestó su "sorpresa" por recibir "lecciones de...
191 meneos
2657 clics
Huawei y SMIC dan con la clave para crear chips de 7 nm: hacer un 'Ikea hack' a las máquinas de ASML más antiguas

Huawei y SMIC dan con la clave para crear chips de 7 nm: hacer un 'Ikea hack' a las máquinas de ASML más antiguas

Cuando Estados Unidos recrudeció la guerra comercial con China usando Huawei como chivo expiatorio, desencadenó un avance tecnológico feroz por parte del gigante asiático.
252 meneos
867 clics
Compartir piso a los 72 años por no poder pagar el alquiler: "He perdido parte de mi libertad"

Compartir piso a los 72 años por no poder pagar el alquiler: "He perdido parte de mi libertad"

¿Y cómo se decidió a compartir piso? "Es una decisión como plantearte si te casas o no", explica. Y va más allá: "Es perder una parte de mi libertad", y lo ejemplifica, con su gracia característica, con el hecho de que ya no puede ir desnudo por su casa. Su compañero de piso des un joven de 24 años, cocinero, que sufre el problema de la vivienda más todavía, porque apenas cobra algo más que el salario mínimo, unos 1.200 euros.
237 meneos
2406 clics
Los canales de vídeos basura generados por IA tienen su paraíso en España, con 20 millones de suscriptores

Los canales de vídeos basura generados por IA tienen su paraíso en España, con 20 millones de suscriptores

El término slop ha sido recogido hasta en el diccionario Merriam-Webster para definir «contenido digital de baja calidad producido normalmente en grandes cantidades mediante inteligencia artificial». Resulta que esta basurilla es cada vez más común en las redes sociales, y ahora un informe de Kapwing ha puesto cifras y ejemplos de este método para captar clics, visualizaciones y monetización rápida. España tiene el triste honor de estar en el Top 1 mundial del estudio en cuanto a estas mierdas generadas por IA en YouTube.
272 meneos
1886 clics
Alguien ganó 400 000 dólares en Polymarket apostando por la captura de Nicolás Maduro (EN)

Alguien ganó 400 000 dólares en Polymarket apostando por la captura de Nicolás Maduro (EN)

La cuenta se creó hace menos de una semana e invirtió más de 30 000 dólares el día antes del asalto, obteniendo unas ganancias de más de 408 000 dólares.
205 meneos
2346 clics

Desventuras venezolanas (Roger Senserrich)

Nadie tiene un plan. Trump tiene ideas, proyectos y paranoias variadas en mente, da órdenes y suceden cosas, pero nada de lo que hacen sigue una estrategia elaborada basada en información clave que no conocemos o una hoja de ruta a largo plazo. El presidente quiere acción y atención, pero lo que viene después se deja a improvisaciones futuras.
245 meneos
872 clics
España rompe todos los récords en 2025 con 104.262 coches eléctricos matriculados

España rompe todos los récords en 2025 con 104.262 coches eléctricos matriculados

Con un crecimiento del 77 % frente a 2024, el coche eléctrico confirma su despegue definitivo en España.
252 meneos
661 clics
Dell se baja del carro de la IA: los consumidores han dejado claro que no priorizan la IA al comprar un PC

Dell se baja del carro de la IA: los consumidores han dejado claro que no priorizan la IA al comprar un PC

Dell ha reconocido públicamente lo que ya se sabía, y es que el gancho de la inteligencia artificial (IA) no está sirviendo para vender más ordenadores al consumidor promedio. Fue en el CES de Las Vegas donde Kevin Terwilliger, Jefe de Producto en Dell, reconoció que la gente no está comprando ordenadores de sobremesa o portátiles "por la IA". Es más, indica que la palabra "IA" tiende más a confundir al consumidor que aclarar qué beneficios reales obtiene el usuario con un equipo que integra una NPU dedicada para procesar esta tecnología.
188 meneos
6599 clics

Los mejores amplificadores baratos de la historia  

están considerados auténticas leyendas (algunos de ellos son, posiblemente, los mejores amplificadores jamás diseñados) y muchos son capaces de medirse en igualdad de condiciones con algunos de los aparatos más caros del mercado actual
221 meneos
615 clics
Un país en la mochila

Un país en la mochila  

Serie documental que nos aproxima a la realidad de los paisajes y sociedad de España. Conducida por José Antonio Labordeta, quien realiza su particular crónica viajera y deja en cada programa sus impresiones.
331 meneos
2677 clics
Brutal paliza de dos porteros de la discoteca Opium a un cliente: le reventaron el cráneo y está en coma inducido

Brutal paliza de dos porteros de la discoteca Opium a un cliente: le reventaron el cráneo y está en coma inducido

El pasado 11 de enero la discoteca Opium de Madrid fue escenario de una brutal agresión que ha terminado con un cliente de 42 años en la UCI del Hospital Clínico San Carlos, donde fue inducido al coma. Según explicaron los testigos, cuando bajaban las escaleras al cierre del local, que dan directamente a la calle, fueron empujados por los vigilantes. El agredido les recriminó lo sucedido, momento en que el primer portero la emprendió a puñetazos con él... Se da la circunstancia de que los porteros están vinculados a la empresa investigada...
105 226 7 K 391 Sucesos
105 226 7 K 391 Sucesos
232 meneos
2176 clics
Ya sabes a quién está reclutando ICE. La verdad es mucho peor. Yo soy la prueba. [EN]

Ya sabes a quién está reclutando ICE. La verdad es mucho peor. Yo soy la prueba. [EN]

¿Qué ocurre cuando se realiza una selección mínima antes de contratar agentes, armarles y enviarlos a las calles? Todos lo estamos descubriendo. El plan nunca fue convertirme en agente del ICE. El plan, cuando fui a la Feria de Empleo del Servicio de Inmigración y Control de Aduanas en Texas el pasado agosto, era averiguar cómo era solicitar el puesto de agente del ICE. ¿Quién no sentiría curiosidad? El evento prometía la contratación inmediata de futuros agentes de deportación: entrar sin empleo y salir con un suculento bono de 50 000 dólares
242 meneos
2340 clics
BYD pone precio al hartazgo del PureTech en Italia con descuentos de hasta 10.000 €… ¿llegará a España?

BYD pone precio al hartazgo del PureTech en Italia con descuentos de hasta 10.000 €… ¿llegará a España?

La nueva 'Operazione PUREFICATION' de la filial italiana del gigante chino ofrece descuentos en casi toda su gama a cambio de coches de gasolina con correa de distribución primaria bañada en aceite, es decir, la promoción se dirige principalmente a los poseedores de un motor Puretech que tan mala fama han traído al grupo Stellantis
99 143 1 K 363 Motor
99 143 1 K 363 Motor
194 meneos
3113 clics
Kneecap o cuando la camiseta también toma partido

Kneecap o cuando la camiseta también toma partido

La historia de Kneecap empieza con una frase incómoda, con un rapero detenido por solidarizar, con un idioma que vuelve a escucharse.
98 96 0 K 383 ocio
98 96 0 K 383 ocio
256 meneos
1554 clics
El libro de Kapuscinski de menos de 200 páginas para entender al ultracorrupto último sah de Irán

El libro de Kapuscinski de menos de 200 páginas para entender al ultracorrupto último sah de Irán

El periodista polaco retrata un régimen que dilapidó los petrodólares y oprimió al pueblo iraní con su temible policía secreta...

menéame