🧠 SEAL significa Self-Adapting Language Models, una propuesta reciente del MIT que rompe con un límite clásico de los modelos de lenguaje: su pasividad.
Mientras los LLMs actuales esperan instrucciones y operan dentro del contexto que les damos, SEAL aprende a reescribirse. Literalmente genera sus propios datos de entrenamiento y define cómo afinarse, como si tomara apuntes y se pusiera a estudiar por su cuenta.
📈 Con esto, mejora tareas como:
Integrar nueva información (sin repetirle todo cada vez).
Adaptarse a tareas nuevas con muy pocos ejemplos.
Superar incluso a datos sintéticos generados por GPT-4.1.
Y todo esto sin ser más grande… solo más inteligente.
🌀 En un mundo donde los modelos pronto habrán leído todo el texto público disponible, el próximo salto no será tener más contexto, sino saber qué hacer con él.
Como decía cierto cantante: “We’re never gonna survive… unless we get a little crazy.”
Quizá los modelos también.