Sistema entrenado con enormes cantidades de texto para predecir y generar lenguaje humano. Entiende contexto, matices y puede responder preguntas, resumir textos o mantener conversaciones.
Un modelo de lenguaje es un sistema entrenado con enormes cantidades de texto para predecir y generar lenguaje humano. Su tarea fundamental es predecir la siguiente palabra (o token) más probable dada una secuencia de palabras anteriores.
Parece simple, pero para hacerlo bien el modelo necesita entender contexto, gramática, semántica, tono e incluso conocer hechos del mundo. La magia está en que, al entrenarse con textos de todo tipo (libros, artículos, conversaciones, código), el modelo aprende patrones lingüísticos y conocimientos que luego puede aplicar a tareas que nunca ha visto explícitamente.
Los modelos de lenguaje modernos (como GPT-4, Claude, Gemini) no solo generan texto: traducen, resumen, escriben código, responden preguntas, mantienen conversaciones y mucho más. Todo ello surge de su capacidad para predecir la siguiente palabra con enorme precisión.
💡 Ejemplos prácticos
Autocompletar del móvilCuando escribes un mensaje y el teléfono te sugiere la siguiente palabra, estás usando un pequeño modelo de lenguaje.
ChatGPTEl ejemplo más conocido. Recibe una instrucción y genera una respuesta completa, palabra a palabra, prediciendo cada siguiente token.
Corrector gramaticalHerramientas como Grammarly o LanguageTool usan modelos de lenguaje para detectar errores y sugerir mejores redacciones.