Fundamentos de los modelos
GratuitoQué ocurre dentro de un modelo de lenguaje entre una pregunta y su respuesta: cómo se divide el texto, cómo se relacionan sus partes y cómo se elige cada palabra. Es la base para entender casi todo lo demás.
Conceptos clave
- Token
- Fragmento de texto con el que trabaja el modelo: una palabra, parte de ella o un signo.
- Atención
- Mecanismo que pondera cuánto influye cada parte del texto en cada otra.
- Temperatura
- Parámetro que regula cuánto se aleja el modelo de las opciones más probables.
Preguntas para pensar
- ¿Por qué la misma pregunta recibe respuestas distintas?
- ¿Qué queda fuera de la ventana de contexto?
- ¿Qué diferencia hay entre fluidez y exactitud?