Destilación por token
Token-level distillation
También: Token-level distillation
Destilación por token es imitación de distribuciones para cada posición de salida.
Definición técnica
En sistemas de inteligencia artificial, destilación por token se utiliza como imitación de distribuciones para cada posición de salida; debe diseñarse y evaluarse según calidad, coste, seguridad, trazabilidad y compatibilidad con el modelo o flujo de trabajo.