Measuring Local Posterior Activity in Variational Language Model Units

Résumé

L’article propose un tableau de mesure de l’activité postérieure locale : divergence KL, échelle postérieure, énergie de la moyenne et proportion d’unités actives. Ces mesures internes sont mises en relation avec le comportement prédictif, la calibration et la robustesse.

Cette page propose une présentation en français. Le titre bibliographique officiel, l’abstract complet, le manuscrit et les métadonnées Google Scholar restent disponibles sur la page scientifique anglaise de référence.