Between performance and frugality in NLP : approaches to reduce de size of (L)LMs.

Entre performance et frugalité en TAL : Approches pour la réduction de la taille des (L)LMs.

Xavier Pillet (1) , Anastasia Volkova (2) , Nicolas Greffard , Richard Dufour (3, 4)

1 LS2N - Laboratoire des Sciences du Numérique de Nantes
2 CITI - CITI Centre of Innovation in Telecommunications and Integration of services
3 LS2N - équipe TALN - Traitement Automatique du Langage Naturel
4 LIA - Laboratoire Informatique d'Avignon

Mots clés: Natural Language Processing; Quantization; Deep Learning

Mots clés: Traitement Automatique de la Langue Naturelle; Apprentissage Profond

Domaines: Intelligence artificielle [cs.AI]

Xavier Pillet, Anastasia Volkova, Nicolas Greffard, Richard Dufour. Entre performance et frugalité en TAL : Approches pour la réduction de la taille des (L)LMs.. 2024. ⟨hal-04576377⟩