自然语言处理中的知识蒸馏:轻量化NLP模型的高效之道 一、引言:NLP模型的轻量化需求 在自然语言处理(NLP)领域,随着预训练语言模型(如BERT、GPT)的兴起,模型规模与性能得到了显著提升,但同时也带来了计算资……