一、知识蒸馏在NLP中的技术定位与核心价值 知识蒸馏(Knowledge Distillation, KD)作为模型轻量化技术的代表,通过”教师-学生”架构实现大模型知识向小模型的高效迁移。在NLP领域,其核心价值体现在三方面: 模……