一、蒸馏技术:模型轻量化的核心路径 1.1 知识蒸馏的本质与价值 知识蒸馏(Knowledge Distillation)通过”教师-学生”模型架构,将大型预训练模型(教师)的泛化能力迁移至轻量级模型(学生),实现计算效率与模型……