一、知识蒸馏技术的基础认知 知识蒸馏(Knowledge Distillation)是一种模型压缩与加速技术,其核心思想是通过”教师-学生”架构,将大型复杂模型(教师模型)的知识迁移到轻量级模型(学生模型)中。这一技术最早由……