知识蒸馏:如何用一个神经网络训练另一个神经网络 一、知识蒸馏的起源与核心思想 知识蒸馏(Knowledge Distillation)的概念最早由Geoffrey Hinton在2015年提出,其核心思想是通过一个已训练好的大型教师网络(Tea……