互蒸馏:神经网络知识蒸馏与压缩的协同进化之路 引言 随着深度学习技术的飞速发展,神经网络模型规模日益庞大,对计算资源的需求急剧增加。然而,在资源受限的场景(如移动设备、嵌入式系统)中部署大型模型面临严……