天眼查App显示,启明信息技术股份有限公司近日公开了一项名为“基于深度学习的模型优化系统及方法”的发明专利(专利号:CN202411559624.7)。该发明旨在通过多种优化技术,如剪枝、量化和知识蒸馏,显著减小模型体积并提升部署效率,尤其适用于移动设备和嵌入式系统。
该系统包括模型广场、我的模型、模型精调和模型优化四大模块。其优化方法涵盖选择初始模型、应用优化算法(如剪枝算法移除冗余权重或神经元,量化算法转换浮点数为低精度表示)以及知识蒸馏,即利用教师模型指导学生模型训练。通过这些技术,该系统在基本不损失性能的前提下,实现了低成本部署,大幅节省存储空间,并加快了传输和部署速度。
这一创新成果不仅体现了公司在深度学习领域的前沿探索,也展示了其对开源技术的有效改进。
免责声明:本文内容由开放的智能模型自动生成,仅供参考。