视觉模型压缩方法、装置、设备、存储介质以及程序产品

摘要

本公开提供了一种视觉模型压缩方法、装置、设备、存储介质以及程序产品，涉及人工智能技术领域，具体为计算机视觉和深度学习技术领域。该方法的一具体实施方式包括：视觉模型的输入标记输入至视觉模型；获取视觉模型的第i层的输出标记；基于第i层的输出标记，生成第一转置标记；对第一转置标记进行降维，生成降维标记；将降维标记输入至第i+1层进行变换，生成第i+1层的输出标记。该实施方式提供了一种在标记维度进行降维的视觉模型压缩方法，通过减少标记数目加快模型训练。