深圳鲲云取得用于卷积网络均衡量化的方法及计算设备专利,能够解决卷积网络通道间权重分布不均的问题

深圳鲲云取得用于卷积网络均衡量化的方法及计算设备专利,能够解决卷积网络通道间权重分布不均的问题
2024年08月22日 01:15 金融界网站

本文源自:金融界

金融界2024年8月21日消息,天眼查知识产权信息显示,深圳鲲云信息科技有限公司取得一项名为“用于卷积网络均衡量化的方法及计算设备“,授权公告号CN118133924B,申请日期为2024年5月。

专利摘要显示,本发明提供一种卷积网络均衡量化的方法和计算设备。所述方法包括:筛选出卷积网络通道间权重分布不均的敏感卷积层;确定所述敏感卷积层的权重最值对所在的通道,同时计算所述权重最值对的均衡缩放系数;然后,根据所述权重最值对的均衡缩放系数,分别对权重最值对所在通道的权重和输入激活值进行均衡缩放,从而更新卷积网络;对更新后的卷积网络重新进行模拟量化。根据本发明的技术方案,能够解决卷积网络通道间权重分布不均的问题,增大卷积层各通道的量化分辨率,极大降低模型量化后的精度损失。

财经自媒体联盟更多自媒体作者

新浪首页 语音播报 相关新闻 返回顶部