电脑桌面
添加蜗牛文库到电脑桌面
安装后可以在桌面快捷访问

低比特量化在目标检测上的研究与应用_毛淑菲.pdfVIP免费

低比特量化在目标检测上的研究与应用_毛淑菲.pdf_第1页
低比特量化在目标检测上的研究与应用_毛淑菲.pdf_第2页
低比特量化在目标检测上的研究与应用_毛淑菲.pdf_第3页
159信息:技术与应用信息记录材料2022年12月第23卷第12期0引言近年来,随着深度学习技术的发展,网络的精度以及速度相比传统目标检测网络有大大的提升,但是大部分网络是以不断增加网络结构深度和宽度、模型的复杂度来获得更佳的性能,但这势必带来网络模型参数庞大,参数空间存在一定的冗余以及内存占用过大等问题[1]。这些问题使得目标检测[2]的算法无法达到实时性检测,无法适合现实场景中的应用程序,也让模型直接部署在资源受限的低端设备成了一大阻碍。对此,部分学者采用剪枝降低网络的复杂性,但是剪枝过程未对跳跃连接层进行有效处理;龚圣斌等[3]通过使用轻量化Inception-V2更换FasterR-CNN网络的特征提取网络使得网络更轻量化;张丽莹等[4]通过深度可分离卷积替换了模型中的普通卷积从而减少参数量。像类似直接用已经轻量化的backbone直接去替换大网络中普通的主干网络治标不治本,甚至对于一些具有计算密集型设备的计算反而会有一定的抑制,模型性能有很大下降。本文在原有量化算法[5-8]基础上进行改进,摒弃原有量化计算流程中大量反复的加法与乘法的混合操作,简化模型中量化的计算流程,同时选取目标检测一阶段和两阶段的经典网络进行训练,同时模型数据流clip模型训练,分别分析其模型参数的分布情况,最后对模型低比特量化。1量化原理目标检测网络模型FasterRCNN和YOLOv3-SPP做采用均匀量化[9],其量化方案严格的数学定义如下:Xq(x,scale,zp)=round(x/scale+zp)(1)式(1)中的x表示的是网络浮点输入,Xq表示的是经过量化后的结果值。scale和zp是量化参数,其中scale体现了映射中的比例关系,zp则是零基准zero-point,也就是浮点中的零在量化tensor中的值。它们建立了浮点tensor到量化tensor的映射关系。当对称量化器将zp限制为0,对称量化公式如式(2)所示[10]:Xq(x,scale)=round(x/scale)(2)2量化的加速本文中YOLOv3以及FasterRCNN网络中卷积算子Y=WX(这里暂时不考虑偏置),Y是模型输出,W表示模型权重,X表示数据流,如果采用传统的量化方法,对数据量化是每个操作计算出最优的一组scale,那么需要对输入数据X∈[xmin,xmax],W∈[wmin,wmax]做如下操作:1)(2ˆminminmax−−−=xxxxx,Xx∈(3)1)(2ˆminminmax−−−=wwwww,Ww∈(4)接着对x,w的量化如式(5)(6),qx,qw是对x与w做量化操作的结果:]ˆ2[xxxkq⋅=(5)]ˆ2[wwwkq⋅=(6)Y=WX算子的反量化,由于式(5)(6)可得xkqxx2ˆ=,wkqww2ˆ=,...

1、当您付费下载文档后,您只拥有了使用权限,并不意味着购买了版权,文档只能用于自身使用,不得用于其他商业用途(如 [转卖]进行直接盈利或[编辑后售卖]进行间接盈利)。
2、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。
3、如文档内容存在违规,或者侵犯商业秘密、侵犯著作权等,请点击“违规举报”。

碎片内容

蜗牛文库的最新文档

二年级数学下册其中检测卷二年级数学下册其中检测卷附答案#期中测试卷.pdf
10.00金币
0下载
二年级数学下册期末质检卷(苏教版)二年级数学下册期末质检卷(苏教版)#期末复习 #期末测试卷 #二年级数学 #二年级数学下册#关注我持续更新小学知识.pdf
10.00金币
0下载
二年级数学下册期末混合运算专项练习二年级数学下册期末混合运算专项练习#二年级#二年级数学下册#关注我持续更新小学知识 #知识分享 #家长收藏孩子受益.pdf
10.00金币
1下载
二年级数学下册年月日三类周期问题解题方法二年级数学下册年月日三类周期问题解题方法#二年级#二年级数学下册#知识分享 #关注我持续更新小学知识 #家长收藏孩子受益.pdf
10.00金币
0下载
二年级数学下册解决问题专项训练二年级数学下册解决问题专项训练#专项训练#解决问题#二年级#二年级数学下册#知识分享.pdf
10.00金币
1下载
二年级数学下册还原问题二年级数学下册还原问题#二年级#二年级数学#关注我持续更新小学知识 #知识分享 #家长收藏孩子受益.pdf
10.00金币
1下载
二年级数学下册第六单元考试卷家长打印出来给孩子测试测试争取拿到高分!#小学二年级试卷分享 #二年级第六单考试数学 #第六单考试#二年级数学下册.pdf
10.00金币
0下载
二年级数学下册必背顺口溜口诀汇总二年级数学下册必背顺口溜口诀汇总#二年级#二年级数学下册 #知识分享 #家长收藏孩子受益 #关注我持续更新小学知识.pdf
10.00金币
0下载
二年级数学下册《重点难点思维题》两大问题解决技巧和方法巧算星期几解决周期问题还原问题强化思维训练老师精心整理家长可以打印出来给孩子练习#家长收藏孩子受益 #学霸秘籍 #思维训练 #二年级 #知识点总结.pdf
10.00金币
0下载
二年级数学下册 必背公式大全寒假提前背一背开学更轻松#二年级 #二年级数学 #二年级数学下册 #寒假充电计划 #公式.pdf
10.00金币
0下载
蜗牛文库+ 关注
实名认证
内容提供者

提供各种专业文档内容

确认删除?
QQ
  • QQ点击这里给我发消息
微信客服
  • 微信客服
回到顶部