基于離散余弦變換通道重要性得分的剪枝方法

基本信息

申請?zhí)?/td> CN202110599814.1 申請日 -
公開(公告)號 CN113240111A 公開(公告)日 2021-08-10
申請公布號 CN113240111A 申請公布日 2021-08-10
分類號 G06N3/08;G06F17/14 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 溫序銘;陳堯森;陳智 申請(專利權(quán))人 成都索貝視頻云計(jì)算有限公司
代理機(jī)構(gòu) 成都九鼎天元知識產(chǎn)權(quán)代理有限公司 代理人 賈年龍
地址 610041 四川省成都市中國(四川)自由貿(mào)易試驗(yàn)區(qū)成都高新區(qū)天府大道中段1268號1棟14層1號
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了基于離散余弦變換通道重要性得分的剪枝方法,包括:利用離散余弦變換,將深度卷積網(wǎng)絡(luò)中的輸出特征圖進(jìn)行變換,計(jì)算對應(yīng)的通道重要性得分來確定通道的重要性程度,然后按照設(shè)定的剪枝率優(yōu)先減掉通道重要性得分較低的通道從而得到目標(biāo)網(wǎng)絡(luò),最后將保留的通道初始化目標(biāo)網(wǎng)絡(luò)進(jìn)行調(diào)優(yōu),以達(dá)到保持精度的條件下降低模型參數(shù)和計(jì)算量等;本發(fā)明極大的提高了通道剪枝的有效性,并且其方法極為簡單,能被靈活的應(yīng)用在不同的應(yīng)用領(lǐng)域里,為神經(jīng)網(wǎng)絡(luò)模型壓縮提供了一種可靠且高效的方法。