卷積神經(jīng)網(wǎng)絡(luò)的參數(shù)優(yōu)化方法及系統(tǒng)

基本信息

申請(qǐng)?zhí)?/td> CN201610795257.X 申請(qǐng)日 -
公開(公告)號(hào) CN106326939A 公開(公告)日 2017-01-11
申請(qǐng)公布號(hào) CN106326939A 申請(qǐng)公布日 2017-01-11
分類號(hào) G06K9/66(2006.01)I;G06N3/08(2006.01)I 分類 計(jì)算;推算;計(jì)數(shù);
發(fā)明人 諶璟;寧迪浩;孫慶新;關(guān)艷峰;梁波 申請(qǐng)(專利權(quán))人 深圳市諾比鄰科技有限公司
代理機(jī)構(gòu) 深圳市世紀(jì)恒程知識(shí)產(chǎn)權(quán)代理事務(wù)所 代理人 胡海國
地址 518066 廣東省深圳市南山區(qū)桃源街道麗山路大學(xué)城創(chuàng)業(yè)園A區(qū)六樓601室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種卷積神經(jīng)網(wǎng)絡(luò)的參數(shù)優(yōu)化方法,所述卷積神經(jīng)網(wǎng)絡(luò)的參數(shù)優(yōu)化方法包括以下步驟:構(gòu)建卷積神經(jīng)網(wǎng)絡(luò),所述卷積神經(jīng)網(wǎng)絡(luò)包括圖像輸入層、多個(gè)卷積層、至少一個(gè)全連接層,并且,每兩個(gè)所述卷積層之間設(shè)置一激活層,或每兩個(gè)所述卷積層之間設(shè)置一所述激活層和一池化層;將卷積神經(jīng)網(wǎng)絡(luò)訓(xùn)練為全浮點(diǎn)型網(wǎng)絡(luò)以得到浮點(diǎn)型權(quán)值;將所述卷積神經(jīng)網(wǎng)絡(luò)的卷積層中的所述浮點(diǎn)型權(quán)值訓(xùn)練成二值型權(quán)值,和/或?qū)⑺鼍矸e神經(jīng)網(wǎng)絡(luò)的全連接層中的所述浮點(diǎn)型權(quán)值訓(xùn)練成二值型權(quán)值。本發(fā)明還公開了一種卷積神經(jīng)網(wǎng)絡(luò)的參數(shù)優(yōu)化系統(tǒng)。本發(fā)明的技術(shù)方案可以有效避免卷積神經(jīng)網(wǎng)絡(luò)的權(quán)值數(shù)據(jù)量巨大導(dǎo)致的浪費(fèi)計(jì)算資源的弊端。