深度神經(jīng)網(wǎng)絡(luò)推理計算中一種基于Profile圖的優(yōu)化方法

基本信息

申請?zhí)?/td> CN202011022468.2 申請日 -
公開(公告)號 CN112149826A 公開(公告)日 2020-12-29
申請公布號 CN112149826A 申請公布日 2020-12-29
分類號 G06N3/08(2006.01)I 分類 計算;推算;計數(shù);
發(fā)明人 李春江;夏一民;劉宗林;龔國輝;劉蓬俠;羅恒;王磊;趙祥;徐雪剛 申請(專利權(quán))人 湖南長城銀河科技有限公司
代理機構(gòu) 長沙市護航專利代理事務(wù)所(特殊普通合伙) 代理人 湖南長城銀河科技有限公司
地址 410008湖南省長沙市高新開發(fā)區(qū)尖山路39號長沙中電軟件園一期15棟
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種深度神經(jīng)網(wǎng)絡(luò)推理計算中一種基于Profile圖的優(yōu)化方法,所述深度神經(jīng)網(wǎng)絡(luò)推理計算中一種基于Profile圖的優(yōu)化方法包括如下步驟:步驟S1、獲取深度神經(jīng)網(wǎng)絡(luò)推理計算節(jié)點的包含計算量和計算時間的Profile信息;步驟S2、將Profile信息與深度神經(jīng)網(wǎng)絡(luò)模型結(jié)構(gòu)描述融合,形成Profile圖:根據(jù)深度神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)描述文件、Profile信息以及計算核心的信息,構(gòu)建包含計算量、計算時間、計算函數(shù)的Profile圖,用于指導計算調(diào)度;步驟S3、基于深度神經(jīng)網(wǎng)絡(luò)Profile圖的計算核心調(diào)度,實現(xiàn)性能優(yōu)化。本發(fā)明可以對深度神經(jīng)網(wǎng)絡(luò)推理全過程的計算工作負載有更清晰直接的認識,可實現(xiàn)面向具體計算設(shè)備計算資源的性能優(yōu)化調(diào)度。??