一種根據(jù)食譜生成食物圖像的方法
基本信息
申請(qǐng)?zhí)?/td> | CN202010846696.5 | 申請(qǐng)日 | - |
公開(kāi)(公告)號(hào) | CN112017255A | 公開(kāi)(公告)日 | 2020-12-01 |
申請(qǐng)公布號(hào) | CN112017255A | 申請(qǐng)公布日 | 2020-12-01 |
分類號(hào) | G06T11/00(2006.01)I | 分類 | 計(jì)算;推算;計(jì)數(shù); |
發(fā)明人 | 戴超;盛斌;潘思源;賀加原 | 申請(qǐng)(專利權(quán))人 | 上海志唐健康科技有限公司 |
代理機(jī)構(gòu) | - | 代理人 | - |
地址 | 200030上海市徐匯區(qū)樂(lè)山路33號(hào)1號(hào)樓211室 | ||
法律狀態(tài) | - |
摘要
摘要 | 本發(fā)明提供一種根據(jù)食譜生成食物圖像的方法,包括:輸入食物圖像和食譜,利用本發(fā)明提出的圖像文本嵌入模塊ITEM從食譜中提取特征并嵌入,再計(jì)算食物圖像和食譜的余弦相似度;利用本發(fā)明提出的CIGM生成低分辨率圖像;結(jié)合低分辨率圖像和文本特征通過(guò)CIGM生成高分辨率圖像,逐步訓(xùn)練ITEM和CIGM,在訓(xùn)練CIGM時(shí),固定ITEM的值保持權(quán)重不變,在訓(xùn)練CIGM時(shí)利用兩種損失函數(shù)計(jì)算方式:由判別器給出的文本圖像對(duì)語(yǔ)義一致性對(duì)抗損失函數(shù)和基于ITEM的文本語(yǔ)義損失函數(shù)。相比于現(xiàn)有根據(jù)食譜生成食物圖像的方案,本發(fā)明一種根據(jù)食譜生成食物圖像的方法,在視覺(jué)真實(shí)性和語(yǔ)義一致性方面都有更好的表現(xiàn)。?? |
