一種界面元素識別方法及系統(tǒng)

基本信息

申請?zhí)?/td> CN202110787288.1 申請日 -
公開（公告）號 CN113657444A 公開（公告）日 2021-11-16
申請公布號 CN113657444A 申請公布日 2021-11-16
分類號 G06K9/62（2006.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I;G06F11/36（2006.01）I 分類 計算；推算；計數(shù);
發(fā)明人 廖萬里;金卓;葉錫建 申請（專利權）人 珠海金智維信息科技有限公司
代理機構 廣州嘉權專利商標事務所有限公司 代理人 張芬
地址 519000廣東省珠海市唐家灣鎮(zhèn)哈工大路1號1棟A301t
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了界面元素識別方法及系統(tǒng)，該方法包括以下步驟：獲取待識別界面的圖像數(shù)據(jù)；通過視覺模型獲取圖像數(shù)據(jù)中的控件預測目標，視覺模型的獲取方法為：在深度遷移學習過程中，對谷歌目標檢測模型進行第一改進，并通過樣本數(shù)據(jù)集訓練第一改進后的谷歌目標檢測模型，得到視覺模型；基于預設閾值對控件預測目標進行篩選，得到識別界面中的控件坐標。本發(fā)明至少具有以下有益效果：提高了界面識別元素的識別速度，且識別目標成功率和精度高，能有效防止漏檢。