一種RPA元素智能融合拾取的方法與系統(tǒng)

基本信息

申請?zhí)?/td> CN202110944521.2 申請日 -
公開（公告）號 CN113391871A 公開（公告）日 2021-09-14
申請公布號 CN113391871A 申請公布日 2021-09-14
分類號 G06F9/451（2018.01）I;G06F16/31（2019.01）I;G06F16/33（2019.01）I;G06F16/35（2019.01）I;G06K9/00（2006.01）I;G06K9/20（2006.01）I;G06N3/04（2006.01）I;G06N3/08（2006.01）I 分類 計算；推算；計數(shù);
發(fā)明人 歐陽小剛 申請（專利權）人 杭州實在智能科技有限公司
代理機構 杭州云睿專利代理事務所（普通合伙） 代理人 張驍敏
地址 310000浙江省杭州市余杭區(qū)人工智能小鎮(zhèn)六號樓六層
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種RPA元素智能融合拾取的方法與系統(tǒng)，通過將基于深度神經(jīng)網(wǎng)絡的CV元素拾取技術和傳統(tǒng)元素拾取技術相結合，并在RPA軟件后臺根據(jù)用戶所要操作的軟件界面的不同，為用戶自動選擇更精準、更合適的元素拾取方式（當然也支持用戶手動進行拾取方式切換），同時在操作過程中能夠實現(xiàn)拾取方式的自動、無感切換。另外，在各個元素實現(xiàn)定位的基礎上，提供界面元素的內容解析能力，實現(xiàn)元素的類別、屬性、位置、層次等的有序輸出，從而支持更多樣化的元素操作能力。通過上述功能，可以為用戶提供更流暢的使用體驗，提高RPA軟件可用性和支持范圍；并減少用戶使用成本，降低用戶編輯開發(fā)RPA流程的時間。