一種數(shù)據(jù)文件上傳處理方法和系統(tǒng)

基本信息

申請?zhí)?/td> CN202210147890.3 申請日 -
公開（公告）號 CN114546955A 公開（公告）日 2022-05-27
申請公布號 CN114546955A 申請公布日 2022-05-27
分類號 G06F16/16（2019.01）I;G06F16/172（2019.01）I;H04L67/06（2022.01）I 分類 計算；推算；計數(shù);
發(fā)明人 曾覺銳;丁佳軍;鄭祥康;葉正卿;魏美鐘 申請（專利權）人 杭州每刻科技有限公司
代理機構 杭州裕陽聯(lián)合專利代理有限公司 代理人 -
地址 310000浙江省杭州市錢塘新區(qū)萬晶湖畔中心西區(qū)2幢1501室
法律狀態(tài) -

摘要

摘要 本發(fā)明公開了一種數(shù)據(jù)文件上傳處理方法和系統(tǒng)，所述方法包括入下步驟：獲取前端數(shù)據(jù)文件，將所述數(shù)據(jù)文件分片斷點上傳至OSS平臺；生成所述數(shù)據(jù)文件的上傳記錄列表，所述上傳記錄列表包含文件id；調(diào)用RocketMQ將所述文件id發(fā)送到異步消息服務器；所述異步消息服務器分批下載所述OSS平臺的數(shù)據(jù)文件，并執(zhí)行所述數(shù)據(jù)文件的異步處理。所述方法和系統(tǒng)提供了一種異步處理的大數(shù)據(jù)的文件處理方法，可以降低系統(tǒng)的復雜度，并且使得消息上傳和數(shù)據(jù)處理之間進行行為解耦，提高了文件上傳系統(tǒng)的復用能力和水平擴容能力。