對賬系統(tǒng)中的大文件分布式處理方法及裝置

基本信息

申請?zhí)?/td> CN202111102977.0 申請日 -
公開（公告）號 CN114020716A 公開（公告）日 2022-02-08
申請公布號 CN114020716A 申請公布日 2022-02-08
分類號 G06F16/182（2019.01）I;G06F16/172（2019.01）I;G06Q20/02（2012.01）N;G06Q20/08（2012.01）N 分類 計算；推算；計數(shù);
發(fā)明人 軒煥煥;吳龍偉 申請（專利權）人 寶付網(wǎng)絡科技（上海）有限公司
代理機構 上海海鈞知識產(chǎn)權代理事務所（特殊普通合伙） 代理人 許蘭
地址 200231上海市徐匯區(qū)華涇路509號7幢227室
法律狀態(tài) -

摘要

摘要 本申請公開了對賬系統(tǒng)中的大文件分布式處理方法及裝置，適用于包括文件服務器和N個節(jié)點的集群中，每個節(jié)點對應一個應用服務器，所述文件服務器為所述N個節(jié)點中的至少一個提供對賬文件。所述方法對賬文件處理采用集群部署，通過算法將文件進行邏輯劃分，分成若干塊，將邏輯分片后的文件內容分配到集群中相應的節(jié)點，各節(jié)點分別處理各自的任務，有效地規(guī)避傳統(tǒng)方案中硬件不足、處理效率慢等弊端，讓大文件的處理在硬件配置較低的虛擬機、或者云服務器上也能快速處理，便于應用程序的微服務化，另外通過分布式改造后，徹底解決了單點不穩(wěn)定的潛在風險。