文件系統(tǒng)的數(shù)據(jù)處理方法、裝置和云服務(wù)器

基本信息

申請?zhí)?/td> CN201910931745.2 申請日 -
公開（公告）號 CN110674101B 公開（公告）日 2022-03-15
申請公布號 CN110674101B 申請公布日 2022-03-15
分類號 G06F16/182（2019.01）I;G06F16/172（2019.01）I 分類 計算；推算；計數(shù);
發(fā)明人 蔡志強 申請（專利權(quán)）人 北京金山云科技有限公司
代理機構(gòu) 北京超凡宏宇專利代理事務(wù)所（特殊普通合伙） 代理人 李莎
地址 100000北京市海淀區(qū)小營西路33號3F02室
法律狀態(tài) -

摘要

摘要 本發(fā)明提供了一種文件系統(tǒng)的數(shù)據(jù)處理方法、裝置和云服務(wù)器，該方法應(yīng)用于云平臺，該云平臺包括服務(wù)器、大數(shù)據(jù)處理組件和ES，服務(wù)器的個數(shù)與云平臺中文件系統(tǒng)個數(shù)匹配，服務(wù)器部署文件存儲組件和數(shù)據(jù)采集器；首先文件存儲組件將訪問到的文件系統(tǒng)的容量數(shù)據(jù)傳輸至數(shù)據(jù)文件；數(shù)據(jù)采集器采集數(shù)據(jù)文件中的容量數(shù)據(jù)；大數(shù)據(jù)處理組件將采集到的數(shù)據(jù)轉(zhuǎn)換為列表形式的容量數(shù)據(jù)，并將其存儲至ES。該方式能夠在文件系統(tǒng)的數(shù)量增加時，增加服務(wù)器的個數(shù)來進行擴容，提升云平臺處理數(shù)據(jù)的能力，從而提高了數(shù)據(jù)處理的性能；同時，通過大數(shù)據(jù)處理組件和ES能夠?qū)?shù)據(jù)進行格式轉(zhuǎn)換和存儲，優(yōu)化了數(shù)據(jù)存儲形式，更利于后續(xù)檢索等使用。