多源異構(gòu)遙感大數(shù)據(jù)的高性能存儲技術(shù)研究
作者：楊景玉; 張珩; 李寶文; 吳磊; 高德成 蘭州交通大學(xué)電子與信息工程學(xué)院; 甘肅蘭州730070; 蘭州鐵路局計劃統(tǒng)計處; 甘肅蘭州730000; 甘肅省計量研究院; 甘肅蘭州730070; 甘肅省人工智能與圖形圖像處理工程研究中心; 甘肅蘭州730070
摘要：為了提高多源異構(gòu)海量遙感數(shù)據(jù)處理流程中存儲系統(tǒng)的性能,研究了自適應(yīng)內(nèi)存緩存機(jī)制在遙感數(shù)據(jù)存儲中的應(yīng)用.首先使用Alluxio建立統(tǒng)一的虛擬文件系統(tǒng),并研究了基于空間關(guān)系及歷史數(shù)據(jù)訪問推理的緩存機(jī)制.其次引入了基于內(nèi)存運(yùn)算的Presto作為遙感數(shù)據(jù)元信息的存儲組件,為海量的遙感數(shù)據(jù)元信息及高級語義信息提供實時的讀寫支持.實驗結(jié)果表明,相對于使用傳統(tǒng)存儲方式的流程,使用自適應(yīng)內(nèi)存緩存遙感數(shù)據(jù)存儲系統(tǒng)的流程處理耗時減少18%以上,該存儲系統(tǒng)對提高遙感數(shù)據(jù)處理效率貢獻(xiàn)顯著.
注：因版權(quán)方要求，不能公開全文，如需全文，請咨詢雜志社
