10.3969/j.issn.1000-386x.2016.11.007
一种面向CASA的分布式数据存储策略
随着天文设备的进步发展,对海量天文数据处理形成了新的挑战。为使当前主流的天文数据分析软件可以有效处理海量数据,提出一种适用于射电天文处理上层应用的分布式数据存储策略 DDSS(Distributed Data Storage Strategy)。首先,设计分布式数据存储策略的系统框架。其次,设计混合分片列式存储方法,在保留列存储查询优势的同时提升了数据导入的速度。进一步,通过维护基于相对位置映射的元数据来快速读取包含大量数据的天文阵列数据,显著地提升了天文处理应用底层数据读写的吞吐量。最后,通过实验证明了该方法的有效性。
分布式、天文、阵列数据
33
TP3(计算技术、计算机技术)
2016-12-05(万方平台首次上网日期,不代表论文的发表时间)
共5页
28-32