基于HDF5格式的FAST望远镜数据重分布策略

摘要：

目前,世界上最大的单口径射电望远镜FAST(Five-hundred-meter Aperture Spherical radio Telescope)处于调试期,采集的数据面临着加载效率上的瓶颈,给后续的数据处理效率带来了挑战.本文结合科学数据存储格式HDF5(Hierarchi-cal Data Format Release 5)和数据降维,提出一种适合大多数FAST望远镜数据处理场景的存储优化方法.通过优化,硬盘中的数据从二进制表格模型转换为按类型分布的多个数据集.实验结果表明本文提出的方法能够显著提高FAST望远镜的数据加载效率.

关键词：FAST望远镜、HDF5、数据重分布、数据结构

分类号：TP274(自动化技术及设备)

资助基金：国家自然科学基金资助项目U1531246

在线出版日期：2019-06-19（万方平台首次上网日期，不代表论文的发表时间）

页数：共5页

页码：60-64