大规模时空数据分布式存储方法研究

摘要：

提出了一种基于Hadoop云平台的时空数据分布式存储方法,以应对空间应用中出现的无法满足高并发用户在线实时访问和空间信息服务中断等大数据存储瓶颈问题.该方法运用时空数据切分与布局机制使数据均匀分布于集群中以确保存储与访问负载均衡;运用时空对象重组织机制提高数据的时空临近性以匹配时空应用存取模式;运用热点时空对象分布式缓存机制以降低磁盘I/O访问延迟.利用该方法实现了基于Hadoop云平台的时空数据分布式存储中间件原型系统exHDFS,实验结果表明该方法能高效地满足数据密集型空间应用存储需求.

关键词：云平台、空间应用、数据管理、时空数据存储、时空索引、时空数据缓存

所属期刊栏目：23

分类号：TP3;P20

资助基金：863计划2011AA120300,2011AA120302;中国科学院知识创新工程重要方向项目KGCX2-YW-174;中国科学院研究生科技创新与社会实践资助专项资助项目

在线出版日期：2014-03-11（万方平台首次上网日期，不代表论文的发表时间）

页数：共11页

页码：1219-1229