基于Phoenix的地理空间大数据管理系统

摘要：

NoSQL数据库HBase已被众多应用系统作为存储和管理海量数据的解决方案,但HBase并未提供对地理空间数据的直接支持,因此提出了名为GS-Phoenix的地理空间大数据管理系统,GS-Phoenix构建在开源项目Phoenix和HBase之上.在插入空间数据时,GS-Phoenix自动以主键索引或二次索引方式生成基于空间填充曲线的空间索引.利用该空间索引,GS-Phoenix实现了矩形范围查询、不规则范围查询和k近邻(knearestneighbors,kNN)查询等复杂空间查询所需的基本操作.GS-Phoenix利用用户自定义函数机制和服务器端排序机制将空间查询中的主要运算任务放置在服务器端,有效降低了客户端的计算负担.此外,GS-Phoenix还设计了基于数据空间分布统计的查询优化方法,进一步提高了空间查询效率.实验表明,GS-Phoenix能够在小规模的集群上实现17万/s左右的数据插入速率,常用的空间范围查询和kNN查询都可以在几百毫秒内完成,因此GS-Phoenix能够适用于各类具有高数据吞吐和实时空间查询需求的位置相关应用系统.

关键词：地理空间数据、分布式存储、HBase、GS-Phoenix、空间查询处理

所属期刊栏目：45

分类号：P208(一般性问题)

资助基金：地理信息工程国家重点实验室开放基金;国家自然科学基金

在线出版日期：2020-07-15（万方平台首次上网日期，不代表论文的发表时间）

页数：共9页

页码：719-727