基于MapRedue的大规模矢量空间数据选择查询处理 |
| |
引用本文: | 何涛,刘强,郑泽忠,刘帅.基于MapRedue的大规模矢量空间数据选择查询处理[J].科技咨询导报,2014(9):193-194. |
| |
作者姓名: | 何涛 刘强 郑泽忠 刘帅 |
| |
作者单位: | 电子科技大学资源与环境学院,四川成都611731 |
| |
摘 要: | 为高效地处理大规模矢量空间数据,基于Hadoop的并行计算框架MapRedue,实现了一种分布式的矢量空间数据选择查询处理方法.首先,分析OGC简单要素标准与Hadoop的Key/Value数据模型,设计了可存储于Hadoop HDFS的矢量文件格式;其次,根据两阶段的过滤-精炼策略,对Map输入数据分片、选择查询处理过程及Reduce结果合并等关键步骤进行了详细阐述;最后,基于上述技术,利用Hadoop集群环境对所提出的方法进行验证,该方法具有较好的可行性和较高的效率.
|
关 键 词: | MapRedue 选择查询 存储模型 Key Value 矢量数据文件 |
本文献已被 维普 等数据库收录! |
|