首页 | 本学科首页   官方微博 | 高级检索  
     检索      

基于MapRedue的大规模矢量空间数据选择查询处理
引用本文:何涛,刘强,郑泽忠,刘帅.基于MapRedue的大规模矢量空间数据选择查询处理[J].科技咨询导报,2014(9):193-194.
作者姓名:何涛  刘强  郑泽忠  刘帅
作者单位:电子科技大学资源与环境学院,四川成都611731
摘    要:为高效地处理大规模矢量空间数据,基于Hadoop的并行计算框架MapRedue,实现了一种分布式的矢量空间数据选择查询处理方法.首先,分析OGC简单要素标准与Hadoop的Key/Value数据模型,设计了可存储于Hadoop HDFS的矢量文件格式;其次,根据两阶段的过滤-精炼策略,对Map输入数据分片、选择查询处理过程及Reduce结果合并等关键步骤进行了详细阐述;最后,基于上述技术,利用Hadoop集群环境对所提出的方法进行验证,该方法具有较好的可行性和较高的效率.

关 键 词:MapRedue  选择查询  存储模型  Key  Value  矢量数据文件
本文献已被 维普 等数据库收录!
设为首页 | 免责声明 | 关于勤云 | 加入收藏

Copyright©北京勤云科技发展有限公司  京ICP备09084417号