基于MapReduce的空间敏感性分析并行算法设计

被引:5
作者
李帆 [1 ,2 ]
何洪林 [1 ]
任小丽 [1 ,2 ]
张黎 [1 ]
路倩倩 [1 ,2 ]
于贵瑞 [1 ]
机构
[1] 中国科学院地理科学与资源研究所生态系统网络观测与模拟重点实验室
[2] 中国科学院大学
关键词
遥感参数模型; 空间敏感性分析; Sobol′; MapReduce;
D O I
暂无
中图分类号
P208 [测绘数据库与信息系统]; TP338.6 [并行计算机];
学科分类号
070503 ; 081603 ; 0818 ; 081802 ;
摘要
近年来,随着遥感空间数据广泛应用于生态系统,推动了区域尺度生态遥感参数模型的发展。敏感性分析对识别模型关键参数,降低模型不确定性和完善模型具有重要作用。区域尺度的生态遥感参数模型,在进行模型参数敏感性分析时,由于涉及到空间数据的复杂运算,单机环境无法满足快速分析的要求。为了提高生态遥感参数模型空间敏感性分析效率,本文以青藏高原为研究区域,利用植被光合模型VPM(Vegetation Photosynthesis Model)和开源云计算平台Hadoop,设计和实现了基于Sobol′的生态遥感参数模型空间敏感性分析并行算法,并在实验室集群环境下进行算法分析,验证了算法的有效性和适用性。该算法的核心是利用MapReduce并行编程技术,对空间敏感性分析中的地图抽样和模型迭代过程进行任务分割,将分割后的子任务分配至不同的计算节点进行并行计算。实验表明,本文提出的并行策略,能有效缩短地图抽样和模型迭代计算时间,相比于单机算法,并行算法的运行速度提高了14倍左右。
引用
收藏
页码:874 / 881
页数:8
相关论文
共 24 条
  • [1] 基于Hadoop的云环境下作物生长模型算法的实现与测试
    赵青松
    陈林
    孙波
    朱艳
    姜海燕
    [J]. 农业工程学报, 2013, 29 (08) : 179 - 186
  • [2] 水文模型参数敏感性快速定量评估的RSMSobol方法
    孔凡哲
    宋晓猛
    占车生
    叶爱中
    [J]. 地理学报, 2011, 66 (09) : 1270 - 1280
  • [3] 基于MapReduce的分布式地形数据计算研究
    冯敏
    尹芳
    诸云强
    宋佳
    [J]. 华中科技大学学报(自然科学版), 2011, 39 (S1) : 24 - 27
  • [4] 基于Sobol法的TOPMODEL模型全局敏感性分析
    任启伟
    陈洋波
    周浩澜
    徐会军
    [J]. 人民长江, 2010, 41 (19) : 91 - 94+107
  • [5] 敏感性分析综述
    蔡毅
    邢岩
    胡丹
    [J]. 北京师范大学学报(自然科学版), 2008, (01) : 9 - 16
  • [6] 中国陆地生态信息空间化技术研究(Ⅲ)——温度、降水等气候要素
    刘新安
    于贵瑞
    范辽生
    李正泉
    何洪林
    郭学兵
    任传友
    [J]. 自然资源学报, 2004, (06) : 818 - 825
  • [7] 中国陆地生态信息空间化技术研究(Ⅱ)——太阳辐射要素
    何洪林
    于贵瑞
    刘新安
    苏文
    牛栋
    岳燕珍
    [J]. 自然资源学报, 2004, (05) : 679 - 684+686
  • [8] 中国陆地生态信息空间化技术研究(Ⅰ)——气象/气候信息的空间化技术途径
    于贵瑞
    何洪林
    刘新安
    牛栋
    [J]. 自然资源学报, 2004, (04) : 537 - 544
  • [9] 生态模型的灵敏度分析
    徐崇刚
    胡远满
    常禹
    姜艳
    李秀珍
    布仁仓
    贺红士
    [J]. 应用生态学报, 2004, (06) : 1056 - 1062
  • [10] 论青藏高原范围与面积
    张镱锂
    李炳元
    郑度
    [J]. 地理研究, 2002, (01) : 1 - 8