面向数值模拟数据的HDF5性能优化

被引：10

作者：

沈卫超

曹立强

夏芳

宋磊

机构：

[1] 北京应用物理与计算数学研究所高性能计算中心

来源：

计算机研究与发展 | 2012年 / S1期

关键词：

数值模拟; 大规模数据场; HDF5; 科学数据管理;

D O I：

暂无

中图分类号：

TP311.13 [];

学科分类号：

1201 ;

摘要：

大规模数值模拟数据对可视化分析提出了挑战,I/O是影响可视化交互性能的重要因素.HDF5是科学计算领域广泛采用的存储格式,介绍了HDF5的抽象数据模型、数据读写流程,并使用典型数值模拟数据测试了HDF5的读性能.测试发现HDF5的数据集定位开销较大.根据数值模拟数据的数据块以整数有规律编号的特点,通过在HDF5中增加数据块视图对象来提高读性能.测试表明,该方法可显著加速数据的读取性能.

引用

页码：314 / 318

页数：5