基于MPI的高性能UVFITS数据合成研究与应用
中国明安图超宽频谱射电日像仪(Mingantu Ultrawide Spectral Radioheliograph ,MUSER)进入实际观测后,每3 ms产生一帧100 kB左右的数据,每天的原始观测数据约3. 5 TB。由于射电日像仪的原始数据采用自定义格式,为了后续数据分析和共享的需要,有必要根据数据存储需求把这些原始数据转换成天文常用的文件格式。在前期工作中已经实现了原始数据格式到UVFITS文件的转换,在此基拙上研究了基于MPI的集群并行环境下UVFITS合成系统性能优化。通过实验验证,在改进后的并行环境下,UVFITS合成系统的性能达到了需求的2. 5倍,可以有效处理当前及未来一定时间内射电日像仪的海量观测数据。同时,改进后的系统具有良好的横向扩展能力,能够为相关项目的数据处理提供借鉴和参考。
王威、王锋、刘应波、陈泰燃、邓辉、梅盈
天文学无线电设备、电信设备遥感技术
UVFITS海量数据MPI并行计算高性能计算
王威,王锋,刘应波,陈泰燃,邓辉,梅盈.基于MPI的高性能UVFITS数据合成研究与应用[EB/OL].(2017-10-20)[2025-08-21].https://chinaxiv.org/abs/201711.01091.点此复制
评论