基于Hadoop的气象数据存储检索应用研究 |
| |
引用本文: | 曾乐,陈东辉,肖卫青,梁中军.基于Hadoop的气象数据存储检索应用研究[J].信息系统工程,2014(8):138-140. |
| |
作者姓名: | 曾乐 陈东辉 肖卫青 梁中军 |
| |
作者单位: | 国家气象信息中心系统工程室 |
| |
摘 要: | 随着气象数据规模快速增长,气象预报和气候分析对数据服务时效性要求的提高,传统的气象数据存储和服务模式面临一定的挑战.本文提出了结合了hadoop技术的气象数据存储检索应用模式,并进行了实验和性能测试,以评估其实现效果.实现中针对代表性的结构化与非结构化气象业务数据,分别进行了测试,并提出优化方法.性能测试中对于自动站结构化数据的检索,大部分响应时间在毫秒级;对于大结果集的雷达基数据非结构化数据的检索响应时间也在秒级.本文认为基于hadoop的气象数据存储检索可作为应对海量气象数据增长带来的存储服务问题的有效解决途径之一.
|
关 键 词: | 气象 分布式存储 数据检索 |
本文献已被 维普 等数据库收录! |
|