共查询到20条相似文献,搜索用时 15 毫秒
1.
为了解决日益增长的海量测震波形数据在存储和管理方面存在的性能瓶颈问题,基于测震波形数据管理的
业务需求,选取基于Hadoop大数据技术的分布式文件系统HDFS 和分布式计算Spark架构进行数据的存储和计算,并开
发基于Web 的测震波形数据存储和管理系统,实现对海量测震波形数据的可视化管理和数据运行率检索。 相似文献
2.
数据存储是数字图书馆的核心技术,直接决定了数字图书馆的性能、安全、服务方式甚至是版权问题。本文通过研究和实践,提出了一种新的基于分层存储的数据存储方式,克服了传统存储方式的不足。 相似文献
3.
随着气象数据规模快速增长,气象预报和气候分析对数据服务时效性要求的提高,传统的气象数据存储和服务模式面临一定的挑战.本文提出了结合了hadoop技术的气象数据存储检索应用模式,并进行了实验和性能测试,以评估其实现效果.实现中针对代表性的结构化与非结构化气象业务数据,分别进行了测试,并提出优化方法.性能测试中对于自动站结构化数据的检索,大部分响应时间在毫秒级;对于大结果集的雷达基数据非结构化数据的检索响应时间也在秒级.本文认为基于hadoop的气象数据存储检索可作为应对海量气象数据增长带来的存储服务问题的有效解决途径之一. 相似文献
4.
云存储是分布式存储技术与虚拟化技术结合的产物。为提高云图书馆分布式系统的存储容量、可靠性以及效率问题,本文分析了云数字图书馆对云存储的需求,介绍了云存储的技术架构和应用原理,然后提出一种基于云计算新的存储策略。该策略可以使存储设施负载均衡,提高系统数据传输性能,解决了云图书馆海量存储需求的问题。 相似文献
5.
伴随物联网和互联网技术的发展与应用,数字化档案信息资源呈现爆炸式增长,传统的关系型数据库在海量档案信息资源数据读写效率中存在着诸多的性能瓶颈,如何满足不断增长的档案信息资源数据存储需求成为共享平台建设研究的重点。在对档案信息资源共享平台数据存储需求分析的基础上,对档案信息资源存储系统进行了模块设计,提出了采用HDFS结合Redis作为共享平台数据存储系统的总体架构的方法,并对档案信息资源存储的性能进行测试对比。采用HDFS作为共享平台的存储系统架构支撑,结合Redis缓存技术,能够快速提升档案信息资源的存储处理性能,为档案信息资源共享平台的数据服务提供可靠的基础保障。 相似文献
6.
7.
8.
分布式数字图书馆存储主体面临的技术选择 总被引:4,自引:0,他引:4
根据数字图书馆海量存储和网络读取的特点,通过与传统的SAS存储模式以及其他网络存储系统的对比分析,主张数字图书馆的主体存储设备应选用NAS和SAN的网络存储系统,并描述了他们的功能特点。 相似文献
9.
2019年12月国家档案局正式发布了《基于文档型非关系型数据库的档案数据存储规范》,并于2020年5月1日开始实施,该标准规定了使用文档型数据库存储档案数据的总体要求,提出了使用文档型数据库存储和管理档案数据的基本功能和实施方法。通过对该《规范》的解读,结合文档型非关系型数据库的功能,以MongoDB数据库为实践对象,可以看出其存储档案数据特别是非结构化档案数据的原理和方法与传统解决方案的不同。采用文档型非关系型数据库存储档案数据具备全新的优势和价值。 相似文献
10.
文章首先分析了云存储系统架构模式、可靠性、有效性、完整性及存储系统的可扩展性,并提出了一种基于云计算环境下数字图书馆安全、有效的云存储架构,该存储架构具有良好的可扩展性、容错性和较高存储性能。 相似文献
11.
季晓林 《现代图书情报技术》2005,21(11):45-48
介绍的是一个实验性的系统。它将JBIG-2黑白二值图像压缩技术用于数字图书馆的海量数据存储和网上传输,并已在天津泰达图书馆得到了成功的应用。 相似文献
12.
对于数字图书馆的海量数据资源,需要高速高效和易于管理的存储系统的支持,本文对直接附加存储(DAS,Direct Attached Storage)、网络附加存储(NAS,Network Attached Storage)、存储区域网络(SAN,Storage Area Network)技术作全面的分析和比较,进而探讨结合两种技术优势的SAN-NAS存储模式在数字图书馆的应用。 相似文献
13.
本文首先指出,档案信息资源将呈现出数量急剧增长、媒体形式多样化、内容分散交叉的三大趋势,然后说明了目前档案系统数字档案存储管理的现状及不足之处,接下来分析对比了基于块存储、基于文件存储和基于对象存储这三种存储架构的概念及特性,指出对象存储非常适合于含有大量非结构化数据的档案信息资源的存储,它将成为未来数字档案存储的发展... 相似文献
14.
大数据带给图书馆的影响与挑战 总被引:2,自引:0,他引:2
大数据是近两年IT界最为流行的关键词,但对大数据的内涵与认识各大IT厂商、研究机构与科学家都有着不同的见解。在大数据时代,图书馆将在数据存储、数据挖掘、数据分析等方面面临着巨大的挑战与考验,复杂数据的处理也将成为大数据时代图书馆发展的主旋律,通过大量的非结构化数据、半结构化数据去寻找隐藏在数据背后的世界,进而为图书馆服务的模式、未来发展趋势提供分析与预测将成为大数据时代图书馆的一大主要服务内容。 相似文献
15.
云存储将大量不同类型的存储设备通过软件集合起来协同工作,共同对外提供数据存储服务。云存储服务在数据安全性、可靠性、易管理性等方面给传统存储技术带来了新的挑战。分析了云存储的相关概念、特点以及体系架构,详细阐释了云存储给数字图书馆带来的好处以及发展契机及困扰,最后指出在云存储技术的基础上,数字图书馆应如何在信息管理和服务上定位。 相似文献
16.
随着“大数据时代”的到来,各种信息数据量剧增,原有的图书数据存储模式由于其包身固有的缺点,已无法适应这种大趋势.全息数据存储技术是近年发展起来的一种新颖存储技术,具有较高的存储密度及数据传输速率等优点.通过对比分析数字图书馆相对于传统图书馆的先进性,并结合全息存储技术的优缺点,阐述了将全息数据存储技术用于数字图书馆建设的应用前景. 相似文献
17.
通过新闻采编的数据的时空特性,利用时空编码理论,提出了一种编码方案,对海量的非结构化数据进行管理,以达到解决海量非结构化的新闻采编数据的管理问题的目的。 相似文献
18.
随着全球信息化的蓬勃发展,信息量的爆炸式增长,海量数据的出现催生了大数据技术的到来。同时,信息数字化的发展趋势,驱使着现代图书馆的管理与服务模式需要进行转变。如何高效、安全的存储图书馆海量的信息,如何快速返回用户需要的有用信息?利用大数据技术实现数字图书馆的管理与服务必将成为大势所趋。基于大数据技术的数字图书馆的管理与服务能够有效实现图书馆的信息资源整合与满足现代读者的个性化服务需求。 相似文献
19.
随着高校数字图书馆建设进程的加快,数字资源的馆藏比重在大幅度增加,图书馆目前的数据存储方案已无法应对日益激增的存储需求,"云时代"的到来给图书馆数据存储带来新的契机。以浙江海洋学院图书馆数据存储模式为研究对象,对现有的几大存储技术进行比较分析,探讨了云存储在高校图书馆数据存储中的应用。 相似文献
20.
存储系统作为数字图书馆的支撑平台,是数字图书馆建设的一个基础和重要组成部分。本文介绍了数字图书馆存储方案的选择原则和目前应用于数字图书馆中的主流网络存储系统,系统地比较分析了SAN存储模式和SAN的三类网络存储架构,提出了适合数字图书馆建设的网络存储解决方案。 相似文献