共查询到10条相似文献，搜索用时 15 毫秒
1.
2.
互联网的迅速发展产生了各种海量数据,快速有效处理海量数据是云计算的目标。Hadoop作为典型的云计算平台可高效处理海量数据。介绍了Hadoop相关概念,包括HDFS、MapReduce等众多子项目;阐述了Hadoop完全分布式平台搭建,包括环境配置、搭建方法等;通过数据处理实验验证了Hadoop分布式平台的有效性。 相似文献
3.
4.
《实验室研究与探索》2013,(8):291-296
随着高校办学规模的快速发展,特别是一个高校多个校区的出现,使得实验资源共享、庞大实验数据存储及快速运算成为实验室管理信息系统建设的难题。将云计算技术应用到实验室管理信息系统的建设中,可以有效地解决上述各种不利因素。通过对云计算技术深入的研究和探讨,实现云计算平台架构设计和平台搭建。并在此基础上,完成基于云计算平台实验室管理信息系统的系统结构设计、功能模块设计及数据库设计。云计算技术和实验室管理信息系统相结合的方式,高效地实现多校区网络协同办公、共享优质教学资源、提高运算速度,并降低系统设备成本。 相似文献
5.
随着云计算技术的迅速发展,其在教育领域的渗透逐渐深入。基于开源云计算框架OpenStack搭建教学云平台,实现教学存储和虚拟云机房两大服务,对高校教学资源的合理配置和教学方式的改善起到一定的促进作用。 相似文献
6.
7.
随着数据挖掘逐渐被应用到金融、娱乐、商业和医疗等多个行业,近年来涌现出各种用于处理海量数据的数据处理引擎,如MapReduce、Spark等。为了使高校实验室更深入地进行数据挖掘领域的理论研究,简要阐述分析了Spark技术及HDFS的概念与基本原理,详细介绍了基于Spark的云计算平台配置方法和实现过程,并对平台搭建过程中遇到的问题进行总结。实验结果证明,该平台能够有效完成分布式数据处理任务。 相似文献
8.
《洛阳师范学院学报》2017,(5):56-59
文章分析了高职院校教育资源的现状和面临的问题,介绍了云存储的结构模型和优势,提出了一种基于云存储的数据存储方案.该方案采用Hadoop云平台,将HDFS与现有高职院校教育云平台相结合,有效解决了教育资源云平台上海量数据的存储问题. 相似文献
9.
刘斌 《安徽科技学院学报》2017,31(4)
针对Apache web服务器集群产生的海量日志记录进行数据分析,使用Flume-ng从web服务器集群收集日志文件,利用Hadoop云平台的HDFS进行分布式日志数据存储,以MapReduce为日志数据分析编程框架,设计实现了一个web日志分析系统,论文阐述了系统的结构、设计思想和实现方法。 相似文献