共查询到20条相似文献，搜索用时 546 毫秒
1.
分布全球的气象传感器每隔一段时间就会收集大量的气象数据,历史气象数据更为庞大,如何存储和处理这些数据已成为一个难题。Hadoop的出现给人们提供了存储和分析大数据的一个利器,它利用HDFS分布式文件系统进行大数据存储,用户通过编写MapReduce程序完成大数据的分析处理。然而,对于很多用户而言,熟练掌握Java语言并编写MapReduce程序并不容易。鉴于此,利用Hive来存储和处理气象数据集。Hive是构建在Hadoop上的数据仓库框架,它支持SQL接口,可以让精通SQL技能的分析师对存放在HDFS中的大规模数据集进行查询分析。 相似文献
2.
3.
针对信息化时代海量数据的问题,神秘大象——hadoop的出现给云计算领域带来了新的浪潮。针对hadoop框架,采用基于Hadoop的子项目Hive对其性能进行测试,并总结了决定MapReduce分布式计算性能的因素。 相似文献
4.
介绍了.NET Framework3.5中的创新性数据访问技术LINQ,分析了LINQ查询技术中的LINQ to SQL架构设计和数据库CRUD操作,建立了对象关系映射模型,在Visual Studio 2008中用LinqDataSource控件和GridView控件、LINQ to SQL技术实现对SQL数据库的数据访问。 相似文献
5.
6.
在开发ASP.NET MVC大中型项目时,通常结合ORM框架技术实现数据库访问。ORM框架与SQL语句操作数据库不同,它不要求开发人员使用SQL语句,而是以面向对象编码方式访问数据库。微软的企业级ORM框架称为“ADO.NET实体数据框架”（Entity Framework,简称EF）。它支持常见的SQL Server、Oracle等大型数据库。介绍了ORM技术以及在ASP.NET程序开发中使用EF创建数据模型的3种方式。EF可以将C#代码自动转成SQL语句,实现对数据库和表的操作。 相似文献
7.
传统的基于SQL语句的查询操作只是把SQL语句形成一个string,然后通过ado.net传给sql server,返回结果集,存在SQL语句难写易错的缺陷。提出使用LINQ TO SQL来替代传统的基于SQL语句的查询操作在C#.NET中实现数据库的操作,简化数据访问的代码量。解决传统的基于SQL语句的查询操作不足的同时,还可以大大简化复杂度,提高效率。 相似文献
8.
随着教据库在计算机系统中日益广泛的使用,其性能优越性的地位日益突出。数据库操作的高效性成为了应用系统是否更具优越性的重要衡量标准。本文为了提高基于SQL数据库应用系统的性能和效率,节约大数据量处理的成本,提出了针对SQL语句进行优化的方案。首先,介绍了数据库优化的通用途径,其次结合基于SQL语句优化的原理,介绍了用于SQL语句优化的策略,结合实例说明SQL优化的技术,最后总结了SQL的优化意义以及技术发展的趋势。 相似文献
9.
聚类算法一直备受研究者青睐。随着信息技术和数据技术的发展,数据的种类和数量急剧增长,云计算平台Hadoop成为这些数据存储和处理的新平台,基于云计算平台Hadoop的聚类算法逐渐成为热门。针对数据挖掘中的聚类问题,依托云计算模式及Hadoop平台,研究了K-means算法,有效改变了现有算法的局限性。 相似文献
10.
11.
MS SQL Sever用事务（Transaction）来跟踪数据库的一切变化,日志文件则用来记录事务对数据库的所有更新操作,它在数据库恢复技术中起着非常重要的作用。本文将以登记日志文件为技术要点,简要讨论MS SQL Server数据库的安全备份与恢复策略。 相似文献
12.
曾金发 《商情·科学教育家》2007,(3):137-138
SQL语言是结构化查询语言,用户可以使用SQL编写应用程序完成所有的数据库管理工作.数据库查询就是发送给数据库的SQL指令,这些指令向数据库请求某种施加在数据集合或数据库上的功能,数据库中的这些查询主要涉及到对数据库内数据的操作.…… 相似文献
13.
MS SQL Server用事务(Transaction)来跟踪数据库的一切变化,日志文件则用来记录事务对数据库的所有更新操作,它在数据库恢复技术中起着非常重要的作用。本文将以登记日志文件为技术要点,简要讨论MS SQL Server数据库的安全备份与恢复策略。 相似文献
14.
传统的基于SQL语句的查询操作只是把SQL语句形成一个string,然后通过ado．net传给sql server,返回结果集,存在SQL语句难写易错的缺陷。提出使用LINQ TO SQL来替代传统的基于sQL语句的查询操作在c#．NET中实现数据库的操作,简化数据访问的代码量。解决传统的基于SQI,语句的查询操作不足的同时,还可以大大简化复杂度,提高效率。 相似文献
15.
16.
本文主要针对在卷烟开单系统中利用数据绑定和结构化查询语言SQL对数据库中的数据进行操作 ,达到简单、快速、易操作的实用目的 相似文献
17.
为了改善传统实体解析算法在单机环境下采用人为方式设定属性权值及阈值难以对海量数据进行快速有效处理的缺点,基于Hadoop框架使用MapReduce计算模型,在多节点分布式环境下,通过不断调整网络学习属性之间的内在关系以及属性权值、阈值等参数后,再将模型放在Hive数据仓库中的真实数据集上进行有效性验证。分别使用5 000及9 000条数据进行实验,实验结果表明,基于学习的并行实体解析算法准确率、召回率和F1值较高。因此,基于学习的并行实体解析算法对于海量数据不仅能进行快速有效的处理,而且能有效降低人工经验中存在的误差,同时也能提高识别结果的准确度,提升识别效率。 相似文献
18.
关系查询语言扩充的关系代数操作中的外联接操作在查询中占有重要地位。本文就SQL语句的语法结构与其查询结果的关系做了详细的分析。 相似文献
19.
作品介绍采用虚拟化技术构建一个云计算平台方案,同时采用SpringSource中的软件工具,开发一套面向虚拟Hadoop集群的管理平台:vCirrus。通过该平台配合虚拟机,可以方便的搭建一个Hadoop集群,对该集群进行监测和管理,还可以收集大量的系统运行信息,为整个云计算系统的维护和优化提供较好的依据。 相似文献