共查询到19条相似文献，搜索用时 187 毫秒
1.
数据同步技术随着企业对各个信息系统之间数据共享的重视而变得越来越重要,数据同步的方法有很多,本文主要介绍基于ETL技术和基于全表扫描及哈希对比两种数据同步方法。基于ETL技术的数据同步是基于中间逻辑表完成数据转换,再通过主键和时间戳的对比而完成数据同步过程。本文以Kettle工具为例进行分析;基于全表扫描及哈希对比的数据同步是基于视图完成数据转换,再通过hash算法扫描对比而完成数据同步过程。 相似文献
2.
决策支持系统构建的关键在于ETL系统的开发。文章从ETL模型设计、ETL策略及实现技术、ETL数据质量控制技术等方面进行研究设计,提出适应中小型企业数据整合需求的ETL解决方案。 相似文献
3.
具有良好质量的数据仓库是数据挖掘的先决条件,一个支持数据抽取,清洗,转换和装载的工具是实现数据仓库必不可少的因素。本文介绍了ETL的技术及相关概念,在数据仓库建设中的重要作用,提出一种流程化,组件化的ETL工具设计思路,对应各个功能在流程中设计和实现方法。 相似文献
4.
提出了一种基于数据质量进行控制的ETL技术,在传统的ETL操作流程中增加脏数据处理模块及抽样数据质量评估模块,并将数据质量控制思想融入到ETL的操作流程设计中,控制ETL过程的数据质量。实验表明,带有质量控制的ETL算法设计优化了ETL工作流程,提高了进入数据挖掘中数据的质量。 相似文献
5.
王智军 《赤峰学院学报(自然科学版)》2010,26(3):19-21
在企事业单位内部,由于部门间相对独立,构建系统时缺乏统一的规划和标准。所以造成了现有的应用系统是分散、异构、封闭的系统,相互之间不能共享信息,形成了一个个“信息孤岛”．本文首先对数据集成涉及的相关技术进行了研究．分析了目前流行的数据集成方法．按照不同的实现技术,将数据集成方法分为三类,即数据转换方法、数据聚合方法以及析取、转换和装载（Exact、Transform and Load,ETL）方法．然后,借鉴数据转换方法以及ETL方法的数据集成实现思想,结合目前中小企业数据集成的需求,提出基于Java和XML技术实现异构数据交换集成的通用解决方案． 相似文献
6.
7.
8.
ETL(Extraction,Transformation,Load)即数据抽取、转换和加载,是构建数据仓库和数据集市的重要组成部分。ETL过程关系到数据仓库的质量,是基于数据仓库所有商业智能应用的基石。阐述了ETL设计中的各个基本步骤,并讨论分析了ETL工具的实现关键技术,对ETL设计人员提供强有力的支持。 相似文献
9.
数据的抽取、转换与加载（ETL）是数据整合的核心过程。在分析高校信息化建设现状基础上,以建立数字化校园、整合数据资源、实现数据共享为目标,提出以ETL为基础建立共享数据中心实现数据整合的方案。介绍了共享数据中心的结构,并研究了从业务系统到共享数据中心的ETL过程设计方法。 相似文献
10.
针对数据分析融合平台建设中数据集成开发效率低、数据集成慢和数据网络分散等问题,提出跨网络传输的分布式ETL框架设计。通过对主流ETL工具进行分析,总结了ETL的工作原理及过程,设计了一种基于消息中间件面向数据集成的分布式ETL框架。使用该框架处理数据集成任务时,提交数据集成过程的描述文件进行数据处理。基于元模型驱动和面向切面设计思想,设计数据任务执行引擎和控制模型。基于该框架开发的工具可使数据开发人员从大量重复的数据操作中解脱出来,将更多精力放在数据的逻辑处理上。 相似文献
11.
使用XML分别描述数据的结构信息和值信息,生成数据结构文件和数据值文件.通过对数据结构文件和用户定义的转换规则文件的分析,生成映射文件,并借助于映射文件完成数据值文件的转换从而最终完成数据交换. 相似文献
12.
关联规则的数据挖掘系统结构及模型的研究 总被引：1，自引：0，他引：1
彭茹 《北京城市学院学报》2005,(4):82-86
数据挖掘是一种数据分析处理技术,其主要特点是对数据库、数据仓库或其它数据源中的数据进行抽取、转换、分析和其它模型化处理,从中提取辅助企业和科研决策的知识。关联规则挖掘是数据挖掘技术的一个重要研究方向。本文对基于关联规则的数据挖掘技术进行了研究,并提出了一个数据挖掘工具集原型。 相似文献
13.
如何迅速从海量数据中获得准确的决策信息是现代商业企业致胜的关键。以数据仓库及OLAP Services为工具,通过建立多维数据模型和数据立方体,针对企业销售数据设计一个数据仓库管理系统,把事务数据库中原始混乱的数据集成转化变成数据仓库中规范的数据方便用户的查询,进而辅助企业决策。实际证明系统实用方便,大大提高企业信息管理效率。 相似文献
14.
探讨了在空间数据挖掘系统中采用多小波算法处理目标空间海量数据的方法,结合空间数据挖掘系统的体系结构,给出了基于多小波变换的空间数据挖掘的结构模型,探讨了多小波的性质、平衡多小波的构造、空间数据发掘的过程。 相似文献
15.
全球供应链管理来调整采购、生产、运送过程,企业能更好的满足商业需要和客户的要求。各个合作企业自动的从自己ERP系统内把数据提取出来,自动生成XML文件,然后通过提供的Transform包进行格式转换,转换成Mar-ket Place系统标准的格式。这样做使得进入Market Place系统的数据格式不受限制。 相似文献
16.
黎能武 《荆门职业技术学院学报》2000,15(3):11-15
在关系数据库系统中的数据组织可以很方便的实现一对多关系,但难于实现多对多关系。本文从Ｅ－Ｒ建模方法入手,将多对多关系的经典Ｅ－Ｒ模型进行适当的变换,将其变为一对多数据模型。然后根据这一模型来用关系数据库系统实现数据的多对多关系的数据组织。 相似文献
17.
心电(ECG)信号压缩目前是生物医学信号压缩的一个热门研究领域,本文通过对众多压缩方法进行比较研究,总结了目前心电数据压缩中的一些常用方法和先进技术,提出了基于小波变换的ECG信号压缩方法的一个探索思路。 相似文献
18.
小波变换是一个新兴数学分支，本文利用小波变换的特性研究图象数据压缩方法，以探寻高比例、高质量压缩图象数据的新途径。 相似文献
19.
Flash平台技术包含动画制作软件、编程语言、IDE、框架和一系列规范,有独特的技术生态系统,得到了快速的发展和广泛的应用。应用基于Flash平台技术进行网络音频频谱可视化的实验设计,有利于学生进一步掌握ActionScript的音频处理方法,深入实践位图编程、矩阵变换以及三维图形的构建方式,进而掌握数据可视化的方法与技巧。 相似文献