电脑桌面
添加文秘网到电脑桌面
安装后可以在桌面快捷访问

ETL系统的研究与实现

栏目:财经金融发布:2010-04-27浏览:2391下载187次收藏

(1.北京交通大学电子与信息学院,北京 100044; 2.河北工业大学,天津  300130)
摘 要:文章介绍了etl(extract-transform-load)的实 现,其主要作用在于对各类业务数据进行清理、标准化和汇总,为基于数据仓库的决策分 析应用提供高质量的数据。
关键词:etl;元数据管理;数据仓库
中图分类号:tp311  文献标识码:a  文章编号:1007—6921(2008)20—0082—01

随着全球信息一体化建设步伐的不断加快,越来越多的企业开始构建自己的数据仓库系统, 希望能对历史数据进行具体而又有针对性的分析与挖掘,以期从中发现客户新的需求和新客 户。同时,很多企业开始提供整套的数据仓库解决方案,包括etl工具。
1 etl系统分析

本文所设计的etl工具对存在于不同平台上的异构数据源进行抽取,然后把数据缓冲到内存 中按照用户定义的规则进行转换,最后把转换好的数据加载到目标数据库中,主要从以下几 个方面进行考虑:
1.1 对多种数据源的支持

目前,市场上存在着各种各样的数据源,主要包括以下几种:sqlserver等数据库, 文件, excel文件等。所以在设计etl工具时,要考虑让它尽可能的支持多种数据源。
1.2 可扩展性和可集成性

可扩展性主要是考虑到该软件的应用扩展,这要求对整个系统进行模块化设计,可以根据需 求动态扩展新的应用模块,并且新增模块不影响原来模块的使用,尽量减少系统的耦合。可 集成性主要考虑很多应用需要把etl工具嵌入到各自的应用系统中,所以在设计etl的时候, 应对整个系统的各个模块接口进行

解锁后支持完整在线阅读或下载编辑海量优质内容资源

ETL系统的研究与实现

点击下载
分享:
热门文章
    热门标签
    确认删除?
    QQ
    • QQ点击这里给我发消息
    回到顶部