ETL系统的研究与实现
(1.北京交通大学电子与信息学院,北京 100044; 2.河北工业大学,天津 300130)
摘 要:文章介绍了etl(extract-transform-load)的实 现,其主要作用在于对各类业务数据进行清理、标准化和汇总,为基于数据仓库的决策分 析应用提供高质量的数据。
关键词:etl;元数据管理;数据仓库
中图分类号:tp311 文献标识码:a 文章编号:1007—6921(2008)20—0082—01
随着全球信息一体化建设步伐的不断加快,越来越多的企业开始构建自己的数据仓库系统, 希望能对历史数据进行具体而又有针对性的分析与挖掘,以期从中发现客户新的需求和新客 户。同时,很多企业开始提供整套的数据仓库解决方案,包括etl工具。
1 etl系统分析
本文所设计的etl工具对存在于不同平台上的异构数据源进行抽取,然后把数据缓冲到内存 中按照用户定义的规则进行转换,最后把转换好的数据加载到目标数据库中,主要从以下几 个方面进行考虑:
1.1 对多种数据源的支持
目前,市场上存在着各种各样的数据源,主要包括以下几种:sqlserver等数据库, 文件, excel文件等。所以在设计etl工具时,要考虑让它尽可能的支持多种数据源。
1.2 可扩展性和可集成性
可扩展性主要是考虑到该软件的应用扩展,这要求对整个系统进行模块化设计,可以根据需 求动态扩展新的应用模块,并且新增模块不影响原来模块的使用,尽量减少系统的耦合。可 集成性主要考虑很多应用需要把etl工具嵌入到各自的应用系统中,所以在设计etl的时候, 应对整个系统的各个模块接口进行
ETL系统的研究与实现
点击下载
上一篇:GSM-R网络优化策略下一篇:MES在冶金企业的应用
本文2010-04-27 19:24:23发表“财经金融”栏目。
本文链接:https://www.wenmi123.com/article/161035.html
您需要登录后才可以发表评论, 登录 或者 注册
最新文档
- 2025 年《建设工程项目管理》模考卷一.pdf
- 座谈会发言:体系抓好思政课教育做好贯彻落实下篇文章(02-19).docx
- 组织部机关支部书记2024年度抓基层党建工作述职报告(02-19).docx
- 在县委理论中心组暨2024年度民主生活会学习研讨会上的发言(02-19).docx
- 在2025年市人代会分组讨论会上的发言(02-19).docx
- 医院党委选人用人工作自查报告(02-19).docx
- 宣传部2024年民主生活会个人对照检查发言(02-19).docx
- 行政服务中心民族团结进步创建工作经验材料(02-19).docx
- 校长在中学2025春季开学典礼上的讲话:撷一抹祈望春风掬一程锦绣花开(02-19).docx
- 乡镇领导班子2024年民主生活会对照检查发言材料(五个带头+典型案例)(02-19).docx
热门文章