收藏本站
《计算机工程与应用》 2005年10期
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

一种可靠的数据仓库中ETL策略与架构设计

尤玉林  张宪民  
【摘要】:作为数据仓库系统的关键部件,ETL完成数据抽取、清洗、转换和装载的工作,它是构建数据仓库的重要环节,同时也是构建数据仓库过程中出现问题最多的环节,所以针对这点,该文给出了一个可靠的同时易于扩展的ETL策略和架构。文章首先简单地介绍了数据仓库技术和ETL技术,包括ETL的相关概念、ETL在数据仓库中的功能和重要地位;然后重点介绍了这种ETL的具体策略和架构设计。

【引证文献】
中国期刊全文数据库 前4条
1 徐文;陈福生;;基于数据仓库技术的邮政企业解决方案[J];计算机辅助工程;2006年02期
2 肖创柏;冯维文;刘时光;;基于语义表示的数据仓库构建方法[J];计算机工程;2007年10期
3 郭晓红;;ETL实施过程研究[J];网络与信息;2007年07期
4 祁利刚;候小静;;基于数据仓库的ETL技术研究[J];中国电力教育;2006年S1期
中国重要会议论文全文数据库 前1条
1 吕琳;朱东华;刘玉琴;;面向数据仓库的数据预处理研究综述[A];2007年中国智能自动化会议论文集[C];2007年
中国硕士学位论文全文数据库 前10条
1 罗科迈;数据仓库在邮政量收系统中的应用问题研究[D];华中科技大学;2006年
2 王杰勋;医疗保险信息系统异构数据集成的研究与实现[D];南京航空航天大学;2007年
3 贺超波;基于学分制体系的高校教学数据仓库与决策支持系统设计关键技术研究[D];华南师范大学;2007年
4 熊芳;基于聚类分析的基因表达差异筛选方法研究[D];中南大学;2007年
5 牛奕;基于CWM的ETL设计及其应用[D];北京邮电大学;2007年
6 杨坚刚;面向对象的数据仓库设计方法及其应用[D];北京邮电大学;2007年
7 苏立强;空间联机分析系统实现及其在工商管理中的应用[D];大连理工大学;2006年
8 曹志伟;支持ETL进化的元数据管理与应用[D];对外经济贸易大学;2006年
9 廉博;数据仓库中ETL技术的研究与实现[D];沈阳工业大学;2006年
10 冯维文;基于语义的数据仓库构建方法及应用研究[D];北京工业大学;2006年
【参考文献】
中国期刊全文数据库 前2条
1 陈德军,盛翊智,陈绵云;基于数据仓库的OLAP在DSS中的应用研究[J];计算机工程与应用;2003年01期
2 王文彬,伍庆华,吴国平;基于移动行业的ETL方法及策略探讨[J];计算机工程;2003年02期
【共引文献】
中国期刊全文数据库 前10条
1 王小洁;朱程荣;;面向CRM系统的数据仓库的设计与实现[J];计算机工程与设计;2007年21期
2 利玄英,李名世;智能Web站点技术研究[J];厦门大学学报(自然科学版);2001年06期
3 郑斌祥,杜秀华,席裕庚;基于数据仓库的电力决策支持系统的设计研究[J];系统工程与电子技术;2001年11期
4 郭和伟,孙德宝,秦元庆,冀亚林;基于数据仓库的军事后勤决策支持系统研究[J];系统工程与电子技术;2003年06期
5 胡岷;数据仓库:新一代决策支持的工具[J];中国信息导报;2001年12期
6 李铭,刘胜军,蔡庆生;一个企事业智能决策、分析工具的设计和实现[J];小型微型计算机系统;2000年05期
7 赵霁;面向物料管理的数据仓库模型设计[J];南京邮电学院学报(自然科学版);2000年02期
8 吴隆基;采用Oracle数据仓库解决方案构建图书馆数据仓库[J];情报科学;2005年01期
9 员巧云;基于数据仓库的决策支持系统研究[J];情报探索;2005年01期
10 艾萍,王志坚,索丽生,倪伟新;水文数据在线分析与知识发现系统模型研究[J];水利学报;2001年11期
中国重要会议论文全文数据库 前10条
1 孙娜;;基于数据仓库和OLAP技术的电力设备决策系统[A];自动化技术与冶金流程节能减排——全国冶金自动化信息网2008年会论文集[C];2008年
2 杨真;李也白;籍志兵;常一帆;;数据分析技术在商品销售中的应用研究[A];2007北京地区高校研究生学术交流会通信与信息技术会议论文集(上册)[C];2008年
3 王永恒;叶小岭;訾燕;;基于数据仓库的OLAP技术在决策支持系统中的应用研究[A];第13届全国计算机、网络在现代科学技术领域的应用学术会议论文集[C];2007年
4 李伟;朱卫东;;未来会计模式的趋势研究[A];中国会计学会高等工科院校分会2006年学术年会暨第十三届年会论文集[C];2006年
5 郭亮;;用CRISP-DM模型来规范企业数据中心建设[A];上海烟草系统2006年度优秀学术论文集[C];2006年
6 朱丽辉;苏彩梅;;邯钢的备件管理与信息化[A];第十一届全国自动化应用技术学术交流会论文集[C];2006年
7 杨静;;基于数据仓库决策分析的电力系统应用研究[A];安徽省电机工程学会优秀学术论文集(2002-2003)[C];2005年
8 张帆;余开朝;;数据仓库在CRM系统中的应用研究[A];全国第九届企业信息化与工业工程学术会议论文集[C];2005年
9 秦科;;数据市场分析与数据仓库建设[A];计算机模拟与信息技术会议论文集[C];2001年
10 郑斌祥;席裕庚;杜秀华;;基于面向对象技术的OLAP系统设计研究及应用[A];2001年中国智能自动化会议论文集(下册)[C];2001年
中国博士学位论文全文数据库 前10条
1 祖巧红;基于实例的OLAM技术及其多维可视化研究[D];武汉理工大学;2007年
2 李海涛;海洋环境信息集成方法研究与新一代MAGIS平台软件开发[D];中国海洋大学;2007年
3 郭加树;空间数据仓的构建及应用[D];中国石油大学;2007年
4 叶施仁;海量数据约简与分类研究[D];中国科学院研究生院(计算技术研究所);2001年
5 李刚;知识发现的图模型方法[D];中国科学院软件研究所;2001年
6 曹蓟光;联机分析挖掘处理技术(OLAM)的研究[D];浙江大学;2001年
7 王靖飞;动物疾病诊断专家系统的研究与应用[D];东北农业大学;2002年
8 陈元;基于分类模型的知识发现过程研究[D];国防科学技术大学;2002年
9 黄金才;网络环境下决策资源共享与决策支持系统快速开发环境研究[D];国防科学技术大学;2001年
10 陈金玉;数据仓库实体化视图联机—致性维护研究[D];重庆大学;2002年
中国硕士学位论文全文数据库 前10条
1 岑琴;商业智能BI在劳动密集型企业产品营销中的应用研究[D];浙江师范大学;2007年
2 王红影;数据挖掘在医疗费用分析中的应用研究[D];大连海事大学;2008年
3 吕海燕;数据仓库在电信经营分析系统中的应用研究[D];大连海事大学;2008年
4 黄尉鼎;OLAP技术在税务信息管理系统中应用的研究[D];大连海事大学;2008年
5 刘伟光;面向电信客户流失管理的数据仓库原型研究与应用[D];大连海事大学;2008年
6 周庆;面向零售化妆品业交叉销售的数据分析与决策支持系统的设计和实现[D];上海交通大学;2008年
7 陶颖;改进的关联规则算法在学生就业问题上的应用研究[D];辽宁工程技术大学;2007年
8 赵志坤;基于概念格的关联规则挖掘的研究[D];辽宁工程技术大学;2007年
9 李耀池;数据挖掘技术在电力负荷预测系统中应用的研究[D];辽宁工程技术大学;2007年
10 杨小平;商务智能系统在制造业的应用研究[D];上海交通大学;2007年
【同被引文献】
中国期刊全文数据库 前10条
1 彭小宁;数据仓库与数据挖掘技术[J];怀化师专学报;2002年02期
2 朱艺华,周根贵,高济,陈丽敏;基于双层数据仓库的MIS设计研究[J];计算机工程与应用;2002年06期
3 田忠和,张霞;ROLAP中星型模型的索引优化策略[J];计算机应用;2004年06期
4 李慧,闻豪;基于数据仓库的OLAP技术的研究[J];电脑知识与技术;2005年02期
5 梁协雄,雷汝焕,曹长修;现代数据挖掘技术研究进展[J];重庆大学学报(自然科学版);2004年03期
6 张丽;;数据仓库与数据挖掘[J];贵州民族学院学报(哲学社会科学版);2006年02期
7 尹春华,顾培亮;决策支持系统研究现状及发展趋势[J];决策借鉴;2002年02期
8 徐文;陈福生;;基于数据仓库技术的邮政企业解决方案[J];计算机辅助工程;2006年02期
9 李薇,李宛洲;基于数据仓库技术的进销存系统的设计与实现[J];计算机工程与应用;2001年10期
10 许兆新,周双娥,郝燕玲;决策支持系统相关技术综述[J];计算机应用研究;2001年02期
中国博士学位论文全文数据库 前2条
1 朱琰;太湖流域实时洪水预报调度系统研究[D];河海大学;2003年
2 瞿思敏;抗差理论在洪水预报中的应用研究[D];河海大学;2004年
中国硕士学位论文全文数据库 前10条
1 柏杏丽;基于XML的异构数据库集成的研究与实现[D];郑州大学;2003年
2 梁洁敏;银行数据仓库系统的设计与实现[D];山东大学;2005年
3 袁书宏;面向学生数据中心的数据集成平台的研究、设计及实现[D];浙江大学;2006年
4 廉博;数据仓库中ETL技术的研究与实现[D];沈阳工业大学;2006年
5 钱炎;医疗保险系统中信息处理关键技术研究[D];南京航空航天大学;2005年
6 唐鹰;基于UML医疗保险信息系统的建模与实现[D];南京航空航天大学;2005年
7 刘波;基于数据仓库的决策支持系统的研究与应用[D];西安建筑科技大学;2001年
8 曹丹阳;数据挖掘在教务系统中的应用研究[D];北方工业大学;2006年
9 杜永友;构建基于工作流引擎和元数据驱动的数据仓库ETL工具[D];四川大学;2004年
10 程跟上;基于公共仓库模型的ETL系统的研究和应用[D];南京航空航天大学;2005年
【二级引证文献】
中国硕士学位论文全文数据库 前6条
1 周庆;面向零售化妆品业交叉销售的数据分析与决策支持系统的设计和实现[D];上海交通大学;2008年
2 周国能;异构数据库集成中间件的构建研究与应用[D];大连理工大学;2007年
3 罗科迈;数据仓库在邮政量收系统中的应用问题研究[D];华中科技大学;2006年
4 王杰勋;医疗保险信息系统异构数据集成的研究与实现[D];南京航空航天大学;2007年
5 杨仔玲;ODS存储技术在保险企业系统集成中的应用[D];大连海事大学;2007年
6 吴红军;山东邮政企业干线运输费用结算系统的设计与实现[D];山东大学;2006年
【二级参考文献】
中国期刊全文数据库 前3条
1 陈德军,盛翊智,陈绵云;基于数据仓库的融合式DSS结构的研究[J];华中科技大学学报(自然科学版);2002年11期
2 连立贵,金凤,蔡家楣;数据仓库中的数据提取[J];计算机工程;2001年09期
3 柳莺,赵艳红,钱旭,刘东红;数据仓库技术研究和应用探讨[J];计算机应用;2001年02期
【相似文献】
中国期刊全文数据库 前10条
1 刘耀东;开发FoxPro数据仓库[J];电脑编程技巧与维护;1994年05期
2 谭发常;数据仓库,此其时矣![J];今日电子;1995年10期
3 刘晓云;帮助现代企业克服信息障碍——数据仓库 浮出海面[J];中国计算机用户;1995年12期
4 罗亦文;数据仓库──管理信息系统建设的核心[J];中国金融电脑;1996年02期
5 徐阳;数据仓库——信息管理新概念[J];电气时代;1996年12期
6 贾虹;数据仓库建立与应用[J];中国计算机用户;1996年20期
7 文武;数据仓库如何消除数据污染?[J];中国计算机用户;1996年Z1期
8 ;Software AG升级SourcePoint[J];每周电脑报;1996年07期
9 刘卫东,王诚,周立柱;大型信息系统的数据组织[J];计算机研究与发展;1997年06期
10 王晓军;数据仓库在决策支持系统中的应用[J];计算机工程与应用;1997年12期
中国重要会议论文全文数据库 前10条
1 尚涛;刘永;;数字武汉系统框架探讨[A];新世纪科技与湖北经济发展——2001首届湖北科技论坛论文集[C];2001年
2 韩览山;薛四新;王玉;邵贝恩;;基于数据仓库的企业决策支持系统的构建[A];中国电子学会第七届学术年会论文集[C];2001年
3 李思红;;如何避免数据仓库项目的失败[A];地理空间信息技术与数字江苏论坛文集[C];2001年
4 杨文川;黄涛;顾淑清;;数据仓库中演化信息现象的研究[A];第六届全国计算机应用联合学术会议论文集[C];2002年
5 王凯;蔺永政;石冰;;基于数据仓库的房地产投资决策支持模型[A];第六届全国计算机应用联合学术会议论文集[C];2002年
6 赵青苗;;中铁集装箱管理信息系统的数据仓库解决方案[A];全面建设小康社会:中国科技工作者的历史责任——中国科协2003年学术年会论文集(上)[C];2003年
7 刘守义;耿磊;;综合决策支持系统[A];第11届全国计算机在现代科学技术领域应用学术会议论文集[C];2003年
8 陈金雄;刘雄飞;王庆森;;医院数据仓库的设计与实现[A];首届中国IT与医药卫生高层论坛论文集[C];2004年
9 高素芳;张继福;张素兰;;关于数据仓库渐变维处理的研究[A];全国第16届计算机科学与技术应用(CACIS)学术会议论文集[C];2004年
10 苏宏亮;;烟草行业数据仓库解决方案[A];中国烟草行业信息化研讨会论文集[C];2004年
中国重要报纸全文数据库 前10条
1 子文;数据仓库在信贷管理中的应用[N];中国证券报;2000年
2 本报记者 朴华;21世纪银行需要金融决策的手段[N];中国计算机报;2000年
3 ;Informix:从粗放型经营到分析型经营[N];中国计算机报;2000年
4 方平;建立银行数据仓库系统[N];计算机世界;2000年
5 西安交通大学 朱国昱;数据仓库与企业信息门户[N];计算机世界;2000年
6 ;客户信息一切尽在掌握[N];通信产业报;2000年
7 ;Informix 数据仓库解决方案及 Red Brick Decision Server[N];网络世界;2000年
8 四川大学计算机学院 陈华英;组建基于 Web 方式的数据仓库[N];网络世界;2000年
9 ;IBM银行数据仓库解决方案[N];网络世界;2000年
10 柴新;企业决策支持系统如何为保险业服务[N];中国保险报;2001年
中国博士学位论文全文数据库 前10条
1 陈燕;数据仓库的设计与实现[D];大连理工大学;2000年
2 马刚;采用数据仓库技术实现贷款管理DSS[D];大连理工大学;2000年
3 陈金玉;数据仓库实体化视图联机—致性维护研究[D];重庆大学;2002年
4 孟军;农业生产宏观决策支持系统的研究及实证分析[D];东北农业大学;2002年
5 桑松;船型方案论证与智能决策方法研究[D];大连理工大学;2002年
6 徐铭杰;遥感图像数据挖掘体系与实现技术研究[D];中国人民解放军信息工程大学;2003年
7 戴超凡;数据仓库中数据志跟踪的理论与方法研究[D];中国人民解放军国防科学技术大学;2002年
8 克里木;自适应数据仓库系统的研究与实现[D];大连理工大学;2003年
9 米智伟;面向先进制造技术的企业过程优化理论和方法研究[D];上海大学;2000年
10 李秋丹;数据挖掘相关算法的研究与平台实现[D];大连理工大学;2004年
中国硕士学位论文全文数据库 前10条
1 文海龙;数据仓库及其在安监决策支持系统中的应用研究[D];铁道部科学研究院;2000年
2 任锦鸾;数据仓库系统理论、方法及应用研究[D];河北工业大学;2000年
3 王宇新;一个支持数据库和数据仓库建模的CASE工具的实现[D];大连理工大学;2000年
4 马铁驹;数据仓库及多维分析[D];大连理工大学;2000年
5 刘波;基于数据仓库的决策支持系统的研究与应用[D];西安建筑科技大学;2001年
6 向坚持;数据仓库技术及其应用研究[D];湖南大学;2001年
7 钟国祥;采用移动代理技术建立数据仓库的研究[D];西南师范大学;2001年
8 邓英;数据仓库与数据挖掘技术理论及应用的研究[D];甘肃工业大学;2001年
9 邢文航;决策支持技术中数据仓库的研究与应用[D];甘肃工业大学;2001年
10 万天明;一种简易数据仓库开发平台的构建[D];湘潭大学;2001年
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62791813
  • 010-62985026