书中文学网

手机浏览器扫描二维码访问

第291章 冬瓜（第1页）

etl是企业数据仓库构建过程中的一个核心步骤y我们可以借助于etl

工具来高效地完成数据抽取转换和加载工作之所以需要etl工具y

主要有以下几个原因x

?

1?当数据来自不同的物理主机y这时候如果使用sql语句去处理的

话y就显得比较吃力且开销也更大]

?

2?数据来源可以是各种不同的数据库或者文件y这时候需要先把它

们整理成统一的格式后才可以进行数据的处理y这一过程用代码实现

显然有些麻烦]

?

3?在数据库中我们当然可以使用存储过程去处理数据y但是y处理

海量数据的时候y存储过程显然比较吃力y而且会占用较多数据库的

资源y这可能会导致数据库资源不足y进而影响数据库的性能。

。

在选择etl工具时主要考虑如下因素x

?对平台的支持程度]

?抽取和装载的性能是不是较高y且对业务系统的性能影响大不

大，高不高]。

?对数据源的支持程度]。

?是否具有良好的集成性和开放性]。

?数据转换和加工的功能。

?是否具有管理和调度的功能。

cdc解决方案包括变化捕捉代理变化数据服务和变化分发机制三个

组成部分

?

1?变化捕捉代理变化捕捉代理是一个软件组件y它负责确定和捕

捉发生在操作型数据存储源系统中的数据变化可以对变化捕捉代理

进行专门优化y使它适用于特定的源系统y比如使用数据库触发器]

也可以使用通用的方法y比如数据日志比较。

变化数据服务变化数据服务为变化数据捕捉的成功实现提供了

一系列重要的功能y包括过滤排序附加数据生命周期管理和审

新来的转校生竟比校霸还野  穿越明朝之我救了马皇后  我在修仙游戏世界中浑水摸鱼  跌落山崖的我，习得神级功法  京港月光  我在无限游戏中永生  八零守寡小娇娇，冷面糙汉被钓疯  沙雕攻以为他虐了白月光  武侠游戏：只有我知道剧情  医林萧韵  小马宝莉：星空之下  凛冬末日：全民避难所求生  穿成花瓶美人，反派老公破产了  七零娇美人，甩掉知青当首富  我手握无限物资，砸出末世安全区  快穿：盘古居然是我哥  空间通末世，我带飞全家很合理吧  逼我做妾？真太子为我入赘将军府  七零大厂美人，改造反派崽暴富  都市神医，开局扇醒拜金女