121小说

手机浏览器扫描二维码访问

第291章 冬瓜(第1页)

EtL是企业数据仓库构建过程中的一个核心步骤Y我们可以借助于EtL

工具来高效地完成数据抽取转换和加载工作之所以需要EtL工具Y

主要有以下几个原因x

?

1?当数据来自不同的物理主机Y这时候如果使用SqL语句去处理的

话Y就显得比较吃力且开销也更大]

?

2?数据来源可以是各种不同的数据库或者文件Y这时候需要先把它

们整理成统一的格式后才可以进行数据的处理Y这一过程用代码实现

显然有些麻烦]

?

3?在数据库中我们当然可以使用存储过程去处理数据Y但是Y处理

海量数据的时候Y存储过程显然比较吃力Y而且会占用较多数据库的

资源Y这可能会导致数据库资源不足Y进而影响数据库的性能。

在选择EtL工具时主要考虑如下因素x

?对平台的支持程度]

?抽取和装载的性能是不是较高Y且对业务系统的性能影响大不

大,高不高]。

?对数据源的支持程度]。

?是否具有良好的集成性和开放性]。

?数据转换和加工的功能。

?是否具有管理和调度的功能。

cdc解决方案包括变化捕捉代理变化数据服务和变化分发机制三个

组成部分

?

1?变化捕捉代理变化捕捉代理是一个软件组件Y它负责确定和捕

捉发生在操作型数据存储源系统中的数据变化可以对变化捕捉代理

进行专门优化Y使它适用于特定的源系统Y比如使用数据库触发器]

也可以使用通用的方法Y比如数据日志比较。

变化数据服务变化数据服务为变化数据捕捉的成功实现提供了

一系列重要的功能Y包括过滤排序附加数据生命周期管理和审

计等表6-4给出了每个功能的解释。

变化分发机制变化分发机制负责把变化分发到变化的消费者?通

常是EtL程序?那里变化分发机制可以支持一个或多个消费者Y并且提

供了灵活的数据分发方式Y包括推(push)或拉(pull)的方式pull方式需要

消费者周期性地发送请求Y通常采用标准接口实现Y比如odbc或Jdbc

push方式需要消费者一直监听和等待变化的发生Y一旦捕捉到变化Y就立

刻转移变化的数据Y通常采用消息中间件来实现变化分发机制的另一个

重要功能就是提供动态返回和请求旧的变化的能力Y从而满足重复处理和

闪婚后偏执大佬每天狂宠我  西游之白话版  仙道衍  天灾末世小人物囤货带美女跑路了  爱上她的理由  资深颜控闯荡娱乐圈  将军公主  退婚当天,三崽带我闪婚千亿隐富  兽世重生,情敌太多狼夫哭唧唧  抗战之烽火特勤组  女魔头只想攻略她师叔  我与十位,美女总裁的故事  快穿:尤物穿成万人嫌工具人女配  盗墓:开局让吴二白暴揍黑瞎子  强撩!暗哄!我怀了全球首富的崽  爸爸,求你,不要打我了  最强赛亚人传说  扮演岩王帝君多年后,我穿回来了  生子就变强,我一年365胎  白昼独行  

热门小说推荐
恋上美女总裁

恋上美女总裁

什么?要我和美女总裁搞好关系?当然可以!李迪贱笑一声关系就是搞出来的嘛!当兵王之王重回花都,冷艳总裁,傲娇萝莉,清纯助理,火辣警花,群美环绕!花都,我为王!...

六零俏佳人

六零俏佳人

新书我家夫人又败家了已发求收藏,古代美食文,么么哒前世,盛夏怨恨家人的无情抛弃,为贺家人那群白眼狼付出所有,最后却落了个草席一裹,抛尸荒山的下场!重生回到悲剧尚未开始,盛夏发誓今生不会再将真心错付!哪怕吃树皮啃草根,她也要留在家人身边,同甘共苦!改写命运!一家人同心协力,走上致富的康庄大道!携手冷面男神...

我的师父是黄蓉破天居士

我的师父是黄蓉破天居士

一觉醒来发现身边多了个没穿衣服的美女,这个美女竟然是金庸笔下的黄蓉。而且还是少女时期的黄蓉。莫名其妙的得到了黄蓉的身心,有些木讷的小人物顿时发生了变化。挨欺负了不用咱出手,有黄MM的打狗棒法帮咱出气。想成为武林高手?没问题。桃花岛武功随便学,打狗棒法随意耍,九阴真经纵横大都市总之有了黄蓉这个伪师父,真老婆之后,一切都变的精彩了!...

天命修罗

天命修罗

人无耻则无畏,人至贱则无敌!谁说盖世枭雄必需得霸气十足?谁说无耻贱圣踏不得七彩祥云?谁说此般少年不能争天命,演修罗,替天行道?(QQ书友群313310371)...

都市超级医仙

都市超级医仙

左手惊天医术右手至强武功,携带百年记忆,重生回归都市,这一世,定要纵横无敌执掌一切,登临苍穹之巅!...

六零军营成长

六零军营成长

一睁眼回到六零年,上一世是孤儿的明暖这一世拥有了父母家人,在成长的过程中,还有一个他,青梅竹马,咋这么腹黑呢!...

每日热搜小说推荐