手机浏览器扫描二维码访问
EtL是企业数据仓库构建过程中的一个核心步骤Y我们可以借助于EtL
工具来高效地完成数据抽取转换和加载工作之所以需要EtL工具Y
主要有以下几个原因x
?
1?当数据来自不同的物理主机Y这时候如果使用SqL语句去处理的
话Y就显得比较吃力且开销也更大]
?
2?数据来源可以是各种不同的数据库或者文件Y这时候需要先把它
们整理成统一的格式后才可以进行数据的处理Y这一过程用代码实现
显然有些麻烦]
?
3?在数据库中我们当然可以使用存储过程去处理数据Y但是Y处理
海量数据的时候Y存储过程显然比较吃力Y而且会占用较多数据库的
资源Y这可能会导致数据库资源不足Y进而影响数据库的性能。
。
在选择EtL工具时主要考虑如下因素x
?对平台的支持程度]
?抽取和装载的性能是不是较高Y且对业务系统的性能影响大不
大,高不高]。
?对数据源的支持程度]。
?是否具有良好的集成性和开放性]。
?数据转换和加工的功能。
?是否具有管理和调度的功能。
cdc解决方案包括变化捕捉代理变化数据服务和变化分发机制三个
组成部分
?
1?变化捕捉代理变化捕捉代理是一个软件组件Y它负责确定和捕
捉发生在操作型数据存储源系统中的数据变化可以对变化捕捉代理
进行专门优化Y使它适用于特定的源系统Y比如使用数据库触发器]
也可以使用通用的方法Y比如数据日志比较。
变化数据服务变化数据服务为变化数据捕捉的成功实现提供了
一系列重要的功能Y包括过滤排序附加数据生命周期管理和审
计等表6-4给出了每个功能的解释。
变化分发机制变化分发机制负责把变化分发到变化的消费者?通
常是EtL程序?那里变化分发机制可以支持一个或多个消费者Y并且提
供了灵活的数据分发方式Y包括推(push)或拉(pull)的方式pull方式需要
消费者周期性地发送请求Y通常采用标准接口实现Y比如odbc或Jdbc
push方式需要消费者一直监听和等待变化的发生Y一旦捕捉到变化Y就立
刻转移变化的数据Y通常采用消息中间件来实现变化分发机制的另一个
重要功能就是提供动态返回和请求旧的变化的能力Y从而满足重复处理和
最强赛亚人传说 抗战之烽火特勤组 天灾末世小人物囤货带美女跑路了 仙道衍 生子就变强,我一年365胎 将军公主 兽世重生,情敌太多狼夫哭唧唧 强撩!暗哄!我怀了全球首富的崽 我与十位,美女总裁的故事 爱上她的理由 扮演岩王帝君多年后,我穿回来了 盗墓:开局让吴二白暴揍黑瞎子 女魔头只想攻略她师叔 退婚当天,三崽带我闪婚千亿隐富 白昼独行 闪婚后偏执大佬每天狂宠我 西游之白话版 快穿:尤物穿成万人嫌工具人女配 资深颜控闯荡娱乐圈 爸爸,求你,不要打我了
市二中的金牌老师孙默落水后,来到了中州唐国,成了一个刚毕业的实习老师,竟然有了一个白富美的未婚妻,未婚妻竟然还是一所名校的校长,不过这名校衰败了,即将摘牌除名,进行废校处理孙默的开局,就是要帮助未婚妻坐稳校长之位,让学校重回豪门之列。孙默得到绝代名师系统后,点废成金,把一个个废物变成了天才,在孙默的指导下,学渣...
一个无父无母的孤儿,一个被最有钱的女人领养的孤儿可是自卑彷徨的他却喜欢上了跟自己身份截然不同的人。可惜他却在跟最有钱的女董事长发生不能说的秘密之后一切都变了。各色各样的大小美人纷扰而至,围绕在他的身边!成熟美艳,清纯可爱,性感妩媚,柔情万千最后的最后,他凭借着自己的能力,在那多少美人美妇的陪伴之下,在这一片弱肉强食的世界之中创下了一个伟大的奇迹!...
龙血部队兵王狂龙因违反规定,被迫回到中海。本想低调做人,却偶遇美女总裁让自己睡了她,哪知道被卷入一场莫名的争斗,成为了她的贴身保镖。叶轻狂从此龙入花海,身边美女如云,但也麻烦不断读者群527212401...
一个本来庸才的学生,在一次奇遇后,居然成为傲世天才,他发现自己的身世居然是而后面还有天大的阴谋...
当被清纯校花火辣女杀手御姐总裁绝美女老师争相纠缠!贺轩很烦恼帅,是一种病!我是校花的未婚夫,天下美女的未婚夫!传奇杀手龙潜花都,却不想惹上一身风流情债!...
穿越成修真世界的一个废柴,那还修你妹的真?一道七彩霞光之后,杨真直接吊炸天了!他看过的功法,直接满品满级,学都学不完!他炼制的丹药,不但起死回生,还能青春永驻!他锻造的武器,上打神王大帝,下捅黄泉幽狱,每一件都让天地颤栗,让神魔退避!我杨真从不装逼,因为我真牛的一批!一群542062672(已满)二群...