精校书屋

手机浏览器扫描二维码访问

第291章 冬瓜(第1页)

EtL是企业数据仓库构建过程中的一个核心步骤Y我们可以借助于EtL

工具来高效地完成数据抽取转换和加载工作之所以需要EtL工具Y

主要有以下几个原因x

?

1?当数据来自不同的物理主机Y这时候如果使用SqL语句去处理的

话Y就显得比较吃力且开销也更大]

?

2?数据来源可以是各种不同的数据库或者文件Y这时候需要先把它

们整理成统一的格式后才可以进行数据的处理Y这一过程用代码实现

显然有些麻烦]

?

3?在数据库中我们当然可以使用存储过程去处理数据Y但是Y处理

海量数据的时候Y存储过程显然比较吃力Y而且会占用较多数据库的

资源Y这可能会导致数据库资源不足Y进而影响数据库的性能。

在选择EtL工具时主要考虑如下因素x

?对平台的支持程度]

?抽取和装载的性能是不是较高Y且对业务系统的性能影响大不

大,高不高]。

?对数据源的支持程度]。

?是否具有良好的集成性和开放性]。

?数据转换和加工的功能。

?是否具有管理和调度的功能。

cdc解决方案包括变化捕捉代理变化数据服务和变化分发机制三个

组成部分

?

1?变化捕捉代理变化捕捉代理是一个软件组件Y它负责确定和捕

捉发生在操作型数据存储源系统中的数据变化可以对变化捕捉代理

进行专门优化Y使它适用于特定的源系统Y比如使用数据库触发器]

也可以使用通用的方法Y比如数据日志比较。

变化数据服务变化数据服务为变化数据捕捉的成功实现提供了

一系列重要的功能Y包括过滤排序附加数据生命周期管理和审

计等表6-4给出了每个功能的解释。

变化分发机制变化分发机制负责把变化分发到变化的消费者?通

常是EtL程序?那里变化分发机制可以支持一个或多个消费者Y并且提

供了灵活的数据分发方式Y包括推(push)或拉(pull)的方式pull方式需要

消费者周期性地发送请求Y通常采用标准接口实现Y比如odbc或Jdbc

push方式需要消费者一直监听和等待变化的发生Y一旦捕捉到变化Y就立

刻转移变化的数据Y通常采用消息中间件来实现变化分发机制的另一个

重要功能就是提供动态返回和请求旧的变化的能力Y从而满足重复处理和

盗墓:开局让吴二白暴揍黑瞎子  生子就变强,我一年365胎  退婚当天,三崽带我闪婚千亿隐富  女魔头只想攻略她师叔  爱上她的理由  将军公主  抗战之烽火特勤组  白昼独行  爸爸,求你,不要打我了  西游之白话版  闪婚后偏执大佬每天狂宠我  资深颜控闯荡娱乐圈  最强赛亚人传说  我与十位,美女总裁的故事  快穿:尤物穿成万人嫌工具人女配  扮演岩王帝君多年后,我穿回来了  天灾末世小人物囤货带美女跑路了  兽世重生,情敌太多狼夫哭唧唧  强撩!暗哄!我怀了全球首富的崽  仙道衍  

热门小说推荐
从超神学院开始的穿越日常

从超神学院开始的穿越日常

作为普通人的许易穿越到神学院的世界,表示压力山大!然而许易意外激活身体里的无限系统,得而穿越各种不同的幻想世界,影视,动漫,小说一切应有尽有。许易面色淡漠,仰视苍天,忽然开口我要这天,再遮不住我眼。我要这地,再埋不了我心。要这众生,都明白我意。要那诸佛,全都烟消云散。苍天mdzz,老子招你惹你啦!...

硅谷大帝

硅谷大帝

1984年,他创建了思科。1985年,他创建了亚马逊和网景。1988年,他创建了雅虎。1989年,他创建了990年,他创建了即时聊天软件994年,他创建了995年,他创建了000年,好莱坞臣服!2000年,苹果跪了。在未来,他被称之为互联网之父在未来,所有人都叫他硅谷大帝在未来,他的财富超过比尔盖茨100倍。他...

超强神龙进化系统

超强神龙进化系统

从小在孤儿院长大的敖问,一次意外死亡,重生为蛇,但是上天赐予他神龙进化系统这系统可以穿越万界,可以帮助他蜕蛇成龙!从此敖问为了不想平凡过完一生,开始了轰轰烈烈的进化之路。敖问可以跟人类结婚生子吗?系统你自己试试看,不就知道了吗?黑暗流无敌流装逼流微度PS胆小慈悲心勿进。...

爆宠八零:重生娇娇女

爆宠八零:重生娇娇女

2o19云起华语文学征文大赛参赛作品胖喵儿死了,被一根鸡骨头卡死了!重生在了一个生了九个孙儿,盼孙女盼的眼睛都红了的阮家,瞬间成了阮家上下三代的团宠!胖喵儿笑眯眯,觉得这有奶奶宠,爸妈爱,哥哥护的小日子,真叫一个美滋滋哟。当然,如果没有某只躲在角落里,眼睛里放着绿光,死死盯着她的‘大灰狼’,那就更好了!某只‘大灰狼’冷笑一声上辈子没吃到,这辈子总要吃到的!胖喵儿へノ...

洪荒少年猎艳录

洪荒少年猎艳录

他从小生活在一个全是女子的门派,一次偶然的机会,让他身为男人的方面觉醒,美艳师傅,看一位洪荒少年如何携着众美笑傲天下,一步一步攀登上世界最高峰。纯粹的YY爽文,激情,热血!!!各位多多支持,卫道士勿进!!阿木小说网人工少女1wwwamxs520commodulesarticlereaderphpaid4313...

真香实录

真香实录

作为一个无节操无底线无尺度的三无大龄少女,男人于她而言不过是解决生理需求的生活用品,所以她并不在意他们视她如玩物,将她介绍给别人,搂着名门千金假装不认识她,故意贬低她否认与她的情史,利用她欺骗她甚至当众羞辱她。她很懒,懒得跟无所谓的人计较太多。但,等她识趣地走人了还指望她乖乖躺回他们身下?他们以为全世界的男人只有他们才长了根能用的东西?她只想说,呵呵。Nph文,6个男主,有处有非处,伪骨科。已完结~感谢所有妹子们!...

每日热搜小说推荐