轩辕热门小说

手机浏览器扫描二维码访问

第326章 夜宵(第3页)

Y是指每次抽取前先删除目标表

数据Y抽取时全新加载数据该方式实际上将增量抽取等同于全量

抽取对于数据量不大Y全量抽取的时间代价小于执行增量抽取的

算法和条件代价时Y可以采用该方式。

这种方式的优点是对已有系统表结构不产生影响Y不需要修改业务

操作程序Y所有抽取规则由ETL完成Y管理维护统一Y可以实现数

据的递增加载Y没有风险

缺点是ETL比对较复杂Y设计较为复杂Y速度较慢与触发器和时

间戳方式中的主动通知不同Y全表比对方式是被动的进行全表数据

的比对Y性能较差当表中没有主键或唯一列且含有重复记录时Y

全表比对方式的准确性较差。

日志比对的方式是通过获取数据库层面的日志来捕获到变化的数据Y

不需要改变源业务系统数据库相关表结构Y数据同步的效率比较高Y

同步的及时性也比较快Y最大的问题就是不同数据库的日志文件结

构存在较大的差异性Y实施分析起来难度比较大Y同时Y需要具备

访问源业务库日志表文件的权限Y存在一定的风险性Y所以这种方

式有很大的局限性。

日志比对方式中比较成熟的技术是CDC(geDataCapture)技术Y

作用同样是能够捕获到上一次抽取之后产生的相关变化数据Y当

CDC对源业务表进行新增更新和删除等相关操作的时就可以捕获

到相关变化的数据Y相对于增量字段方式YCDC方式能够较好地捕

获到删除数据Y并写入相关数据库日志表Y然后再通过视图或者别

的某种可操作的方式将捕获到的变化同步到数据仓库当中去。

这种方式的优点是ETL同步效率较高Y不需要修改业务系统表结构Y

可以实现数据的递增加载缺点是业务系统数据库版本与产品不统

一Y难以统一实现Y实现过程相对复杂Y并且需深入研究方能实现

这种方式也通过第三方工具实现Y但是Y一般都是商业软件Y费用

较高。

快穿:病美人仙君又拿白月光剧本  红楼之剑天外来  仙子不想理你  推理虽然有用但真的很令人讨厌  我有个死要钱的系统  回到霍格沃茨的古代巫师  带着原神祈愿系统穿越到诡异世界  不当舔狗后,校花哭问为什么!  终于联系上地球,你说不要回答?  我这样进球,会伤害到你吗?  斗罗:封号琴魔,这个杀手有点冷  让你当好圣孙,你养一群女妖?  重回八零,俏媳妇改造废物老公  四合院之罪恶克星  除了我,全家都穿越了  苟在修仙世界当反派  刚成仙神,子孙求我登基  归零:云海梦境,山海有灵  末世:战姬指挥官  综漫:从杀手皇后开始  

热门小说推荐
开局一张过人体验卡

开局一张过人体验卡

后梅西时代的巴萨,困难重重,内乱不断。谁也没有想到一名来自东方的二队替补球员,竟身负绿茵王者系统,一步一步成长为了诺坎普新王!难道,这就是王朝的传承吗?如果您喜欢开局一张过人体验卡,别忘记分享给朋友...

噬天狂者

噬天狂者

噬天狂者简介emspemsp盖世仙尊重生成一个末法时代的废柴学生,幸亏赶上了灵气复苏,凭借前世无双功法,他强势崛起。今生定要重临武道巅峰,一剑破万法,一拳震九霄。傲气崩云,霸气噬天,承天佑终成一代噬天狂者!精┊彩┇文┊章wоо...

太古神墓

太古神墓

太古神墓简介emspemsp关于太古神墓一座截天地造化的神碑,一块聚天地元气的灵石,当朱清从沉睡中苏醒从坟墓中爬出就注定这一世要脚踏诸天,拳破寰宇,战天下至强。追更danmeiwenclubwoo18vip...

承明之治

承明之治

魂归阴曹十八处,我亦无愧汉家郎。虎狼睥睨九州同,定我华夏万万年。月圆缺,命有定。此生不晓明不惑。抿一笑,自在去。天地大道尽自退。承明皇帝李承乾...

重生七十年代:军长,强势宠

重生七十年代:军长,强势宠

重生花样年华,玩转市井豪门,携手逆袭人生,共揽一世风云!如果您喜欢重生七十年代军长,强势宠,别忘记分享给朋友...

一宠成瘾:喵系萌妻,甜甜哒

一宠成瘾:喵系萌妻,甜甜哒

整个京都的人都知道,财势滔天,心狠手辣的陆少居然认了一只猫做妹妹,不但将它宠上天,连几千万的钻石项链当成猫项圈也毫不在意。得罪陆少,尚且留条命,得罪陆少的猫?下场凄惨。某夜,陆少喝醉了抱着猫做梦了,梦到他家的小乖变成一个娇娇软软的小丫头,不断的跟自己撒娇。陆少惊醒,小乖,我刚刚梦见你变成小丫头了。童巧巧吓哭了,猫爪子在他脸上一拍,不许过来,我很凶哒!附带系统软萌可撩的假猫少女vs霸道傲娇的宠猫狂魔饲主如果您喜欢一宠成瘾喵系萌妻,甜甜哒,别忘记分享给朋友...

每日热搜小说推荐