抽数,数据抽取,增量数据的抽取方式
数据抽取(抽数),是指从源数据系统抽取数据到目标数据源系统。数据抽取分为全量抽取和增量抽取:全量抽取:将数据源中的表或视图原封不动的从数据库中抽取到目标系统。增量抽取:捕获变化数据,仅对自上次导出之后变化数据(增、删、改)进行抽取。对捕获方法有两点要求----1:准确 2:不要对业务系统造成太大压力捕获方法:1.触发器捕获:源表在增删改时加触发器。把变化数据录入临时表。目标系统从临时表中抽取数据。2.源表中增加时间戳,数据变化后更新时间戳值,根据时间判断去抽取。3.全表删除插入:抽取时