增量|如何从0-1搭建ETL？( 三 )

对于一个ETL任务流，一般会在数据抽取时进行增量操作，将增量抽取的数据清洗之后再统一加载到目标表中。

文章插图
三、如何使用ETL业务场景：抽取商品销售订单数据表，商品数据表，计算出每日的销售订单总金额并入库。
第一步：制作ETL任务流程，抽取商品销售订单数据，商品数据表，通过商品ID关联成一张表。

文章插图
第二步：计算每日销售订单总金额。增加一个订单总金额字段，并添加计算公式订单总金额=订单金额*数量。

文章插图
第三步：设置调度任务，定时执行ETL任务。选择运行频次“天”，设定任务在哪一段时间内执行，也可以指定几个不在这段时间内的单个时间执行任务。

文章插图
四、写在结尾本文只是教大家如何搭建一个ETL产品的基础功能，搭建出来的产品要能真正的上线使用起来，除了需要考虑到：产品运作流程要使用的方案，是ETL还是ELT？如果要与BI产品共同使用，如何与其交互？
还需要认真思考一下，我们到底需要什么样的ETL？只是想做数据采集，支撑数据仓库的建设，还是作为一个数据交换平台，赋予其更多的应用场景。
这些大家在设计产品的时候都要考虑清楚，和相关开发团队以及领导多讨论沟通，有疑问的地方欢迎留言。
本文由 @金豌豆原创发布于人人都是产品经理，未经许可，禁止转载
题图来自Pexels，基于 CC0 协议