当前位置:网站首页>SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
2022-07-01 09:39:00 【阿里云问答】
SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
采纳答案1:
有三个核心能力,分别是:
第一, Flink 的 SQL 的能力要对齐 Spark。
第二, 我们的 Table Format 这一层需要能够支持 Upsert/Delete 这样的主键更新的实时操作。
第三, 我们的 Table Format 能够支持全量和增量的读取。
以上内容摘自《开源大数据前瞻与应用实战》电子书,点击https://developer.aliyun.com/topic/download?id=1153可下载完成版
边栏推荐
猜你喜欢
随机推荐
Mikrotik Routeros Internet access settings
Configure load balancing
Introduction to mt7628k eCos development
Postgraduate entrance examination vocabulary 2023 sharing (1)
Hololens2 development -6-eyetracking and speech recognition
MT7628K eCos开发入门
Simple load balancing with Nacos
LeetCode 344. Reverse string
微信小程序 webview 禁止页面滚动,同时又不影响业务内overflow的滚动的实现方式
集成积木报表报错 org.apache.catalina.core.StandardContext.filterStart 启动过滤器异常
SQL学习笔记(03)——数据约束关系
樹結構---二叉樹2非遞歸遍曆
[pytorch] 2.4 convolution function nn conv2d
Youqitong PE toolbox [vip] v3.7.2022.0106 official January 22 Edition
JS rewrite their own functions
JS functionarguments object
[pytorch learning] torch device
韦东山板子编译内核问题解决
Closure implementation iterator effect
Structure de l'arbre - - - arbre binaire 2 traversée non récursive








![Problems caused by delete and delete[]](/img/d9/a1c3e5ce51ef1be366a973aa42d1f0.png)