当前位置:网站首页>SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
2022-07-01 09:39:00 【阿里云问答】
SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
采纳答案1:
有三个核心能力,分别是:
第一, Flink 的 SQL 的能力要对齐 Spark。
第二, 我们的 Table Format 这一层需要能够支持 Upsert/Delete 这样的主键更新的实时操作。
第三, 我们的 Table Format 能够支持全量和增量的读取。
以上内容摘自《开源大数据前瞻与应用实战》电子书,点击https://developer.aliyun.com/topic/download?id=1153可下载完成版
边栏推荐
- delete和delete[]引发的问题
- Computer USB, HDMI, DP various interfaces and speeds
- JS原型链
- 我喜欢两个男人。。。
- Niuke monthly race 22- collect pieces of paper
- LVGL V8.2字符串显示在Keil MDK上需要注意的事项(以小熊派为例)
- Drive away bad emotions and stop worrying
- Tree structure --- binary tree 1
- MT7628K eCos开发入门
- Dotnet console uses microsoft Maui. Getting started with graphics and skia
猜你喜欢
Preparing for the Blue Bridge Cup -- bit operation
ESP8266 FreeRTOS开发环境搭建
Huawei accounts work together at multiple ends to create a better internet life
JS原型链
NoSQL数据库的安装和使用
SQL学习笔记(01)——数据库基本知识
Strange, why is the ArrayList initialization capacity size 10?
2.4 activation function
Cortex M4 systick details
年薪100万,在北上广深买的起房子吗?
随机推荐
【pytorch】nn. Crossentropyloss() and nn NLLLoss()
SQL learning notes (01) - basic knowledge of database
JS prototype inheritance can only inherit instances, not constructors
项目采购管理
SQL学习笔记(04)——数据更新、查询操作
[unity shader] substitution of bool type in the property definition
Analysis and solution of JS this loss
睡了二哥。。。
2.3 [kaggle dataset - dog feed example] data preprocessing, rewriting dataset, dataloader reading data
IPv6 learning notes
Swag init error: cannot find type definition: response Response
phpexcel 里 获取某一列的列表 获取某一列的字母
In terms of use
Learning practice: comprehensive application of cycle and branch structure (II)
PHP merges multiple arrays. The same element takes the intersection of different elements to form an array
BSN长话短说之十:如何保证NFT的安全
富文本实现插值
What is P in cap theory
[video game training] real topic of 2013 video game of infrared optical communication device
HMS core audio editing service 3D audio technology helps create an immersive auditory feast