当前位置:网站首页>SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
2022-07-01 09:39:00 【阿里云问答】
SQL 化是 ETL 增量生产的第一步,这样的架构的核心能力是什么?
采纳答案1:
有三个核心能力,分别是:
第一, Flink 的 SQL 的能力要对齐 Spark。
第二, 我们的 Table Format 这一层需要能够支持 Upsert/Delete 这样的主键更新的实时操作。
第三, 我们的 Table Format 能够支持全量和增量的读取。
以上内容摘自《开源大数据前瞻与应用实战》电子书,点击https://developer.aliyun.com/topic/download?id=1153可下载完成版
边栏推荐
猜你喜欢
随机推荐
【pytorch】nn. Crossentropyloss() and nn NLLLoss()
scratch大鱼吃小鱼 电子学会图形化编程scratch等级考试二级真题和答案解析2022年6月
JS prototype trap
Ubuntu系统安装与配置MySQL
架构实战营 模块九:设计电商秒杀系统
ES6-const本质与完全不可改实现(Object.freeze)
Learning practice: comprehensive application of cycle and branch structure (II)
Huawei accounts work together at multiple ends to create a better internet life
Who has the vision to cross the cycle?
Youqitong PE toolbox [vip] v3.7.2022.0106 official January 22 Edition
Analysis and solution of JS this loss
Mikrotik Routeros Internet access settings
BSN长话短说之十:如何保证NFT的安全
Niuke monthly race 22 tree sub chain
架构实战营 毕业总结
吃一个女富豪的瓜。。。
js 使用toString 区分Object、Array
Flinkv1.13 implementation of financial anti fraud cases
node. How to implement the SQL statement after JS connects to the database?
2022.02.15_ Daily question leetcode six hundred and ninety









