当前位置:网站首页>数仓分层简介(实时数仓架构)
数仓分层简介(实时数仓架构)
2022-08-01 09:50:00 【全栈程序员站长】
大家好,又见面了,我是你们的朋友全栈君。
数仓分层简介
1.数仓分层好处:复杂问题简单化;减少重复开发;隔离原始数据。
2.数仓分层具体实现
ODS(Operation Data Store)层:原始数据层,存原始数据,直接加载原始日志、数据
DWD(Data Warehouse Detail)层:明细数据层也有叫DWI层,结构和粒度与原始表保持一致,对ODS层数据进行清洗(去除空值、脏数据、超过极限范围的数据、行式存储转列式存储、改压缩格式)
DWS(Data Warehouse Service)层:服务数据层,以DWD为基础进行轻度汇总。比如:用户当日、设备当日、商品当日。
ADS(Application Data Store)层:数据应用层也有叫App层或DM层,为各种统计报表提供数据
发布者:全栈程序员栈长,转载请注明出处:https://javaforall.cn/126974.html原文链接:https://javaforall.cn
边栏推荐
猜你喜欢

The use of scrapy crawler framework

Message queue interview latest finishing (2022)

Detailed explanation of JVM runtime data area and JMM memory model

What's up with VS "Cannot find or open PDB file"?How to solve

还在纠结报表工具的选型么?来看看这个

用OpenCV的边缘检测
![ASP.NET Core 6框架揭秘实例演示[30]:利用路由开发REST API](/img/b3/0167c22f14b97eb0206696495af7b5.png)
ASP.NET Core 6框架揭秘实例演示[30]:利用路由开发REST API

opencv创建窗口—cv.namedWindow()

招聘随想2022

sqlserver怎么查询一张表中同人员的交叉日期
随机推荐
ogg同步oracle到mysql,字段里面可能有需要转义的字符,怎么配置转义?
笔记。。。。
Idea common plugins
灵魂发问:MySQL是如何解决幻读的?
WLAN networking experiment of AC and thin AP
scrapy爬虫框架的使用
redis
[Dataset] Dataset summary of various insulators, bird's nests and anti-vibration hammers
sql server, FULL mode, dbcc shrinkfile(2,1) can not shrink the transaction log, or the original size, why?
SAP ABAP OData 服务如何支持 $orderby (排序)操作试读版
UXDB如何返回当前数据库所有表的记录数?
Taobao commodity details and details on taobao, senior upgrade version of the API
js中如何实现深拷贝?
STM32个人笔记-程序跑飞
URL.createObjectURL、URL.revokeObjectURL、Uint8Array、Blob使用详解
SkiaSharp's WPF self-painted five-ring bouncing ball (case version)
Quantify daily work metrics
杰理AD14N/AD15N---串口中断问题
Prime Ring Problem
AC与瘦AP的WLAN组网实验