数据仓库 、数据中心相关技术知识和生态相关了解
【摘要】
文章目录
数据仓库 、数据中心相关技术知识和生态相关了解
1、数据仓库 数仓
2、数据...
数据仓库 、数据中心相关技术知识和生态相关了解
1、数据仓库 数仓
数仓的分层
1、ODS 层:Operation Data Store 原始数据层 加载原始数据不做处理
2、DWD 层:Data Warehouse Detail 明细数据层 对 ODS 层数据进行清洗,去除空值、脏数据、超过极限范围的数据,对敏感数据进行脱敏
3、DWS 层:Data Warehouse Service 服务数据层 以 DWD 数据为基础,按天进行轻度汇总
4、DWT 层:Data Warehouse Topic 数据主题层 以 DWT 数据为基础,按主题进行汇总
5、ADS 层:Application Data Store 数据应用层 为各种报表提供数据
- 1
- 2
- 3
- 4
- 5
分层的目的
1、简化复杂任务,方便定位问题
2、减少重复开发
3、隔离原始数据
数据集市(Data Market)
和数据仓库
1、数据集市是数据仓库的 Mini
文章来源: wretchant.blog.csdn.net,作者:简简单单OnlineZuozuo,版权归原作者所有,如需转载,请联系作者。
原文链接:wretchant.blog.csdn.net/article/details/124844743
【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱:
cloudbbs@huaweicloud.com
- 点赞
- 收藏
- 关注作者
评论(0)