数据仓库 、数据中心相关技术知识和生态相关了解

举报
简简单单Onlinezuozuo 发表于 2022/05/20 00:26:58 2022/05/20
【摘要】 文章目录 数据仓库 、数据中心相关技术知识和生态相关了解 1、数据仓库 数仓 2、数据...

数据仓库 、数据中心相关技术知识和生态相关了解


1、数据仓库 数仓


数仓的分层

1、ODS 层:Operation Data Store    原始数据层   加载原始数据不做处理
2、DWD 层:Data Warehouse Detail   明细数据层   对 ODS 层数据进行清洗,去除空值、脏数据、超过极限范围的数据,对敏感数据进行脱敏
3、DWS 层:Data Warehouse Service  服务数据层   以 DWD 数据为基础,按天进行轻度汇总
4、DWT 层:Data Warehouse Topic    数据主题层   以 DWT 数据为基础,按主题进行汇总
5、ADS 层:Application Data Store  数据应用层   为各种报表提供数据

  
 
  • 1
  • 2
  • 3
  • 4
  • 5

分层的目的
1、简化复杂任务,方便定位问题
2、减少重复开发
3、隔离原始数据

数据集市(Data Market)和数据仓库
1、数据集市是数据仓库的 Mini

文章来源: wretchant.blog.csdn.net,作者:简简单单OnlineZuozuo,版权归原作者所有,如需转载,请联系作者。

原文链接:wretchant.blog.csdn.net/article/details/124844743

【版权声明】本文为华为云社区用户转载文章,如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。