立即注册
登录
About云-梭伦科技
返回首页
nettman的个人空间
https://aboutyun.com/?21
[收藏]
[复制]
[分享]
[RSS]
空间首页
动态
记录
日志
相册
主题
分享
留言板
个人资料
导读
淘贴
博客
群组
社区VIP
APP下载
今日排行
本周排行
本周热帖
本月排行
本月热帖
会员排行
首页
Portal
专题
BBS
面试
更多
我的空间
好友
帖子
收藏
道具
勋章
任务
动态
日志
相册
分享
记录
留言板
群组
导读
日志
数据仓库T+1模型思想
已有 2361 次阅读
2019-5-27 22:43
|
系统分类:
Hive
首先什么是T+1模型
可以简单理解为数据中的1,2,3,4 ...T, T + 1.
可以理解为,今天之前是一个 T单位的数据,新加一天就是(T + 1)单位的数据。
这里的T可以理解为每天。
然后基本仓库可以分为
1.ODS层:
|-sdm每日的增量表数据
|-fdm部分需要保存全量数据的表。
注:ODS中保存所有的数据,包括以天为粒度的所有数据,包括多个版本的数据。以及全量数据,对比后的全量数据等等。
2.EDW层:
供业务部门进行数据运算,建模等。
路过
雷人
握手
鲜花
鸡蛋
收藏
分享
邀请
举报
全部
作者的其他最新日志
•
Hive drop卡住不动,该如何解决
•
Flink 读取hbase 慢该如何解决
•
CDH修改startdate,可以一直免费使用
•
k8s搭建大数据平台资源汇总
•
大数据学习记录
•
Impala、Hive如何存储图片
评论 (
0
个评论)
涂鸦板
您需要登录后才可以评论
登录
|
立即注册
评论
nettman
加为好友
给我留言
打个招呼
发送消息
关闭
推荐
/2
中文版ChatGPT
1.无需魔法 2.提高编程效率 3.提高文档能力
查看 »
新手帮助
新手帮助:注册遇到问题,领取资源,加入铁粉群,不会使用搜索,如何获取积分等
查看 »
意见
反馈