数仓架构之数仓分层

文章预览

关注回复：Flink, 领取资料 ! “  关于喜马拉雅首席数仓架构师-杰尼在长沙的往事  ”     首先应该说明的是，关于数仓如何分层的范畴，并没有统一的标准，具体分层应该视系统技术要求做规范。 01 — ODS-操作数据层      ODS全称  Operational Data Store ，是最容易理解的一层，也是最接近源数据的一层。整体上，ODS偏向存储，面向主题。此处所言【主题】，大概可以给出几个主题供感受一下，e.g. 销售订单主题、用户行为主题等...基本上是某一类基于真实应用场景的范围。     ODS层的数据，是下层数据源经过抽取、清洗、加载得来的。下层是一个形象的表述，其真实构成主要包括：业务系统的结构化数据，日志系统的半结构化数据以及常见的非结构化数据，非结构化数据主要以文本多媒体资源音视频存在。      抽取、清洗、加载这一过程，往 ………………………………