`
seaflower
  • 浏览: 5112 次
  • 来自: ...
最近访客 更多访客>>
文章分类
社区版块
存档分类
最新评论

ETL架构中的38个子系统(三)

 
阅读更多

The 38 Subsystems of ETL

?

By Ralph Kimball, 20044

?

6.审计维度生成系统(Audit Dimension Assembler System

?

主要功能是将与事实表相关的元数据内容加载到一张审计维度表中,这样最终用户可以像查看普通维度一样查看与事实表相关的元数据。

?

7.数据质量过滤系统(Quality Screen Handler System

?

主要功能是在ETL的处理过程中自动的检测所有的数据质量问题。检测的结果将进入错误事件处理系统(详见子系统8)。

?

8.错误事件处理系统(Error Event Hander System

?

主要功能是全面的记录和报告在ETL处理中的所有的错误事件。包括各类错误的分枝处理逻辑,还包括对ETL处理中数据质量的实时监控。

?

9.代理键生成系统(Surrogate Key Create System

?

主要功能是以一种鲁棒的机制生成流水的代理键,生成规则不依赖与任何维度,也不依赖与任何数据库实例,可以支持分布式系统。

?

10.缓慢变化维处理系统(Slowly Changing Dimension ProcessorSCD

?

主要功能是处理维度表的属性随时间变化的情况,处理方式为:类型1(直接覆盖),类型2(生成新行),类型3(添加新列)。

?

原文请参阅这里<!----><o:p></o:p>

?

分享到:
评论

相关推荐

    ETL架构中的38个子系统1

    1.抽取系统(Extract System) 2.变化数据捕获系统(Change Data Capture System) 3.数据概况分析系统(Data Pr

    ETL架构师面试题

    18.简述三种基本事实表,并说明ETL的过程中如何处理它们。 19.简述桥接表是如何将维度表和事实表进行关联的? 20.迟到的数据对事实表和维度表有什么影响?怎样来处理这个问题? 元数据 21.举例说明各种ETL过程中...

    商场数据仓库ETL系统架构设计.pdf

    商场数据仓库ETL系统架构设计.pdf商场数据仓库ETL系统架构设计.pdf商场数据仓库ETL系统架构设计.pdf商场数据仓库ETL系统架构设计.pdf商场数据仓库ETL系统架构设计.pdf商场数据仓库ETL系统架构设计.pdf商场数据仓库...

    ETL架构师面试题目

    ETL架构师必须掌握的知识,对希望从事ETL架构开发的工程师有用!

    分布式ETL体系架构,大数据,ETL

    分布式ETL体系架构设计,帮助你了解构建分布式数据抽取处理系统架构

    ETL 架构师面试题 数据仓库

    ETL 架构师面试题 数据仓库与PowerCenter相关的,可以一看。

    ETL架构师面试题.docx

    ETL架构师面试题.docxETL架构师面试题.docxETL架构师面试题.docxETL架构师面试题.docxETL架构师面试题.docxETL架构师面试题.docxETL架构师面试题.docxETL架构师面试题.docx

    ETL架构师面试题及答案

    ETL架构必备知识!

    ETL架构师面试题.pdf

    ETL架构师面试题.pdfETL架构师面试题.pdfETL架构师面试题.pdfETL架构师面试题.pdfETL架构师面试题.pdfETL架构师面试题.pdfETL架构师面试题.pdfETL架构师面试题.pdf

    ETL架构师常问问题.pdf

    ETL架构师常问问题.pdfETL架构师常问问题.pdfETL架构师常问问题.pdfETL架构师常问问题.pdfETL架构师常问问题.pdfETL架构师常问问题.pdfETL架构师常问问题.pdfETL架构师常问问题.pdf

    大唐ODS&ETL架构图.zip

    大唐ODS&ETL架构图

    ETL架构师面试题+PowerCenter+数据仓库

    ETL架构师面试题+PowerCenter+数据仓库 ETL架构师面试题+PowerCenter+数据仓库

    系统中ETL和数据集市的架构设计和实现(PPT)

    简介:作者结合实际工作的需求,在设计和实现某公司商务部分析报表系统的过程中对ETL与数据集市的架构进行了研究。该系统是某大型外资企业进行商务决策过程所需的分析报表系统,该系统能向相关部门提供每日更新、...

    基于Flink Hudi的增量ETL架构

    基于Flink Hudi的增量ETL架构

    BI ETL ELT Kettle 基础知识中文文档汇总

    BI ETL ELT Kettle 基础知识中文文档汇总 BI项目中ETL设计与思考.pdf CTL工具.pdf ETL-开发规范.pdf ETL_--_事实表.pdf ETL_文档.pdf ... 第三章_数据仓库中的ETL和元数据.pptx 面试ETL题总汇.pdf

    ETL架构师常问问题.docx

    ETL架构师常问问题.docxETL架构师常问问题.docxETL架构师常问问题.docxETL架构师常问问题.docxETL架构师常问问题.docxETL架构师常问问题.docxETL架构师常问问题.docxETL架构师常问问题.docx

    python 实现ETL处理 架构

    python 实现ETL 处理 架构 1.可以处理数据装载的过程 2.实现SQL执行的函数封装 3.实现数据加工的模板

Global site tag (gtag.js) - Google Analytics