2. 程式人生 > >資料倉庫之四部"聖經"

資料倉庫之四部"聖經"

阿新 • • 發佈：2019-01-22
先介紹兩位權威的資料倉庫之父:Inmon和Kimball,但是各自主張卻存在分歧

William H.Inmon

(暱稱: 比爾·恩門Bill Inmon)

最早的資料倉庫概念提出者,

在Building the Data Warehouse主張建立資料倉庫時採用自上而下（DWDM）方式.Bill Inmon的集線器架構/企業資訊工廠架構（Hub and Spoke / CIF – Corporate Information Factory）

Ralph Kimball

(拉爾夫·金博爾)

Ralph Kimball是資料倉庫和商務智慧領域的權威專家。他創立的維度建模方法論（或

Kimball方法論）已經成為決策支援領域的金科玉律。Ralph Kimball在“The DataWarehouse Toolkit”則是主張自下而上（DMDW）的方式. Ralph Kimball的資料集市/資料倉庫匯流排架構（Data Mart Bus Architecture/Data Warehouse Bus Architecture）

1992. Building the Data Warehouse. 1st Edition, William H.Inmon

2005. Building the Data Warehouse. 4th Edition, William H.Inmon

1996. The Data Warehouse Toolkit, Kimball Ralph

2002. The Data Warehouse Toolkit.2nd Edition: The Complete Guide to Dimensional Modeling, Kimball Ralph 

2004. The Data Warehouse ETL Toolkit, Kimball Ralph---形成了ETL裡面的38個子系統

1998.The Data Warehouse Lifecycle Toolkit, Kimball Ralph

2008. The Data Warehouse Lifecycle Toolkit, 2nd Edition, Kimball Ralph--- ETL子系統被重構為

34種子系統


支援原創

原文，公眾號：clark_blog
部落格：blog.csdn.net/clark_xu

程式碼：https://github.com/clark99

相關推薦

資料倉庫之四部"聖經"

先介紹兩位權威的資料倉庫之父:Inmon和Kimball,但是各自主張卻存在分歧 William H.Inmon (暱稱: 比爾·恩門Bill Inmon) 最早的資料倉庫概念提出者, 在Building the Data Warehouse主張建立資料倉庫

（轉載）一文搞定資料倉庫之拉鍊表，流水錶，全量表，增量表

轉載自：https://blog.csdn.net/mtj66/article/details/78019370 全量表：每天的所有的最新狀態的資料， 增量表：每天的新增資料，增量資料是上次匯出之後的新資料。 拉鍊表：維護歷史狀態，以及最新狀態資料的一種

資料倉庫之父——Bill Inmon(轉載)

比爾·恩門（Bill Inmon），被稱為資料倉庫之父，最早的資料倉庫概念提出者，在資料庫技術管理與資料庫設計方面，擁有逾35年的經驗。他是“企業資訊工廠”的合作創始人與“政府資訊工廠”的創始人。 　　比爾·恩門的思想與見識在所有重量級的計算機協會、許多產業會議、技術研討會上，都博得了無比的敬重

資料倉庫之架構發展

資料倉庫有很多型別的架構方式，按照發展的歷程上，主要有如下幾類標誌性。 獨立的資料集市架構。 在最早期的資料倉庫建設中，大多是以部門為單位搭建資料倉庫，也就是資料集市，供整個部門使用。這樣能夠很快的構建好資料倉庫，但是缺點是很容易產生不同部門因資料計算口徑不同而導致的資料產出結果不一致。當

資料倉庫之資料模型

關於資料倉庫的概念，這裡不再累贅。先看下面的圖（資料倉庫建設的7個主要環節）： 本文，主要針對第三塊資料倉庫模型設計來討論交流，尤其是網際網路行業。 一、關於資料倉庫資料模型 1. 資料倉庫資料模型是指使用實體、屬性及其關係對企業運營和邏輯規則進行統一的定義、編碼和

漫談資料倉庫之SCD（緩慢變化維度）

0x01 什麼是SCD？ SCD（Slowly Changing Dimensions），中文一般翻譯成“緩慢變化維”。 緩慢變化維的提出是因為在現實世界中，維度的屬性並不是靜態的，它會隨著時間的流失發生緩慢的變化。這種隨時間發生變化的維度我們一般稱之為緩慢變化維，並且把處

資料倉庫(十四)--java--presto---hive的分頁查詢

我們在SpringMVC框架中使用那個presto查詢hive的資料做展示時，發現在table裡分頁是個不可避免的話題。 建議去掉count 但是尷尬的是 對於海量資料 count的效率是很低的，因為在不加條件的情況下基本上要掃描全表。 count操作效能

資料倉庫之星型結構和雪花型結構

在多維分析的商業智慧解決方案中，根據事實表和維度表的關係，又可將常見的模型分為星型模型和雪花型模型。在設計邏輯型資料的模型的時候，就應考慮資料是按照星型模型還是雪花型模型進行組織。 當所有維表都直接連線到“ 事實表”上時，整個圖解就像星星一樣，故將該模型稱為星型模型，

玩轉大資料系列之四：搜尋服務

搜尋服務是阿里雲產品非常重要的組成部分，也承載了阿里巴巴集團的全部主要的搜尋任務。這裡的搜尋服務主要包含兩個產品：阿里雲Elasticsearch和開放搜尋OpenSearch。 本文將介紹如何玩轉阿里雲搜尋的大資料服務。 阿里雲Elasticsearch 阿里雲Elasticsearch，提供基於開源

C++儲存資料結構之四map

Map是c++的一個標準容器，它提供了很好一對一的關係，在一些程式中建立一個map可以起到事半功倍的效果，總結了一些map基本簡單實用的操作！ 1. map建構函式； map<string , int >mapstring; map<int ,string

漫談資料倉庫之拉鍊表（原理、設計以及在Hive中的實現）

0x00 前言 本文將會談一談在資料倉庫中拉鍊表相關的內容，包括它的原理、設計、以及在我們大資料場景下的實現方式。 全文由下面幾個部分組成： 先分享一下拉鍊表的用途、什麼是拉鍊表。 通過一些小的使用場景來對拉鍊表做近一步的闡釋，以及拉鍊表和常用的

Hibernate實戰資料持久化之四Session的clear()、flush()、commit()、close()方法

flush()flush方法的主要作用就是清理快取，強制資料庫與hibernate快取同步，以保證資料的一致性。    通常，執行session.save，update，delete的時候，只是一個登記

學習資料倉庫之構建

    資料庫有三級模型的概念，在這裡，資料倉庫也是有著三級模型並且是有著相似的思路。 1.概念模型 “資訊世界”中的資訊結構，也常常借用關係資料庫設計中的E-R方法，不過在資料倉庫的設計是以主題替代實體。 根據業務的範圍和使用來劃分主題 劃分的方法是首先要確定系統

資料倉庫之拉鍊表

`拉鍊表`是針對資料倉庫設計中表儲存資料的方式而定義的，顧名思義，所謂拉鍊，就是記錄歷史。**記錄一個事物從開始，一直到當前狀態的所有變化的資訊。** 下面就是一張拉鍊表，儲存的是使用者的最基本資訊以及每條記錄的生命週期。我們可以使用這張表拿到最新的當天的最新資料以及之前的歷史資料。 |註冊日期|使用者編

大資料系列之資料倉庫Hive知識整理（四）Hive的嚴格模式，動態分割槽，排序，事務，調優

1.Hive的嚴格模式Hive提供了一個嚴格模式，可以防止使用者執行那些產生意想不到的不好的影響的查詢。想想看在那麼大的資料量的前提下，如果我們在分割槽上表上使用查詢所有，或是使用了笛卡爾積查詢資料等等不良情況，那得花費我們多少時間和資源成本，Hive在預設情況下會開啟一種模

資料倉庫(四)之ETL開發

概述 ETL是資料倉庫的後臺，主要包含抽取、清洗、規範化、提交四個步驟，傳統資料倉庫一般分為四層模型。                            分層的作用                                               

資料倉庫研究之二--mondrian入門

原文：http://blog.csdn.net/infowain/archive/2006/06/24/829074.aspx 以前一直是用MS Anylize Service的，最近要做的專案是java的，小專案預算有限，所以想找一個開源的java的資料倉庫解決方案來用用。  

Java基礎之四類八種資料型別

第一類:邏輯型boolean 第二類:文字型char 第三類:整數型(byte、short、int、long) char型別佔2個位元組 short從-32768到32767 int從-2147483648,到2147483647共10位 long從-922337203

redis之四 常用命令和5種資料結構

redis中文官網：string hash list set sortedset 一、基本操作 #獲取所有的key keys * #判斷一個鍵是否存在。存在則返回1，否則返回0 exists mykey #刪除鍵 del mykey #過期時間(單位：秒) #設定過期時間

Python資料處理之（四）numpy基礎運算1

一、一維矩陣的基礎運算 下例中 a和b是兩個屬性為array也就是矩陣的變數，而且二者都是1行4列的矩陣， 其中b矩陣中的元素分別是從0到3。 如果我們想要求兩個矩陣之間的減法，你可以嘗試著輸入：a-b,得到的結果是對應元素相減的結果也就是[10 19 28 37]，同理元素的相加相