數(shù)據(jù)集市：數(shù)據(jù)庫(kù)的基礎(chǔ)之一（by AMT 胡鵬）

申請(qǐng)免費(fèi)試用、咨詢電話：400-8352-114

引言：在數(shù)據(jù)庫(kù)的早年發(fā)展時(shí)期，大多數(shù)方案都是通過很多努力以設(shè)計(jì)和建立公司大型的數(shù)據(jù)庫(kù)為導(dǎo)向。這些方案將耗時(shí)很長(zhǎng)時(shí)間才能實(shí)現(xiàn)設(shè)計(jì)的數(shù)據(jù)產(chǎn)品可以使用，能夠向公司提供價(jià)值。

數(shù)據(jù)集市：數(shù)據(jù)庫(kù)的基礎(chǔ)之一

by AMT 胡鵬

在數(shù)據(jù)庫(kù)的早年發(fā)展時(shí)期，大多數(shù)方案都是通過很多努力以設(shè)計(jì)和建立公司大型的數(shù)據(jù)庫(kù)為導(dǎo)向。這些方案將耗時(shí)很長(zhǎng)時(shí)間才能實(shí)現(xiàn)設(shè)計(jì)的數(shù)據(jù)產(chǎn)品可以使用，能夠向公司提供價(jià)值。在要求建立數(shù)據(jù)倉(cāng)庫(kù)的那段時(shí)間里，需求常常變化很快，使得最終在進(jìn)行商業(yè)分析的時(shí)候，所建立的數(shù)據(jù)庫(kù)沒有什么用處。有些方案因此被放棄，而其他一些方案，雖然已經(jīng)完成，但在花費(fèi)了上百萬的資金建設(shè)之后的結(jié)果卻是被很多人認(rèn)為是失敗的。

雖然如此，對(duì)整合的資源和也許對(duì)分析進(jìn)程已經(jīng)過時(shí)的歷史數(shù)據(jù)的需求仍然是在二十世紀(jì)八十年代和九十年代商務(wù)生活中的主要因素。在整個(gè)這個(gè)時(shí)期一些方法解決了大型數(shù)據(jù)庫(kù)開發(fā)中的初期問題。一種被證明是非常成功的方法是將一個(gè)大型方案分割成幾個(gè)小的部分，而每個(gè)部分都可以在很短的時(shí)間內(nèi)，常常是三到四個(gè)月就可以完成。一旦完成第一部分，就可以接著做第二部分，如此類推，最終建立的數(shù)據(jù)庫(kù)就可以包括商務(wù)及其環(huán)境在內(nèi)的完整的功能數(shù)據(jù)。

另一種解決數(shù)據(jù)庫(kù)方案早期問題的方法是數(shù)據(jù)集市的發(fā)展。在二十世紀(jì)八十年代末，數(shù)據(jù)集市變的非常流行，并且自從這個(gè)概念被引入后在業(yè)內(nèi)就成為眾多爭(zhēng)論的主題。很多軟件開發(fā)商在分析軟件工具市場(chǎng)看到巨大的商機(jī)，開始大力推廣數(shù)據(jù)集市來抓住這個(gè)機(jī)會(huì)。這些開發(fā)商認(rèn)為，公司不再需要一個(gè)數(shù)據(jù)庫(kù)，而只要一個(gè)數(shù)據(jù)集市就可以了。

數(shù)據(jù)集市的定義

什么是確切的數(shù)據(jù)集市的概念呢？就像這個(gè)世界上其他的事物一樣，對(duì)于不同的人，數(shù)據(jù)集市有不同的定義。一個(gè)數(shù)據(jù)集市的工作概念也許就像下面所說：

數(shù)據(jù)集市是用來分析相關(guān)專門商務(wù)問題或功能目標(biāo)的公司數(shù)據(jù)的專門項(xiàng)目的數(shù)據(jù)收集。一個(gè)數(shù)據(jù)集市僅包括在需要解決專門商務(wù)問題的數(shù)據(jù)。

一種通用的觀點(diǎn)認(rèn)為數(shù)據(jù)集市有三種基本類型。每種類型都以它和企業(yè)數(shù)據(jù)倉(cāng)庫(kù)（EDW）的關(guān)系來定義。獨(dú)立的數(shù)據(jù)集市和非獨(dú)立的數(shù)據(jù)集市是以它們是否包括來自（EDW）的數(shù)據(jù)為依據(jù)來定義。第三種概念認(rèn)為數(shù)據(jù)庫(kù)就是由數(shù)據(jù)集市構(gòu)成的。本文將主要介紹獨(dú)立的數(shù)據(jù)集市和作為數(shù)據(jù)庫(kù)的數(shù)據(jù)集市的概念。

還需要注意的是數(shù)據(jù)集市的定義沒有提到任何關(guān)于數(shù)據(jù)量，數(shù)據(jù)集市使用的數(shù)據(jù)大小等內(nèi)容。一個(gè)數(shù)據(jù)集市明顯要比一個(gè)公司的數(shù)據(jù)庫(kù)小很多。然而，事實(shí)是數(shù)據(jù)庫(kù)小并不意味著數(shù)據(jù)集市中的問題就小。這里我不是想說關(guān)于尺寸大小的問題，即如果一個(gè)數(shù)據(jù)庫(kù)超過某個(gè)量它自然而然成為一個(gè)數(shù)據(jù)倉(cāng)庫(kù)。目標(biāo)僅定位在要說明什么是數(shù)據(jù)集市、數(shù)據(jù)倉(cāng)庫(kù)或其其他實(shí)體而不是尺寸本身。

獨(dú)立的數(shù)據(jù)集市

一個(gè)獨(dú)立的數(shù)據(jù)集市是建立使用一個(gè)中央的、企業(yè)級(jí)數(shù)據(jù)庫(kù)作為數(shù)據(jù)來源的數(shù)據(jù)集市。所特別建立的單獨(dú)的數(shù)據(jù)集市是供單個(gè)的部門使用或者是為了滿足面向?qū)ｉT項(xiàng)目的分析方案的需要，但是大多數(shù)機(jī)構(gòu)在其商務(wù)智能環(huán)境中愿意擁有多個(gè)數(shù)據(jù)集市。然而，不管在機(jī)構(gòu)內(nèi)有多少數(shù)據(jù)集市存在，所有的數(shù)據(jù)集市的數(shù)據(jù)都來自EDW。

因此，建立一個(gè)數(shù)據(jù)集市也許供市場(chǎng)部使用。那么這個(gè)集市就需要包括產(chǎn)品的數(shù)據(jù)：產(chǎn)品的銷售數(shù)據(jù)，營(yíng)銷策劃和公司銷售產(chǎn)品的潛在客戶的數(shù)據(jù)。這類數(shù)據(jù)集市很可能不包括諸如每類產(chǎn)品的材料單、生產(chǎn)的質(zhì)量控制數(shù)據(jù)等生產(chǎn)信息。在一些方面，數(shù)據(jù)集市也許只包括點(diǎn)狀銷售數(shù)據(jù)。而另一方面，它可能包括在某種更高的一個(gè)或多個(gè)標(biāo)準(zhǔn)水平，諸如對(duì)時(shí)間或產(chǎn)品的舊數(shù)據(jù)的總結(jié)。不管數(shù)據(jù)原本從哪里進(jìn)入企業(yè)的數(shù)據(jù)收集系統(tǒng)，它被數(shù)據(jù)集市采用只有在這些數(shù)據(jù)通過一套標(biāo)準(zhǔn)函數(shù)，將數(shù)據(jù)置入被用來作為在最終數(shù)據(jù)集市中獲取數(shù)據(jù)來源的中央數(shù)據(jù)倉(cāng)庫(kù)，經(jīng)過加工處理方可。

作為數(shù)據(jù)庫(kù)的數(shù)據(jù)集市

 在數(shù)據(jù)庫(kù)團(tuán)體中一種學(xué)院派的想法是數(shù)據(jù)倉(cāng)庫(kù)是由公司中的數(shù)據(jù)集市構(gòu)成的。用這種方式，公司建立數(shù)據(jù)集市，終端用戶能夠獲取任何或者全部所需獲得的數(shù)據(jù)來完成分析。該理論認(rèn)為，數(shù)據(jù)集市建立起來更簡(jiǎn)便快捷，一旦建立，就從數(shù)據(jù)集市中獲取數(shù)據(jù)，而不用建立和維護(hù)一個(gè)中央數(shù)據(jù)倉(cāng)庫(kù)。就像在數(shù)據(jù)倉(cāng)庫(kù)等技術(shù)領(lǐng)域大多數(shù)理論那樣，這個(gè)概念有一些優(yōu)點(diǎn)，但是緊隨其后的是顯而易見的問題。

在試圖利用這種方式時(shí)，一個(gè)最重要的考慮是仍然打算確保在所有這些數(shù)據(jù)集市中獲取的數(shù)據(jù)能被正確使用和整合。在當(dāng)今世界最艱巨的任務(wù)是方案的何去何從，以及執(zhí)行官、經(jīng)理、員工在商務(wù)和技術(shù)兩方面何去何從等。盡管這個(gè)問題并不僅是“數(shù)據(jù)集市是倉(cāng)庫(kù)”的方法中獨(dú)有。不論你在哪里看，數(shù)據(jù)倉(cāng)庫(kù)是否以單片集成電路的實(shí)體形式建立，一個(gè)聯(lián)合的數(shù)據(jù)倉(cāng)庫(kù)或者有由數(shù)據(jù)集市共同體構(gòu)建的數(shù)據(jù)倉(cāng)庫(kù)，一個(gè)重要的成功要素是不斷發(fā)展并時(shí)刻遵循將各個(gè)方面聯(lián)系成一個(gè)有機(jī)的整體的設(shè)計(jì)。

無論你是夠已經(jīng)擁有一個(gè)EDW，或者正要進(jìn)入數(shù)據(jù)庫(kù)和商務(wù)智能的世界，數(shù)據(jù)集市很可能在你未來的計(jì)劃中發(fā)揮作用。在提高EDW數(shù)據(jù)的可使用性、提升查詢或報(bào)告功能和提供對(duì)在BI技術(shù)方面最初投資的快速回報(bào)方面，數(shù)據(jù)集市是一種有用的工具。但是在確保成功方面還是有風(fēng)險(xiǎn)的存在，因此建立一個(gè)數(shù)據(jù)集市的決定像其他IT策劃一樣，需要對(duì)公司的技術(shù)和商務(wù)策略同樣進(jìn)行仔細(xì)的計(jì)劃和整合。