SOA案例：汽車行業(yè)如何加速數(shù)據(jù)引擎

申請(qǐng)免費(fèi)試用、咨詢電話：400-8352-114

2004年秋，公司的首席信息官Kevin Vasconi與另外幾位高層主管在位于美國(guó)汽車行業(yè)中心的底特律總部開董事會(huì)。

這是一次討論公司現(xiàn)狀的會(huì)議，旨在探討Polk的戰(zhàn)略方向，達(dá)成的共識(shí)是：信息系統(tǒng)無(wú)法支持公司到下一個(gè)十年。

系統(tǒng)陳舊 跟不上新態(tài)勢(shì)

這家總部設(shè)在密歇根州南菲爾德的公司的核心業(yè)務(wù)是數(shù)據(jù)聚合。Polk從260處來(lái)源匯總車輛登記和銷售數(shù)據(jù)，包括美國(guó)和加拿大的機(jī)動(dòng)車輛部門、保險(xiǎn)公司、汽車生產(chǎn)商及貸款機(jī)構(gòu)。然后公司對(duì)數(shù)據(jù)重新包裝，銷售給經(jīng)銷商、生產(chǎn)商和營(yíng)銷公司——比如哪款SUV在某個(gè)地區(qū)最暢銷。

多年來(lái)，Polk的數(shù)據(jù)合并流程在IBM大型機(jī)上運(yùn)行。Vasconi在2003年加盟公司時(shí)，有些軟件已用了20年之久?！斑@些代碼比有些員工在公司呆的時(shí)間還要長(zhǎng)?！彼f(shuō)。

大型機(jī)系統(tǒng)本身沒有出問(wèn)題。但整個(gè)流程圍繞大型機(jī)的批處理操作而設(shè)計(jì)：多個(gè)計(jì)算任務(wù)先排序后處理，以便盡量充分利用大型機(jī)的資源。Vasconi希望新技術(shù)能加快為客戶提供數(shù)據(jù)的速度——一收到數(shù)據(jù)就進(jìn)行處理，而不是每天或者每周集中批處理;還可以使手工處理的任務(wù)實(shí)現(xiàn)自動(dòng)化，從而降低公司成本。

他還擔(dān)心，舊系統(tǒng)跟不上數(shù)據(jù)迅猛增加的態(tài)勢(shì)。因?yàn)楣緮?shù)據(jù)庫(kù)里面的數(shù)據(jù)已經(jīng)超過(guò)1.5拍字節(jié)(1拍字節(jié)=1015字節(jié));而歷史趨勢(shì)表明，將來(lái)增長(zhǎng)速度會(huì)更快?！拔覀冎烙龅搅巳萘繂?wèn)題。發(fā)揮數(shù)據(jù)的價(jià)值將是公司面臨的挑戰(zhàn)?！彼f(shuō)。

同時(shí)，客戶一直在急于擺脫限制，希望更快地獲得銷售數(shù)據(jù)。全國(guó)汽車經(jīng)銷商協(xié)會(huì)(NADA)是代表19700家汽車和卡車經(jīng)銷商的一家組織，首席經(jīng)濟(jì)學(xué)家Paul C. Taylor表示，通常在汽車生產(chǎn)商發(fā)布全國(guó)銷售數(shù)據(jù)30天后，客戶才能獲得Polk的各州車輛登記數(shù)據(jù)。這樣一來(lái)，新澤西州的經(jīng)銷商就無(wú)法立即比較本地區(qū)和全國(guó)的購(gòu)車趨勢(shì)，以便相應(yīng)調(diào)查庫(kù)存量。

Taylor說(shuō)：“理想情況下，你一旦有了全國(guó)銷售數(shù)字，就可以分析各州銷售情況。Polk如果將周期縮短哪怕一周，那也是巨大的改進(jìn)?！?/P>

實(shí)際上，Polk之前曾兩次試圖從大型機(jī)遷離出去，但這些項(xiàng)目最后還是回到了起點(diǎn)。公司主管們后來(lái)采用了不同的方法，啟動(dòng)了代號(hào)為ReFuel的項(xiàng)目。2004年底，Polk設(shè)立了新公司RLPTechnologies，構(gòu)建下一個(gè)數(shù)據(jù)聚合系統(tǒng)。

Polk預(yù)計(jì)ReFuel項(xiàng)目能節(jié)省費(fèi)用。實(shí)際上Polk旗下向公司客戶銷售數(shù)據(jù)的部門——Polk Global Automotive部門的部門總裁Joe Walker和Vasconi后來(lái)證實(shí)：該項(xiàng)目幫助公司把數(shù)據(jù)操作管理成本削減了近一半。

從零做起

Vasconi為新建的分公司組建了10人核心小組(這些人多半是Polk的信息技術(shù)員工)后，他的第一項(xiàng)任務(wù)是弄清楚新系統(tǒng)將是什么樣子。

公司有三大目標(biāo)，簡(jiǎn)稱“50/50/100”，意思是：新系統(tǒng)把效率提高50%(換句話說(shuō)，把運(yùn)營(yíng)成本削減一半)、數(shù)據(jù)提供速度加快50%;數(shù)據(jù)準(zhǔn)確性力求達(dá)到100%。

新系統(tǒng)名為“數(shù)據(jù)工廠”(Data Factory)，執(zhí)行與IBM大型機(jī)同樣的三項(xiàng)任務(wù)：先是獲取數(shù)據(jù)，從260處來(lái)源匯總數(shù)據(jù);然后把數(shù)據(jù)轉(zhuǎn)換成標(biāo)準(zhǔn)格式，并使用統(tǒng)一的結(jié)構(gòu)和命名，以便存儲(chǔ)下來(lái)的得克薩斯州報(bào)告上去的車輛識(shí)別號(hào)碼能夠被Polk的其他應(yīng)用所讀取。最后，系統(tǒng)需要通過(guò)與其他數(shù)據(jù)庫(kù)進(jìn)行相互參照來(lái)提高數(shù)據(jù)準(zhǔn)確性——比方說(shuō)，核實(shí)消費(fèi)者的姓名和地址，或者把某輛車與貸款歷史聯(lián)系起來(lái)。

Vasconi明白系統(tǒng)要有面向服務(wù)的架構(gòu)(SOA)，以便不同系統(tǒng)里面的軟件組件能夠以一種標(biāo)準(zhǔn)方式進(jìn)行聯(lián)系。因?yàn)樾孪到y(tǒng)需要這種靈活性，可以自由地添加或者更新組件，又不干擾整個(gè)系統(tǒng)。SOA的擴(kuò)展性也有望勝過(guò)整體式架構(gòu)(這意味著它能夠處理負(fù)載逐步加大的任務(wù))，因?yàn)檩^大的任務(wù)更容易細(xì)分成多個(gè)子任務(wù)。另外，他希望使用網(wǎng)格計(jì)算，從而利用多臺(tái)機(jī)器來(lái)處理同一項(xiàng)任務(wù)，而不是使用功能強(qiáng)大的獨(dú)立服務(wù)器。

他說(shuō)：“我們需要構(gòu)建能用30年的系統(tǒng)。”

RLPTechnologies的小組勾劃了新系統(tǒng)的功能部分，然后確定哪些部分是市場(chǎng)上可以買到的商業(yè)軟件產(chǎn)品、哪些部分需要自己內(nèi)部開發(fā)。Vasconi說(shuō)：“如果我們能找到可以買來(lái)的技術(shù)，就希望買現(xiàn)成的，以便加快我們開發(fā)的東西進(jìn)入市場(chǎng)?！?/P>

Polk的“數(shù)據(jù)工廠”的硬件模塊包括：采用英特爾處理器的戴爾服務(wù)器，運(yùn)行Linux操作系統(tǒng);使用兩路及四路處理器的服務(wù)器配置成不同網(wǎng)格來(lái)處理不同應(yīng)用;一個(gè)網(wǎng)格運(yùn)行Oracle 10g數(shù)據(jù)庫(kù);第二個(gè)網(wǎng)格運(yùn)行JBoss的應(yīng)用服務(wù)器，負(fù)責(zé)托管自定義的Java代碼;第三個(gè)網(wǎng)格運(yùn)行Tibco Software公司的BusinessWorks消息總線軟件，充當(dāng)系統(tǒng)其他部分之間的通信代理;Tibco軟件提供了該系統(tǒng)的SOA骨干部分。

“數(shù)據(jù)工廠”采用了其他現(xiàn)成軟件包。來(lái)自Informatica公司的軟件把進(jìn)來(lái)的數(shù)據(jù)變成了可擴(kuò)展標(biāo)記語(yǔ)言(XML)文檔，從而把數(shù)據(jù)處理成通用格式。使用DataFlux(隸屬商業(yè)智能廠商SAS)的軟件分析數(shù)據(jù)質(zhì)量，以便能夠發(fā)現(xiàn)可能的錯(cuò)誤，進(jìn)而調(diào)查分析。