BI與搜索技術(shù)的融合趨勢(shì)與技術(shù)

申請(qǐng)免費(fèi)試用、咨詢電話：400-8352-114

有價(jià)值的信息分散在企業(yè)的各個(gè)角落，這是信息管理領(lǐng)域早已公認(rèn)的事實(shí)，同時(shí)也是多年來未被攻克的一個(gè)難題。在BI(商業(yè)智能)的數(shù)據(jù)挖掘技術(shù)不斷演進(jìn)的同時(shí)，隱藏于一個(gè)簡(jiǎn)單Web頁面之后的企業(yè)搜索技術(shù)的介入，有望為企業(yè)用戶提供一條快速、簡(jiǎn)單且更加理想化的信息訪問通道。

在BI世界里，敏捷、準(zhǔn)確地制作報(bào)表并分析是恒定不變的法則，但是在數(shù)據(jù)的實(shí)時(shí)展現(xiàn)和信息獲取的易用性方面，BI與用戶的實(shí)際期望值之間一直存在距離。雖然各大BI廠商都力圖把自己的產(chǎn)品打造得更貼近客戶需求、界面更友好，但BI報(bào)表定制對(duì)絕大多數(shù)的企業(yè)員工而言，依然是一個(gè)神秘的領(lǐng)域。企業(yè)業(yè)務(wù)信息的掘取似乎是那些統(tǒng)計(jì)學(xué)大腕才能勝任的工作。最近幾年來，BI廠商一直在尋找讓BI應(yīng)用更加平民化或大眾化的方法，但直到BI與企業(yè)搜索技術(shù)交疊之后，才使用戶看到了BI應(yīng)用下行的最絢麗曙光。

數(shù)據(jù)隨時(shí)展現(xiàn)

作為傳統(tǒng)BI的用戶，一家名為Blue Cross Blue Shield的美國保險(xiǎn)公司以前只能在一個(gè)固定的周期內(nèi)生成BI報(bào)表，這些報(bào)表按模板索引，每兩周或在每個(gè)月分發(fā)給固定郵件列表的用戶。這種剛性的數(shù)據(jù)管理所導(dǎo)致的問題是，如何處理那些不在郵件列表中的用戶請(qǐng)求?這些用戶通過何種途徑才能訪問相關(guān)的報(bào)表?

BI與搜索的結(jié)合幫助這家公司找到了向更多員工交付BI報(bào)表的有效方法。在部署了IBM Web-Sphere Content Discovery之后，通過BI系統(tǒng)與企業(yè)級(jí)搜索應(yīng)用的集成，公司成功擴(kuò)大了BI數(shù)據(jù)的訪問范圍。與BI報(bào)表定時(shí)推送相比，新系統(tǒng)支持員工實(shí)時(shí)通過一個(gè)門戶界面檢索存儲(chǔ)在不同報(bào)表中的BI信息，而這種檢索通過簡(jiǎn)單的文本搜索即可實(shí)現(xiàn)，不需要編寫專業(yè)的查詢語句。

早期用戶已經(jīng)體驗(yàn)到這種技術(shù)融合對(duì)業(yè)務(wù)數(shù)據(jù)分析能力的提升。一位政府客戶就表示，BI與搜索的融合對(duì)分布式組織具有極強(qiáng)的吸引力。他指出，“BI+搜索”的解決方案能夠讓身處不同地域的用戶訪問不同的獨(dú)立數(shù)據(jù)庫成為可能，并且平滑升級(jí)到BI和文本數(shù)據(jù)的高級(jí)檢索。同時(shí)用戶可以享受到超越以往的數(shù)據(jù)下鉆體驗(yàn)，比如總公司點(diǎn)擊地圖中的某個(gè)省，就可以下鉆到省公司的數(shù)據(jù)庫進(jìn)行分析并定制報(bào)表，這種數(shù)據(jù)展現(xiàn)形式遠(yuǎn)遠(yuǎn)超越了傳統(tǒng)BI的數(shù)據(jù)交付。

數(shù)據(jù)“無來源”獲取

“有了搜索技術(shù)，用戶不必知道信息來自何方”，這是搜索為BI領(lǐng)域帶來的革命性改變。具體來說，就是用戶在進(jìn)行BI數(shù)據(jù)訪問時(shí)，并不需要了解在企業(yè)搜索引擎背后數(shù)據(jù)收集、數(shù)據(jù)過濾、報(bào)表定位以及報(bào)表重建等步驟是怎樣運(yùn)作的。他們所要做的只是熟悉企業(yè)搜索引擎的使用方法，了解它和基于Web的消費(fèi)類搜索引擎的細(xì)微差異，以及如何使用它的高級(jí)搜索選項(xiàng)。

這種“無來源”的數(shù)據(jù)獲取方式使結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)向“統(tǒng)一信息搜索”的目標(biāo)大大前進(jìn)了一步。“作為企業(yè)重要的決策支持工具，BI與企業(yè)搜索技術(shù)的結(jié)合符合技術(shù)發(fā)展的趨勢(shì)，這樣企業(yè)不僅能夠獲得經(jīng)營匯總信息，發(fā)現(xiàn)問題后還可以立即下鉆查看合同文檔、Email記錄、相關(guān)法律法規(guī)等?！?SAS中國區(qū)解決方案經(jīng)理張?zhí)旆逭f。

回顧BI的技術(shù)發(fā)展史，傳統(tǒng)BI 主要提供結(jié)構(gòu)化信息的搜索。但對(duì)于非結(jié)構(gòu)化數(shù)據(jù)的搜索，一些BI廠商提供的文本挖掘技術(shù)覆蓋能力有限。在技術(shù)的區(qū)分方面，結(jié)構(gòu)化數(shù)據(jù)搜索主要包含數(shù)值計(jì)算和分析技術(shù)，非結(jié)構(gòu)化數(shù)據(jù)主要圍繞關(guān)鍵詞、主題詞或元數(shù)據(jù)的搜索，其核心技術(shù)仍是結(jié)構(gòu)化查詢。企業(yè)搜索技術(shù)將幫助企業(yè)解決非結(jié)構(gòu)化數(shù)據(jù)檢索問題。其關(guān)鍵作用是擴(kuò)大數(shù)據(jù)查詢和分析的范圍，建立結(jié)構(gòu)化與非結(jié)構(gòu)化查詢結(jié)果的關(guān)聯(lián)關(guān)系，有效彌補(bǔ)BI數(shù)據(jù)挖掘和文本挖掘技術(shù)的不足。

“無來源”數(shù)據(jù)獲取的理想化圖景是，企業(yè)搜索引擎將成為用戶訪問企業(yè)所有信息的統(tǒng)一入口，BI與搜索的集成系統(tǒng)能夠屏蔽結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù)的差異，無論數(shù)據(jù)存儲(chǔ)在什么位置，系統(tǒng)都能夠按照用戶在搜索引擎中輸入的查詢請(qǐng)求交付所需的數(shù)據(jù)，用戶并不需要知道這些數(shù)據(jù)存儲(chǔ)在企業(yè)IT系統(tǒng)的什么位置。而在現(xiàn)階段，企業(yè)搜索引擎主要關(guān)注對(duì)HTML、PPT、PDF等企業(yè)文檔的檢索，對(duì)于這些文檔導(dǎo)向的數(shù)據(jù)資源，一些搜索引擎可以做出關(guān)于語義或數(shù)據(jù)的智能化判斷。

黏合劑的制造者

前面提到了BI與搜索融合的兩大好處，即讓BI數(shù)據(jù)更易于訪問，以及整合結(jié)構(gòu)化與非結(jié)構(gòu)化數(shù)據(jù)。但就目前BI或搜索廠商的實(shí)現(xiàn)能力看，BI與搜索的融合仍是一個(gè)需要不斷充實(shí)和完善的理想框架，其中的技術(shù)難點(diǎn)我們將在后面展開討論。但令人振奮的是，在這一技術(shù)交互地帶，已經(jīng)聚集了現(xiàn)今最主流的搜索和BI廠商，廠商之間的頻繁合作大大增加了兩種技術(shù)融合的黏性。

Google OneBox for Enterprise(簡(jiǎn)稱Google OneBox)的推出曾被一些分析家評(píng)價(jià)為“劃時(shí)代事件”。這款于2006年4月面世的產(chǎn)品使Google的專用搜索設(shè)備除文本之外還可以搜索保存在數(shù)據(jù)庫和數(shù)據(jù)倉庫中的結(jié)構(gòu)化數(shù)據(jù)。Google OneBox發(fā)布后，眾多BI廠商旋即展開了針對(duì)該產(chǎn)品的集成計(jì)劃。目前，已經(jīng)建立其BI產(chǎn)品與Google OneBox之間鏈接的廠商包括：Cognos、InformationBuliders、甲骨文、SAS、海波龍(Hyperion)和Business Objects。Business Objects在2006年5月推出了基于Google OneBox的企業(yè)級(jí)搜索解決方案，并計(jì)劃在2007年上半年推出一套對(duì)其BI數(shù)據(jù)進(jìn)行文本搜索的工具。海波龍?jiān)?007年2月推出了HyperionSystem 9 Smart Search for Google，該產(chǎn)品支持基于Hyperion System 9知識(shí)庫的報(bào)表、儀表盤、財(cái)務(wù)報(bào)表的定制，同時(shí)能夠?qū)崿F(xiàn)對(duì)企業(yè)中多種非結(jié)構(gòu)化數(shù)據(jù)(例如郵件、辦公文檔、文本文檔、PDF文檔)的搜索。

在Google OneBox表現(xiàn)出強(qiáng)勁凝聚力的同時(shí)，IBM和微軟也相繼發(fā)布了與此相關(guān)的新的產(chǎn)品和特性，同時(shí)廠商之間圍繞BI與搜索的合作還迅速激發(fā)了聯(lián)動(dòng)效應(yīng)。2006年12月，IBM和Yahoo共同發(fā)布名為Yahoo版IBM OmniFind的免費(fèi)企業(yè)搜索應(yīng)用，Cognos宣布其Cognos 8 Go!搜索引擎與OmniFind進(jìn)行鏈接。Fast Search and Transfer公司將其企業(yè)搜索平臺(tái)與Cognos 8 BI解決方案結(jié)合，實(shí)現(xiàn)向員工直接交付企業(yè)內(nèi)容。2007年1月，Information Buliders推出WebFocusMagnify，這是一種索引結(jié)構(gòu)化數(shù)據(jù)并在搜索結(jié)果中提供BI報(bào)告的搜索導(dǎo)航工具。另外，X1Technologies的X1企業(yè)搜索平臺(tái)支持對(duì)電子郵件、桌面文檔等非結(jié)構(gòu)化信息的檢索，并且能夠與后端搜索建立聯(lián)邦關(guān)系。

融合的高難度

BI與搜索技術(shù)融合的構(gòu)想一經(jīng)提出，就被寄予了厚望。人們希望這種融合能夠解決那些長期懸而未決的問題。以Google OneBox為代表的企業(yè)級(jí)搜索產(chǎn)品的成熟更是讓BI行業(yè)發(fā)生了很多改變，但我們也必須正視這一領(lǐng)域所面臨的困難。

傳統(tǒng)BI所實(shí)現(xiàn)的結(jié)構(gòu)化數(shù)據(jù)搜索無法向用戶提供上下文關(guān)聯(lián)信息。比如，用戶可以打開一

個(gè)庫存數(shù)據(jù)庫，但是卻無法獲得數(shù)據(jù)庫之外像貨品照片、庫存位置地圖等關(guān)聯(lián)信息。有專家表示，這樣的問題最終會(huì)通過元數(shù)據(jù)搜索的介入而得到解決，就像在數(shù)據(jù)庫領(lǐng)域XML所獲得的成功一樣。但是在目前，海量的結(jié)構(gòu)化數(shù)據(jù)與非結(jié)構(gòu)化數(shù)據(jù)的結(jié)合仍是一個(gè)難題。

非結(jié)構(gòu)化數(shù)據(jù)搜索的挑戰(zhàn)在于，如何駕馭如此龐大、高容量的文檔信息。以一個(gè)擁25000名員工的企業(yè)為例，每個(gè)員工每個(gè)工作日處理70封郵件，那么該企業(yè)每年出于法規(guī)遵從目的需要存儲(chǔ)的郵件數(shù)量就達(dá)5億封，還要保證這些郵件是可搜索的。加上其他需要存儲(chǔ)和搜索的HTML、Word、EXCEL、PPT文檔，搜索指令仿佛“大海撈針”。

作為一位資深BI人，神州數(shù)碼移動(dòng)事業(yè)部的劉慶認(rèn)為，BI與搜索的融合不是單純易用性的改進(jìn)，需要解決的關(guān)鍵問題包括實(shí)施成本、技術(shù)標(biāo)準(zhǔn)化等。他表示，在2006年曾經(jīng)有國內(nèi)的企業(yè)有意嘗試企業(yè)文檔的搜索，但真正把搜索系統(tǒng)與BI系統(tǒng)結(jié)合起來的用戶很少?！皟赡曛?，我們可能會(huì)看到比較成功的案例，而BI與搜索的深度融合可能要在5年以后。”劉慶說。

雖然現(xiàn)有的解決方案已經(jīng)能夠支持企業(yè)對(duì)BI與搜索系統(tǒng)的同步部署，但劉慶強(qiáng)調(diào)，分步實(shí)施仍是最佳選擇?！皩?shí)施者需要協(xié)調(diào)BI和搜索的部署特性，BI項(xiàng)目強(qiáng)調(diào)以客戶應(yīng)用為中心，而搜索強(qiáng)調(diào)技術(shù)標(biāo)準(zhǔn)化，在技術(shù)融合過程中需要加以調(diào)和。同時(shí)還應(yīng)該考慮好系統(tǒng)集成之后推什么應(yīng)用，是報(bào)表還是數(shù)據(jù)鉆取?對(duì)客戶而言，現(xiàn)實(shí)的做法是先把BI系統(tǒng)做好，這樣搜索才有價(jià)值?！彼f。真正的融合應(yīng)該是無縫的，BI與搜索在現(xiàn)階段的融合表現(xiàn)顯然距離這一標(biāo)準(zhǔn)還有很大距離。

其中，結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)搜索怎樣自然結(jié)合是癥結(jié)之一。SAS的張?zhí)旆逶贐I行業(yè)擁有近15年的從業(yè)經(jīng)歷。他表示，結(jié)構(gòu)化和非結(jié)構(gòu)化信息的搜索技術(shù)是截然不同的，非結(jié)構(gòu)化搜索的技術(shù)也有進(jìn)一步的細(xì)分。非結(jié)構(gòu)化數(shù)據(jù)搜索應(yīng)該被更加準(zhǔn)確地定義為文件檢索技術(shù)，包含檢與索兩個(gè)方面。檢就是文檔歸類，在這一領(lǐng)域，SAS等廠商所提供的文本挖掘(Text Mining)技術(shù)正趨向于成熟;索就是搜索，目前最成熟的是以Google為代表的蜘蛛(Spider)技術(shù)。

“企業(yè)實(shí)施‘BI+搜索’項(xiàng)目的難點(diǎn)體現(xiàn)在，如何把兩種不同的技術(shù)自然地‘縫合’起來。開發(fā)人員必須熟練掌握這兩種技術(shù)，目前，同時(shí)掌握兩種搜索技術(shù)的人才并不多。同時(shí)，要完整呈現(xiàn)不同層面、種類的關(guān)聯(lián)信息，并做出科學(xué)的決策，這需要大量的定制開發(fā)工作，在目前的情況下實(shí)施難度還很大。這些都決定了BI與搜索結(jié)合尚不自然的現(xiàn)狀?！睆?zhí)旆逭f。

門戶當(dāng)?shù)?/STRONG>