受經濟危機的影響,BI(商業(yè)智能)市場增速放緩。不過在云計算、數(shù)據管理的融合趨勢,以及開源浪潮的影響之下,BI開始釋放出嶄新的活力與激情。未來十年,變革與創(chuàng)新有望締造一個全新的BI世界。
經濟危機對于各個IT領域造成的影響不盡相同。一方面,緊縮的IT預算反而激發(fā)了一些與管理、自動化相關的IT需求;但另一方面,包括BI在內,一些與業(yè)務數(shù)據深度挖掘與處理的需求開始放緩。據Gartner
在2010年4月發(fā)布的《2009年全球市場份額:商業(yè)智能、分析和績效管理軟件》調查報告顯示,與2008年相比,整個BI市場規(guī)模在2009年增長了4.2%,達到近93億美元。其中,BI平臺占全球BI軟件收入的64.2%,全面績效管理(CPM)套件占20.8%的比例,而分析應用和績效管理軟件各占了總市場的15%。而在2009年,SAP依然占據全球BI市場的頭把交椅,其BI軟件總收入約為21億美元。
Gartner認為,2009年BI市場增幅與2008年相比明顯下降的事實表明,BI市場尚未擺脫經濟危機所帶來的負面影響。雖然BI是企業(yè)常用的IT工具之一,但保持兩位數(shù)強勢增長的歲月可能一去不復返了。剖析BI市場增長放緩的原因,該領域近期發(fā)生的連續(xù)并購、技術的成熟,以及因充分競爭導致的價格下降,應是造成這一局面的主要原因。但是作為一個持續(xù)穩(wěn)步成長的市場,BI本身仍蘊含著強大的更新與延展能力。尤其是在技術創(chuàng)新方面,伴隨著整體IT技術的演進,BI不斷探索新的發(fā)展空間。與此同時,該領域內高密度的大額并購(重要的收購事件包括甲骨文收購Hyperion,IBM收購Cognos和SPSS,以及SAP收購Sybase),賦予了BI在產品及解決方案層面廣闊的縱向擴展空間。此外,在大型BI供應商巨型的身影之下,還游弋著許多技術創(chuàng)新和產品差異化的機會,等待新興BI廠商捕捉。
成熟并不代表著老去,也不意味著止步不前。事實上,BI技術仍然擁有向前演進的澎湃動力,而它每一次的創(chuàng)新步伐都與IT產業(yè)的整體推進密不可分。
BI新趨勢1:SaaS BI的崛起
2010年2月,BI市場的老大SAP推出了SaaS BI解決方案——SAP BusinessObjects BI OnDemand。該產品能與Salesforce.com的CRM緊密集成,對用戶的CRM數(shù)據進行分析和挖掘。SAP BusinessObjects BI
OnDemand面向中小企業(yè)用戶,以及大企業(yè)中偶有簡單BI需求業(yè)務人員,具有快速部署、簡單易用等特點。價格方面,該產品提供了相對靈活的定價模式,包含個人免費版、基本版和高級版三個版本。在歐洲,其基本版和高級版的定價分別為每用戶每月20歐元和60歐元。
SAP用實際行動吹響了主流傳統(tǒng)BI供應商投身SaaS BI這一新興市場的號角。在此之前,該領域只聚集了小規(guī)模的新興公司,例如Birst、PivotLink、Good Data、Indicee等。讓人有些遺憾的是,SaaS BI市場的開拓者之一LucidEra公司,已經在2009年6月宣布停止運營,相繼退出該市場的還有BlinkLogic等公司。這證明了新生市場競爭的殘酷性。在從傳統(tǒng)BI廠商遺留的市場空間中奪取可觀收入的同時,新生代之間原始而殘酷的競爭讓人窒息。
好在這段混沌時期已經過去,SaaS BI的投資價值和市場可見度顯著增加。從一定意義上講,2010年是SaaSBI與本地運行的傳統(tǒng)BI開始抗衡、并躋身主流應用的元年。從產品的功能性角度分析,SaaS BI工具提供了令人稱道的可用性、協(xié)作性和易用性,讓用戶在不借助過多IT支持的情況下,輕松使用BI功能。此舉有望大幅擴充BI的使用群體。傳統(tǒng)的BI工具太過昂貴,且使用過程復雜,IT部門往往只針對關鍵業(yè)務部門的領導層及企業(yè)決策層定制開發(fā)報表分析等應用,大多數(shù)的業(yè)務員工被排除在BI用戶群體之外。
在現(xiàn)階段,用戶如果使用SaaS BI,通常需要先把數(shù)據按照約定格式上傳給服務商,由服務商使用合適的數(shù)據建模處理數(shù)據,生成一個Web界面,用戶可以以此為基礎進行查詢等操作,或者生成報表或儀表盤。不同廠商提供的SaaS BI服務存在功能上的差別,有些服務支持隨機查詢,有些服務則支持其他SaaS應用(例如Salesforce.com的CRM應用)利用BI的計算結果。還有一些更為專業(yè)的廠商,提供諸如數(shù)據集成、ETL(數(shù)據抽取/轉換/加載)等服務。就目前的SaaS BI服務模式而言,用戶業(yè)務數(shù)據的安全性與集成的準確度是用戶近期關心的熱點問題,也是SaaS BI服務供應商需要重點改進與完善的領域。
BI新趨勢2:向云遷移
SaaS BI的流行可以看作是BI向云遷移的一個步驟或環(huán)節(jié)。雖然不同的BI供應商的說法有所區(qū)別,但向SaaS的轉型和向云的遷移在方向上是基本一致的。雖然在目前,大多數(shù)的機構都是在內部解決BI問題,但是在未來的三年中,這一狀況有望徹底改觀。
一項在2010年5月進行的CIO調查發(fā)現(xiàn),約有五分之一(23%)的受訪者預計,云或SaaS(軟件即服務)將在三年內成為其主要的BI解決方案。這比當前7%的水平有了大幅度提升。此項調查涉及335位在企業(yè)內部使用BI和分析工具的CIO。其中,無線聯(lián)網服務商Enfora公司的CIO Steve Pike表示,其所在的公司已經將客戶服務和支持遷移到了基于云的解決方案中。“遷移過程很簡單,而且平臺的敏捷性很高。你可以迅速看到成果,并且使用其中的信息。”他說。
不過,盡管云BI解決方案的潛力巨大,但企業(yè)內部的BI解決方案仍然占據著支配地位。調查還顯示,有93%的受訪問者仍在使用企業(yè)內部的BI工具,而且有77%的受訪者預計,將在未來的1~3年中繼續(xù)使用內部BI工具。也有企業(yè)的CIO堅稱,將繼續(xù)沿用內部解決方案。他們給出的理由是,企業(yè)擁有太多的異構系統(tǒng),要想部署云會非常困難。
基于云的BI要完全替代傳統(tǒng)BI還要假以時日,但云計算在全球的盛行,必將對BI向云的遷移進程產生積極的影響。有分析人士指出,BI領域內充分的競爭導致了價格的下降,這也意味著該領域的參與者正面臨更為激烈的競爭局面。云的重要性已經能夠影響到BI廠商未來的生存。從一定意義上說,只有產品是面向云規(guī)模架構設計、并符合云運營模式的廠商才能在未來取得成功。因為在云的運營模式下,每增加一個客戶廠商所付出的成本趨近于零,這無疑將為BI供應商帶來豐厚的收益。
數(shù)據質量、數(shù)據集成和數(shù)據虛擬化將與主數(shù)據管理融合,構成處理結構化數(shù)據和非結構化數(shù)據的統(tǒng)一信息管理平臺。眾所周知,數(shù)據質量自數(shù)據管理系統(tǒng)出現(xiàn)以來,一直是IT系統(tǒng)的一大痛處。它困擾著許多企業(yè)的CIO和IT人員,造成系統(tǒng)部署、生產力和時間成本上的巨大損失。從技術的發(fā)展趨勢上分析,數(shù)據質量和數(shù)據集成將實現(xiàn)更為緊密的整合,從而在底層解決數(shù)據質量的問題,讓正確、純凈的數(shù)據進入應用的下游。
SAP BusinessObjects、SAS、Informatica及Talend等公司目前都可以在某種程度上提供上述能力。此外,由于企業(yè)中的數(shù)據源呈現(xiàn)爆炸式增長,為了能夠把所有數(shù)據源集成到單一物理位置,并保持存取的靈活性,Composite等廠商為客戶提供數(shù)據虛擬化能力。借助這種能力,規(guī)范的信息模型可以覆蓋在信息資產的頂部,不管這些信息資產位于何處,規(guī)范的信息模型都能夠處理批量、實時和事件數(shù)據源組合。這些全異的數(shù)據源必須通過主數(shù)據管理能力來協(xié)調。通過這種能力,客戶、供應商、產品等企業(yè)中的關鍵實現(xiàn)定義可以被用于提供這些分散的數(shù)據源之上的語義統(tǒng)一。最后,結構化、半結構化和非結構化的信息,都能利用文本分析能力和數(shù)據虛擬化技術,從一個無處不在的信息管理平臺實現(xiàn)數(shù)據的提取、轉換、加載與查詢。
BI世界醞釀融合的另一趨勢是,有越來越多的數(shù)據挖掘、預測分析能力被引入到數(shù)據庫系統(tǒng)之中。回顧歷史,雖然以分析為中心的OLAP(聯(lián)機分析處理)數(shù)據庫已經問世幾十年(以甲骨文Express、Hyperion
Essbase和微軟的Analysis Services為代表),但是它們從未在數(shù)據庫市場真正占據統(tǒng)治地位。過去的數(shù)十年,RDBMS(關系型數(shù)據庫管理系統(tǒng))一直是市場的主宰,應用的類型似乎并不重要,關系型數(shù)據庫才是核心與關鍵。然而,在今天的海量數(shù)據時代,傳統(tǒng)數(shù)據管理的顛覆與變革已經無法回避。Google(BigTable)、Yahoo(Hadoop)、Amazon(Dynamo)、Facebook(Cassandra)等大型Web廠商紛紛自行開發(fā)解決方案,以處理由互聯(lián)網應用產生的海量數(shù)據。另一方面,專注于分析性工作負載的數(shù)據庫產品正在形成集群效應。掌握內存處理、利用并行機制、柱狀存儲選擇等創(chuàng)新技術的Netezza、Greenplum、Vertica、Aster Data等新興廠商不斷發(fā)展壯大。
在這些新的數(shù)據庫產品的引擎中,具備了可編程性和并行處理能力。這種可編程能力讓開發(fā)人員能夠將計算遷移到數(shù)據庫或數(shù)據倉庫內部,避免了因數(shù)據遷移所造成的響應緩慢問題。另外,配合并行、大規(guī)模并行處理(MPP)架構的性能和擴展性優(yōu)勢,用戶可以獲得高吞吐零,以及用于欺詐探測、風險管理等目的的運營分析能力。其中,Netezza為用戶提供軟硬一體的數(shù)據倉庫設備。對于BI的開發(fā)者而言,基于這一整合環(huán)境無需進行系統(tǒng)配置和物理建模,無需鉆研數(shù)據模型,即可執(zhí)行數(shù)據分析任務。Greenplum和Aster Data同樣是MPP數(shù)據倉庫市場的生力軍。其技術都基于MapReduce并行處理框架,后者是谷歌用于實現(xiàn)索引和搜索擴展性的技術。MapReduce是一個開源的Apache Hadoop項目,它是Hbase開源、分布式、列存儲數(shù)據庫系統(tǒng)的基礎。
采用本地運行模式的傳統(tǒng)BI面臨的不僅面臨著云或SaaS應用模式的沖擊,開源BI同樣也是一個關鍵的顛覆者。開源BI的開發(fā)者希望改寫閉源、傳統(tǒng)BI占統(tǒng)治地位的市場格局,而他們已經在這條道路上付出了長期的努力。
經濟危機及其引發(fā)的持續(xù)經濟低迷,為開源BI提供了發(fā)展的良機。面對緊縮的IT預算,很多企業(yè)發(fā)現(xiàn),基于開源BI的數(shù)據分析、報表制作或數(shù)據集成,能夠讓它們以有限的資金高效率地解決實際問題。這也正是Pentaho、JasperSoft等公司近年來以遠超過行業(yè)平均值的增長速度發(fā)展壯大的原因所在。
借助開源BI解決方案,用戶可以以構建傳統(tǒng)BI應用幾分之一的費用搭建完整到端到端BI棧,而這種選擇還可以獲得良好的自上而下的采用率。這應該是企業(yè)應對嚴酷經濟形勢的一種生存之道。而在端到端的BI棧中,很多產品已經達到或接近了閉源BI工具的應用成熟度水平。在報表、OLAP、數(shù)據統(tǒng)計、數(shù)據質量、數(shù)據集成、主數(shù)據管理等領域,企業(yè)用戶均可以找到經濟、高效的開源BI工具(市場上主要開源BI工具如附表所示)。
更廣闊的BI世界
本報記者 于翔
數(shù)據的爆炸式增長,以及針對海量數(shù)據的分析需求,讓BI的市場版圖持續(xù)擴充,并將由此導致整個技術疆界的再定義。今天,電子郵件、文檔、視頻等半結構化和非結構化數(shù)據被納入到BI的勢力范圍中,同時自助式報表和混搭應用變得更加普及,BI將從一種IT活動演變?yōu)橐环N受到業(yè)務用戶驅動而演進的應用方式。
在互聯(lián)網時代,其海量數(shù)據多向交互的特性有望激發(fā)更多的BI技術創(chuàng)新,云BI、混搭和高級可視化技術已經出現(xiàn),并積極融入主流的BI應用之中。而數(shù)據量級的增長速度是十分驚人的。TB字已經是過去式,PB字節(jié)即將成為主流,而EB(Exabytes)和ZB(Zettabytes)字節(jié)也開始出現(xiàn)了。面對如此龐大的數(shù)據量,機構必須嘗試全新的處理技術,例如專用設備、柱狀數(shù)據庫和Hadoop這樣的分布式應用。
另外,BI技術的演進并非僅駐留在內部數(shù)據中心或云端,移動分析也是一個重要的發(fā)展方向。2010年,全球移動用戶數(shù)量已經突破50億。目前,領先的商業(yè)BI廠商紛紛涉足移動分析市場?;谝苿覤I技術,用戶可以通過智能手機提交數(shù)據,并獲取分析報告。而具備了GPS功能的智能手機還能夠將“位置”信息引入BI,為數(shù)據分析增加了新的維度。