在許多行業(yè)中,成功企業(yè)都是那些能運用客戶與商業(yè)數(shù)據(jù)來支持實時決策的公司。分析數(shù)據(jù)所獲得的洞見是商業(yè)智能的基礎(chǔ),而商業(yè)智能則是競爭力的來源。
以金融及保險服務(wù)業(yè)為例,其將歷史性與外部數(shù)據(jù)整合在一起,能立即評估出客戶的終生價值;無線通訊業(yè),則運用詳細的客戶通話紀錄,來評估新的計費方案;零售業(yè)使用客戶與存貨數(shù)據(jù),達到更有效的行銷、交叉銷售,且讓貨架上擺滿客戶所要的貨品。這類相關(guān)的例子可以說是不勝枚舉。
近來,因為存儲設(shè)備成本降低,企業(yè)開始考慮永久儲存其所有數(shù)據(jù),認為深度的歷史數(shù)據(jù),在時機來臨時,可產(chǎn)生前所未有的商業(yè)智能與其它益處。
但如果企業(yè)未仔細思考數(shù)據(jù)儲存容量的選擇,將可能導(dǎo)致系統(tǒng)運算效能降低,進而影響實時決策的制定以及策略方案的推行。然而,策略行動也許會失敗,其原因可能是決策不夠?qū)崟r,或是管理階層錯認為自己對外部挑戰(zhàn)與公司的能力有完整的了解。既使策略行動勉強持續(xù),往往需要花費眾多人力,來調(diào)整容量不適合公司商業(yè)需求的系統(tǒng),這樣不僅成本高昂也會令人感到挫敗。
錯以每個Megabyte的成本為重心
由于詳細通聯(lián)記錄、交易數(shù)據(jù)與網(wǎng)絡(luò)點選流等數(shù)據(jù)的快速增加,企業(yè)的數(shù)據(jù)每8個月就增加一倍。可想而知,采用數(shù)據(jù)倉庫的企業(yè)會以每Megabyte的成本作為比較標準,選擇成本最低的數(shù)據(jù)儲存系統(tǒng)。廠商也提供超高容量的硬盤,滿足企業(yè)日漸增加的數(shù)據(jù)需求,進一步刺激了此方式的發(fā)展。
但是,如果I/O的速度固定----I/O速度的增加不像儲存容量提升一樣快,增加硬盤的容量,只會讓極需實時決策的企業(yè)難以快速存取數(shù)據(jù)。在這樣的情況下,選擇大容量所節(jié)省的成本則失去其意義,因為花了數(shù)百萬美元的新系統(tǒng)無法快速存取數(shù)據(jù),便無法達到原有的功效。
當然,除了磁盤容量之外,企業(yè)還有其它方式來解決效能的問題,例如分割、壓縮、先后順序排程、查詢最佳化與進階索引(advancedindexing)等,都能提供有效的協(xié)助。但若能搭配符合企業(yè)策略目標、運算能力與數(shù)據(jù)溫度的儲存功能,上述技術(shù)便能發(fā)揮更大的效力。
多重溫度的數(shù)據(jù)倉儲
要了解數(shù)據(jù)倉庫的儲存需求,必須先了解多溫度數(shù)據(jù)倉庫的概念。幾乎在所有數(shù)據(jù)倉庫系統(tǒng)中,數(shù)據(jù)具有不同的溫度。溫度高的數(shù)據(jù)是最近、最常用的數(shù)據(jù),同時擁有許多使用者及應(yīng)用程序進行存取多種應(yīng)用。
隨著需求降低,數(shù)據(jù)的溫度也降低。溫度較低的數(shù)據(jù)是歷史數(shù)據(jù),占據(jù)的數(shù)據(jù)倉庫容量比較熱的數(shù)據(jù)還大。但溫度低的數(shù)據(jù)偶爾會回溫。例如,健康保險公司也許需要產(chǎn)生好幾年的紀錄,證實公司如何保護病人的隱私。
考量數(shù)據(jù)溫度的容量規(guī)劃
在了解多重溫度數(shù)據(jù)后,企業(yè)可以進行容量的規(guī)劃,其中要測量的項目包含:數(shù)據(jù)的匯總溫度、系統(tǒng)容量、系統(tǒng)效能的需求與能力。此規(guī)劃過程需要商業(yè)與IT專業(yè)人員緊密合作,確保IT人員了解各種數(shù)據(jù)日后可能的使用方式。
第一步是依據(jù)數(shù)據(jù)的存取頻率與大小,將數(shù)據(jù)分類。企業(yè)一開始可將數(shù)據(jù)分類為主要策略數(shù)據(jù)、目前決策支持數(shù)據(jù)或歷史性決策支持數(shù)據(jù),最后再決定各類別的數(shù)據(jù)溫度(測量數(shù)據(jù)溫度的公式也包含了數(shù)據(jù)查詢、更新與維護的效能需求)。
接下來,企業(yè)必須決定各類別數(shù)據(jù)的容量與效能需求,進而決定系統(tǒng)的需求。若采用較小的數(shù)據(jù)倉庫來儲存溫度高的數(shù)據(jù),目標則是兼顧成本與效能,讓系統(tǒng)能提供支持重要決策的實時商業(yè)智能。大多數(shù)的企業(yè)會采用目前市場上最小的磁盤(如36GB,15KRPMdisks)與RAID-1備份系統(tǒng)。
相對地,如果大部分儲存溫度低數(shù)據(jù)的數(shù)據(jù)倉庫,就比較不需要高效能,企業(yè)可以選擇更高的單位容量(如73GB或146GB磁盤)。也有些數(shù)據(jù)倉庫所儲存的數(shù)據(jù)在溫度上較平均,但不論是何種情形,在選擇磁盤容量大小時,必須先測量各類數(shù)據(jù)的溫度,并且找到一個匯總溫度。
做個有數(shù)據(jù)智能的人
總而言之,數(shù)據(jù)倉庫所含的數(shù)據(jù),其價值在于其可支持決策的功能,特別是現(xiàn)今商業(yè)環(huán)境中重要的實時決策。商業(yè)與技術(shù)的合作,再加上了解多重溫度數(shù)據(jù)倉庫的概念,是數(shù)據(jù)倉庫是否能發(fā)揮應(yīng)有功效的關(guān)鍵所在。