資料倉庫的索引是個棘手的問題。如果索引太多,資料插入很快但是查詢響應就會很慢。如果太多索引,資料導入就很慢并且資料存儲空間更大,但是查詢響應更快。資料庫中索引的作用就是加快查詢速度,不論是傳統資料庫還是資料倉庫。尤其是對于大資料量的表以及設計表連接配接的複雜查詢。之前接觸資料倉庫比較少,這裡隻是介紹一點小經驗。
當然,在建立資料倉庫索引的時候需要考慮一些參數比如資料倉庫類型、次元表和事實表大小、是否分區、是否AD hoc等等。這些參數決定了你的索引結構。本篇主要介紹如何對資料倉庫中的關系表建立索引,注意是在關系資料庫中的關系表,而不是SSAS中的資料表。
如果打算在次元表的主鍵上建立索引,而該鍵是一個代理鍵,不是一個自然或者業務鍵(例如使用者名稱或者ID)。注意不要在次元表的代理鍵或者變現漸變的列上建立聚集索引。
次元表包含一個自然或者業務鍵(例如交易編碼或者ID),我們稱之為業務鍵是來自于業務系統的。盡管業務鍵可能不是唯一的,但是對于緩慢漸變的次元表而言,在辨別列上建立索引是比較好的(如使用者ID等),如下圖:

使用者和産品的次元表中聚集索引建立在業務鍵上,通過這樣的索引,能強化查詢速度尤其是where語句中使用了這些鍵的。通常where 表達式中經常會使用這個鍵值來查詢次元資料。
通過業務鍵建立聚集索引可以避免鎖更新(例如,行鎖到表鎖,意圖排它到排它),因為在ETL過程中如果代理鍵上有非聚集索引并且所有的行都被添加到檔案末尾就有可能發生鎖更新,如果排它鎖從行鎖更新到表鎖,那麼就會引起其他讀取或者ETL或者通用操作的阻塞甚至死鎖,最終程式timeout。
在上圖中,Date次元和Time次元有沒外部的資料源或者業務鍵。考慮使用YYYYMMDD 和HHMMSSSSS 格式作為兩個表的主鍵,并建立聚集索引。這個值保證了索引順序,在事實表中也簡化了範圍查詢,并且這個鍵值也包含了日期或者時間,不再需要具體時間。
對于大型的緩慢漸變次元表(例如這裡需要鍵入新的資料),或許可以建立一個由四部分組成的非聚集索引包括業務鍵、記錄開始時間、記錄結束時間和代理鍵。為了效率并且阻止存儲增大,使用Include來包含記錄結束時間和代理鍵,如下所示:
這個索引在ETL的過程中對于曆史資料的查詢和操作是很有效的,通過非聚集索引減少列進而減少了沒必要的存儲空間。關系資料庫引擎能直接從索引擷取資料而不需要直接通路次元資料,減少了IO提高了查詢速度。
如果在次元表中有其他用于查詢、排序、分組的列,也可以建立非聚集索引,就如同你在事務性資料庫中一樣。如果在次元表中有一個嵌入層級,例如類-子類-産品ID的層級關系在産品次元表中,考慮在層次結構的鍵值上建立索引,會顯著提高資料查詢并且不會影響資料導入。
與在次元表建索引相似,當然需要考慮分區等條件。可以在日期列或者混合日期+時間的列上建立聚集索引。因為BI分析總是會使用日期/時間元件,事實表包含date或者datetime列,并且這裡使用聚集索引會幫助建構cube。也因為這個原因,資料記錄也是按照date或者datetime的順序存儲。對于曆史的查詢是有其優勢的。如果事實表有多個這樣的列,那就需要在查詢或者建構cube最為頻繁的列上建立索引。
如果在date列上分區,可以使用聚集索引在該列上。當發現用來建立分區和聚集索引在同一列上并且在儲存分區事實表的檔案組上建立了索引,那麼SQLServer 将自動用事實表分區來分區索引(例如,索引會有和事實表相同的的分區函數和列)。當索引按照事實表分區後,這個表和他的索引自動對齊,尤其當你建立分區或者頻繁切換分區開關時,這樣就友善的多了。
下一步,建立非聚集索引在每個事實表的外鍵上,并且考慮混合外鍵和日期鍵,如圖1所示可以見建立類似用CustomerKEY + DateKEY 的索引。使用相同的外鍵值查詢将帶有時間排序,這回提高查詢速度。注意,處理外鍵時要考慮保持關系完整性。
随着時間變化,資料倉庫會發生改變來适應組織結構的變化,并且必須要改變索引結構。大多數資料倉庫或者BI系統是直接連接配接關系表的,是以可以使用經過關系表調優的方法進行索引修改,例如評估查詢和資料混合來相應地調整索引。如果關系資料倉庫隻用來表現SSAS結構,那麼可能不需要我們之前讨論的索引。SSAS更傾向于反複使用相同的查詢,是以可以使用索引優化向導或者對查詢進行精确調優。開始單純嚴謹徹底地評估以便在資料倉庫中建立索引。
本篇隻是簡單介紹了一般資料倉庫的關系資料表如何建立索引,但是很多時候要根據實際請款來建立索引,甚至有時候不能使用索引。兼顧消耗和時間效率等多個方面,還是要不斷通過生産環境的要求來變化的。