利用異動資料擷取改善累加式載入

什麼是異動資料擷取？

來源資料表會隨著時間變更。以這些資料表為基礎的資料超市或資料倉儲必須反映這些變更。不過，定期複製完整來源之快照集的程序會耗費太多時間和資源。包括時間戳記資料行、觸發程序或複雜查詢的替代方式通常有損效能並增加複雜度。需要的是變更資料結構化的可靠資料流，讓消費者可以將其輕鬆地套用到資料的目標表示法。SQL Server 中的異動資料擷取會提供這個解決方案。

Database Engine 的異動資料擷取功能會擷取套用到 SQL Server 資料表的插入、更新與刪除活動，並以容易取用的關聯式格式，提供變更的詳細資料。異動資料擷取所使用的變更資料表包含鏡像追蹤來源資料表之資料行結構的資料行，以及了解逐資料列發生之變更所需的中繼資料。

**如需詳細資訊，請參閱：**＜異動資料擷取＞

異動資料擷取在 Integration Services 中的運作方式

Integration Services 封裝可以輕易地在 SQL Server 資料庫中收集變更資料，以便在資料倉儲中執行有效的累加式載入。不過，在您可以使用 Integration Services 載入變更資料前，管理員必須在您要擷取變更的資料庫和資料表上啟用異動資料擷取。如需有關如何在資料庫上設定異動資料擷取的詳細資訊，請參閱＜設定異動資料擷取＞。

一旦管理員已經在資料庫上啟用異動資料擷取，您就可以建立執行累加式變更資料載入的封裝。下圖顯示建立可從單一資料表執行累加式載入這種封裝的步驟：

如上圖所示，建立可執行累加式變更資料載入的封裝包含下列步驟：

• 步驟 1：設計控制流程
  在封裝的控制流程中，必須定義下列工作：

  • 針對您要擷取的來源資料，計算變更間隔的開始和結束 datetime 值。

    若要計算這些值，請搭配 datetime 函數使用「執行 SQL」工作或 Integration Services 運算式。然後您可以用封裝變數儲存這些端點，以便稍後在封裝中使用。

    **如需詳細資訊，請參閱：**＜指定變更資料的間隔＞

  • 判斷所選間隔的變更資料是否就緒。由於非同步的擷取程序可能還沒有達到所選的端點，因此這是必要的步驟。

    若要判斷資料是否就緒，如果必要，開始使用「For 迴圈」容器延遲執行，直到所選間隔的變更資料就緒為止。在迴圈容器內部，使用「執行 SQL」工作查詢由異動資料擷取所維護的時間對應資料表。然後，使用呼叫 Thread.Sleep 方法的「指令碼」工作，或搭配 WAITFOR 陳述式使用另一個「執行 SQL」工作，暫時延遲封裝的執行 (如有必要)。或者，使用其他「指令碼」工作記錄錯誤條件或逾時。

    **如需詳細資訊，請參閱：**＜判斷變更資料是否就緒＞

  • 準備將用於查詢變更資料的查詢字串。

    使用「指令碼」工作或「執行 SQL」工作來組合將用於查詢變更的 SQL 陳述式。

    **如需詳細資訊，請參閱：**＜準備查詢變更資料＞

• 步驟 2：設定異動資料的查詢
  建立將會查詢資料的資料表值函式。

  使用 SQL Server Management Studio 來開發及儲存查詢。

  **如需詳細資訊，請參閱：**＜擷取與了解變更資料＞

• 步驟 3：設計資料流程
  在封裝的資料流程中，必須定義下列工作：

  • 從變更資料表擷取變更資料。

    若要擷取資料，使用來源元件來查詢所選間隔內之變更的變更資料表。此來源會呼叫您必須在先前已經建立的 Transact-SQL 資料表值函式。

    **如需詳細資訊，請參閱：**＜擷取與了解變更資料＞

  • 將變更分割為要處理的插入、更新與刪除。

    若要分割變更，使用「條件式分割」轉換，將插入、更新與刪除導引到不同的輸出以便進行適當的處理。

    **如需詳細資訊，請參閱：**＜處理插入、更新與刪除＞

  • 將插入、刪除與更新套用到目的地。

    若要將變更套用到目的地，請使用目的地元件，將插入套用到目的地。同時，搭配參數化的 UPDATE 和 DELETE 陳述式使用「OLE DB 命令」轉換，將更新與刪除套用到目的地。您也可以使用目的地元件來套用更新與刪除，以便將資料列儲存到暫存資料表中。接著，使用「執行 SQL」工作，根據暫存資料表的目的地，執行大量更新與大量刪除作業。

    **如需詳細資訊，請參閱：**＜將變更套用到目的地＞

使用多個資料表的變更資料

檢視完整的異動資料擷取封裝

Integration Services 提供兩個範例，可示範如何在封裝中使用異動資料擷取。如需詳細資訊，請參閱下列主題：

• 讀我檔案_指定之間隔的異動資料擷取封裝範例

• 讀我檔案_自上次要求後的異動資料擷取封裝範例

外部資源

sqlblog.com 上的部落格文章：SSIS 設計模式 - 累加式載入, on