規則配置流程

您可基于表配置單個表的數據質量監控規則，也可基于模板，批量配置多個表的數據質量監控規則，具體如下。

• 基于表配置數據質量監控規則（單個配置監控規則）

  按表配置質量規則主要流程如下：

  1. 選擇待配置規則校驗的表。

  2. 為表創建質量監控。

     以校驗的表的具體數據范圍為對象（如分區表的具體分區），通過質量規則關聯質量監控的方式，定義對象數據需要進行哪些質量規則校驗。

     • 可新建多個質量監控校驗同一張表的不同分區，每個質量監控關聯不同的質量規則，達到同一張表不同分區數據質量校驗邏輯不同的目的。

     • 定義質量監控的觸發方式，即是否在調度節點運行時觸發規則校驗，還是需要手動觸發才會進行該表質量校驗。

     • 定義何種情況下需要發送告警信息，您可根據數據校驗結果異常等級自行決定何種異常需要發送告警信息。當表數據變更自動進行數據質量規則校驗時，您可根據數據異常程度決定是否需要阻塞任務執行。

  3. 配置數據質量規則添加到質量監控中。

     以質量監控中需要校驗的表為對象，定義該表數據質量校驗規則的校驗方式。通過數據質量規則定義對該表數據的具體校驗方式，從而確定該表數據是否符合預期。

     數據質量監控規則包括基于模板創建的系統模板規則，以及可自定義SQL邏輯的自定義模板規則。其中：

     • 系統模板規則：可通過DataWorks提供的內置規則模板創建規則。

     • 自定義模板規則：若系統內置規則模板無法滿足您對分區表達式中數據質量的監控需求，則可使用自定義規則模板。您也可以將常用的自定義規則固化為規則模板，便于后續快速復用。

  4. 測試及訂閱質量監控。

  具體配置操作，詳情請參見配置規則：按表（單表）。

• 基于模板配置數據質量監控規則（批量配置監控規則）

  按模板配置質量規則的主要流程如下：

  1. 選擇規則模板并配置校驗方式。

     內置模板分為表級和字段級的模板規則，選擇模板后，以待校驗的表為對象，定義該表數據質量校驗規則的校驗方式。通過數據質量規則定義對該表數據的具體校驗方式，從而確定表數據是否符合預期。

  2. 批量添加需要規則校驗的表或字段

     選擇待批量校驗的表或字段，將規則模板應用到目標表上。

  3. 新建或關聯質量監控

     以校驗的表的具體數據范圍為對象（如分區表的具體分區），通過質量規則關聯質量監控的方式，定義對象數據需要進行哪些質量規則校驗。

  具體配置操作，詳情請參見配置規則：按模板（批量）。

進入規則列表

1. 進入數據質量頁面。

   登錄DataWorks控制臺，切換至目標地域后，單擊左側導航欄的數據建模與開發 > 數據質量，在下拉框中選擇對應工作空間后單擊進入數據質量。

2. 在左側導航欄選擇質量資產 > 規則列表，進入數據質量監控規則列表頁面。

查看規則列表