日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

文檔

使用MaxCompute獨享Tunnel進行數據同步

更新時間:

為滿足業務增長對傳輸資源的更高要求,數據集成的同步任務默認使用獨享資源組,可為您提供更好的數據同步穩定性和同步的并發數。本文為您介紹如何使用MaxCompute獨享數據傳輸資源進行數據同步。

注意事項

  • 若在配置MaxCompute數據源時配置了Tunnel Endpoint屬性,則在DataWorks上配置同步任務時,不支持指定獨享傳輸資源組,實際同步任務運行時會使用指定地址對應的傳輸資源。

  • 若同步任務需要使用獨享傳輸資源,則您在配置MaxCompute數據源時需要將ODPS Endpoint指定為包含Region的非公網地址,目前未包含Region的地址或者公網地址將不支持使用獨享傳輸資源,如下圖所示:編輯資源

  • 若配置MaxCompute數據源時,指定的ODPS Endpoint地址是跨Region的(和DataWorks不在同Region),則在配置MaxCompute同步任務時,向導模式將不支持選擇Tunnel資源組,腳本模式下配置Tunnel資源組后將不生效。

購買獨享數據傳輸資源

購買詳情請參見購買與使用獨享數據傳輸服務資源組

說明

購買獨享傳輸資源組后,需要綁定該資源組至要同步的MaxCompute項目上,如果DataWorks為標準模式工作空間,則需要分別在開發和生產環境的MaxCompute項目綁定您購買獨享傳輸資源組。詳情請參見使用獨享數據服務資源組

離線同步任務使用獨享傳輸資源

單表離線同步任務使用獨享傳輸資源

進入數據開發界面,打開或新建離線同步任務節點,在MaxCompute數據源的Tunnel資源組屬性中,選擇獨享傳輸資源組。Tunnel資源組默認值為公共傳輸資源組。tunnel資源組如果您沒有可用的獨享傳輸資源組,支持您單擊右側新購買跳轉到購買頁面選擇數據傳輸服務進行購買,您需要注意所選的區域是否符合預期。購買資源組

整庫離線同步解決方案使用獨享傳輸資源

進入同步任務,打開或新建一鍵整庫離線同步任務,在運行資源設置步驟的通道設置 > Tunnel資源組屬性中,選擇獨享傳輸資源組。整庫離線

腳本模式同步任務使用獨享傳輸資源

進入數據開發界面,打開或新建離線同步任務節點,在任務下方工具欄單擊image.png,轉換為腳本模式,配置獨享傳輸資源組,示例如下:

{
  "stepType": "odps",
  "parameter": {
    "partition": [],
    "datasource": "odps_source",
    "envType": 1,
    "tunnelQuota": "ot_****_****_****_****_****",
    "isSupportThreeModel": false,
    "column": [
      "id",
      "col1"
    ],
    "table": "test_data"
  },
  "name": "Reader",
  "category": "reader"
}

其中,tunnelQuota字段取值為MaxCompute控制臺中二級Quota的標識,詳情請參見查看Quota

image.png

更多參數字段說明,請參見附錄:腳本Demo與參數說明

實時同步任務使用獨享傳輸資源

單表實時同步任務使用獨享傳輸資源

進入數據開發,打開或創建實時同步節點,單擊MaxCompute節點,在右側彈出的節點配置面板中的Tunnel資源組屬性中,選擇獨享傳輸資源組。ETL

整庫實時同步任務使用獨享傳輸資源

進入數據開發,打開或新建整庫同步任務,在運行資源設置步驟的Tunnel資源組屬性中,選擇獨享傳輸資源組。整庫實時

一鍵實時同步解決方案使用獨享傳輸資源

進入同步任務,打開或新建一鍵實時同步任務,在運行資源設置步驟的Tunnel資源組屬性中,選擇獨享傳輸資源組。一鍵實時