同步節(jié)點(diǎn)
同步節(jié)點(diǎn)即數(shù)據(jù)傳輸節(jié)點(diǎn)。本文介紹同步節(jié)點(diǎn)的各屬性配置參數(shù)說明。
節(jié)點(diǎn)屬性
節(jié)點(diǎn)屬性用于設(shè)置同步節(jié)點(diǎn)的基本信息,關(guān)鍵參數(shù)說明如下:
參數(shù) | 說明 |
節(jié)點(diǎn)名稱 | 節(jié)點(diǎn)的名稱,支持用戶自定義。 |
節(jié)點(diǎn)標(biāo)識 | 節(jié)點(diǎn)的唯一標(biāo)識,支持用戶自定義,同一個(gè)工作組必須是唯一的,不可重復(fù)。 |
節(jié)點(diǎn)目錄 | 選擇節(jié)點(diǎn)的所屬目錄。 |
節(jié)點(diǎn)描述 | 自定義節(jié)點(diǎn)的描述信息。 |
運(yùn)行配置
運(yùn)行配置用于設(shè)置同步節(jié)點(diǎn)的云計(jì)算資源類型和輸入輸出鏈路,關(guān)鍵參數(shù)說明如下:
參數(shù) | 說明 | ||
同步資源 | 源端配置 | 開發(fā)數(shù)據(jù)源 | 開發(fā)環(huán)境中傳輸鏈路輸入端的云計(jì)算資源類型和資源。 |
邏輯表 | 輸入表的數(shù)據(jù)格式,由數(shù)據(jù)模型定義,在下拉列表中選擇,表示該計(jì)算資源中提供數(shù)據(jù)的數(shù)據(jù)表的結(jié)構(gòu)。
| ||
開發(fā)數(shù)據(jù)表 | 開發(fā)環(huán)境中源端輸入的物理表,在下拉列表中選擇。 | ||
生產(chǎn)數(shù)據(jù)源 | 生產(chǎn)環(huán)境中使用源端輸入的物理表所在資源。 | ||
生產(chǎn)數(shù)據(jù)表 | 生產(chǎn)環(huán)境中源端輸入的物理表,在下拉列表中選擇。 | ||
同步模式 |
| ||
增量字段 | 當(dāng)選擇增量時(shí),需同步選擇需要同步的增量字段。 | ||
自定義條件 | 過濾條件,例如輸入ID>12,表示將ID的值大于12的數(shù)據(jù)傳輸至目標(biāo)路徑。 說明 僅當(dāng)傳輸鏈路為ApsaraDB for RDS傳輸?shù)組axCompute時(shí),才會(huì)顯示當(dāng)前參數(shù)。 | ||
目標(biāo)端配置 | 開發(fā)目標(biāo)端 | 開發(fā)環(huán)境中傳輸鏈路輸出端的云計(jì)算資源類型。 | |
邏輯表 | 輸出表的數(shù)據(jù)格式,由數(shù)據(jù)模型定義,在下拉列表中選擇,表示該計(jì)算資源中輸出數(shù)據(jù)的數(shù)據(jù)表的結(jié)構(gòu)。
| ||
開發(fā)數(shù)據(jù)表 | 開發(fā)環(huán)境中目標(biāo)端輸出的物理表,在下拉列表中選擇。 | ||
生產(chǎn)目標(biāo)端 | 生產(chǎn)環(huán)境中使用目標(biāo)端輸出的物理表所在資源。 | ||
生產(chǎn)數(shù)據(jù)表 | 生產(chǎn)環(huán)境中目標(biāo)端輸出使用的物理表。 | ||
分區(qū)字段 | 當(dāng)選擇的物理表是分區(qū)表時(shí),會(huì)自動(dòng)識別出分區(qū)字段,并展示出來,用于設(shè)置分區(qū)的值。 | ||
寫入處理規(guī)則 |
說明 僅當(dāng)傳輸鏈路為ApsaraDB for RDS傳輸?shù)組axCompute時(shí),才會(huì)顯示當(dāng)前參數(shù)。 | ||
字段映射 | 同名映射 | 單擊同名映射,則數(shù)據(jù)傳輸時(shí),將源端表中數(shù)據(jù)傳輸至目標(biāo)端表相同名稱的字段中。 | |
同行映射 | 單擊同行映射,則數(shù)據(jù)傳輸時(shí),源端和目標(biāo)端表的同行字段映射。 | ||
取消映射 | 取消設(shè)置的字段映射關(guān)系。 | ||
通用參數(shù) | 依賴配置 | 當(dāng)同步節(jié)點(diǎn)存在依賴關(guān)系時(shí),打開依賴配置的開關(guān),單擊右側(cè)的添加依賴節(jié)點(diǎn),設(shè)置依賴節(jié)點(diǎn)的信息。
| |
表結(jié)構(gòu)變化 | 當(dāng)選中開啟檢測復(fù)選框后,以天為單位,進(jìn)行數(shù)據(jù)源端表結(jié)構(gòu)檢測。若發(fā)現(xiàn)表結(jié)構(gòu)變更,則進(jìn)行異常推送。異常信息可在“運(yùn)維監(jiān)控 - 全景監(jiān)控”中查看。 | ||
開發(fā)資源組 | 測試時(shí)使用的資源組,支持選擇用戶自有的資源。 | ||
生產(chǎn)資源組 | 正式環(huán)境使用的資源組,支持選擇用戶自有的資源。 | ||
資源規(guī)格 | VCPU(核) | CPU配置,根據(jù)實(shí)際填寫。 | |
內(nèi)存(M) | 內(nèi)存配置,可根據(jù)實(shí)際配置。 | ||
速率 | 字節(jié)/秒 | 每個(gè)通道每秒傳輸?shù)淖止?jié)上限。 | |
記錄/條 | 每個(gè)通道每秒傳輸?shù)挠涗洈?shù)上限。 |
調(diào)度配置
調(diào)度配置屬性作用于同步節(jié)點(diǎn)生產(chǎn)環(huán)境場景的調(diào)度周期和告警等參數(shù),關(guān)鍵參數(shù)說明如下:
參數(shù) | 說明 | |
周期調(diào)度 | 依賴本節(jié)點(diǎn)上一周期調(diào)度 | 選中后,則本次的調(diào)度依賴本節(jié)點(diǎn)上一周期調(diào)度的結(jié)果。 |
生效日期 | 該節(jié)點(diǎn)周期調(diào)度的有效時(shí)間段,設(shè)置后該節(jié)點(diǎn)在設(shè)置的日期內(nèi)自動(dòng)調(diào)度。用戶可自定義選擇起始時(shí)間和結(jié)束時(shí)間。
| |
調(diào)度周期 | 支持按月、周、天、小時(shí)和分鐘調(diào)度。 | |
具體時(shí)間 | 根據(jù)選擇的周期客戶自定義具體開始和結(jié)束的時(shí)間。 | |
時(shí)間表達(dá)式 | 根據(jù)上述的設(shè)置,自動(dòng)生成時(shí)間表達(dá)式或者支持手動(dòng)設(shè)置時(shí)間表達(dá)式。 | |
失敗重試 | 重試次數(shù) | 單擊失敗重試后的開關(guān),設(shè)置生產(chǎn)環(huán)境場景運(yùn)行失敗后重新運(yùn)行的次數(shù)。 |
重試間隔 | 設(shè)置每兩次重試之間的間隔時(shí)間。 | |
超時(shí)時(shí)間 | 重新運(yùn)行的超時(shí)時(shí)間設(shè)置,即超過這個(gè)時(shí)間則重新運(yùn)行一次。 | |
監(jiān)控配置 | 負(fù)責(zé)人 | 告警接收負(fù)責(zé)人。默認(rèn)為當(dāng)前工作組的登錄賬號,當(dāng)在全景監(jiān)控設(shè)置責(zé)任人后可下拉選擇,具體操作,請參見新建人員。 |
告警分組 | 告警的組別分類。下拉選擇已創(chuàng)建的分組,具體操作,請參見新建告警分組。 | |
告警級別 | 告警的級別,分為異常和超時(shí)等。 |