管理數(shù)據(jù)加工任務(wù)
本文中含有需要您注意的重要提示信息,忽略該信息可能對您的業(yè)務(wù)造成影響,請務(wù)必仔細(xì)閱讀。
本文介紹如何在日志服務(wù)控制臺上管理數(shù)據(jù)加工任務(wù),包括查看任務(wù)詳情與狀態(tài),修改、啟動、停止和刪除任務(wù),設(shè)置告警等操作。
查看任務(wù)詳情
登錄日志服務(wù)控制臺。
在Project列表區(qū)域,單擊目標(biāo)Project。
在左側(cè)導(dǎo)航欄中,選擇
。在加工任務(wù)列表中,單擊目標(biāo)加工任務(wù)。
在數(shù)據(jù)加工概覽頁面,查看加工任務(wù)詳情。
配置項
說明
源日志庫
進(jìn)行數(shù)據(jù)加工的Logstore。
狀態(tài)
數(shù)據(jù)加工任務(wù)的狀態(tài)。更多信息,請參見查看任務(wù)狀態(tài)。
任務(wù)ID
數(shù)據(jù)加工任務(wù)ID。
時間范圍
創(chuàng)建數(shù)據(jù)加工任務(wù)時,設(shè)置的數(shù)據(jù)加工時間范圍。
任務(wù)創(chuàng)建時間
創(chuàng)建數(shù)據(jù)加工規(guī)則的時間。
任務(wù)修改時間
修改數(shù)據(jù)加工規(guī)則的時間。
任務(wù)結(jié)束時間
數(shù)據(jù)加工任務(wù)的結(jié)束時間。
說明如果您在創(chuàng)建加工任務(wù)時沒有指定加工的結(jié)束時間,則此處顯示為空。
存儲目標(biāo)
包括目標(biāo)名稱、用于存儲數(shù)據(jù)加工結(jié)果的目標(biāo)Project名稱和目標(biāo)Logstore名稱。
消費進(jìn)度
數(shù)據(jù)加工任務(wù)讀取源Logstore日志數(shù)據(jù)的消費進(jìn)度。
執(zhí)行狀態(tài)
默認(rèn)創(chuàng)建的數(shù)據(jù)加工規(guī)則執(zhí)行數(shù)據(jù)指標(biāo)的儀表盤,包括總覽指標(biāo)、加工速率指標(biāo)、消費延遲指標(biāo)、消費速率指標(biāo)、活躍Shard指標(biāo)、異常情況。更多信息,請參見數(shù)據(jù)加工儀表盤。
查看任務(wù)狀態(tài)
您可以在數(shù)據(jù)加工概覽頁面查看任務(wù)運(yùn)行狀態(tài)。任務(wù)運(yùn)行狀態(tài)以及不同狀態(tài)下支持的操作如下:
狀態(tài)\操作 | 停止 | 啟動 | 重新執(zhí)行 | 修改 | 刪除 |
啟動中 | 不支持 | 不支持 | 不支持 | 支持 | 支持 |
運(yùn)行中 | 支持 | 不支持 | 支持 | 支持 | 支持 |
停止中 | 不支持 | 不支持 | 不支持 | 支持 | 支持 |
已終止 | 不支持 | 支持 | 支持 | 支持 | 支持 |
成功 | 不支持 | 不支持 | 支持 | 支持 | 支持 |
失敗 | 不支持 | 不支持 | 支持 | 支持 | 支持 |
停止任務(wù)
對于狀態(tài)為運(yùn)行中的任務(wù),在數(shù)據(jù)加工概覽頁面,選擇
。停止任務(wù)會保存當(dāng)前的加工位置,如果任務(wù)再次啟動會從停止的位置繼續(xù)加工。如果需要從配置的時間范圍重新開始執(zhí)行,請參見重新執(zhí)行。
啟動任務(wù)
對于狀態(tài)為已終止的任務(wù),在數(shù)據(jù)加工概覽頁面,單擊啟動。
重新執(zhí)行
在任何狀態(tài)的任務(wù)都支持重新執(zhí)行。在數(shù)據(jù)加工概覽頁面,選擇
。重新執(zhí)行不是從之前加工結(jié)束的位置繼續(xù)運(yùn)行,而是從頭開始執(zhí)行。如果希望從之前結(jié)束的位置繼續(xù)加工,請先停止任務(wù),然后再啟動任務(wù)。
修改加工規(guī)則
修改加工規(guī)則之后:
如果您希望使用新的加工規(guī)則繼續(xù)加工,可以先停止任務(wù),然后再啟動任務(wù)。
如果您希望使用新的加工規(guī)則重新進(jìn)行數(shù)據(jù)加工,請參見重新執(zhí)行。
在數(shù)據(jù)加工概覽頁面,單擊修改規(guī)則。
根據(jù)需求,修改數(shù)據(jù)加工規(guī)則。
關(guān)于規(guī)則語法的更多信息,請參見數(shù)據(jù)加工語法。
預(yù)覽數(shù)據(jù)。
單擊快速。
日志服務(wù)支持快速預(yù)覽和高級預(yù)覽。更多信息,請參見預(yù)覽調(diào)試概述。
單擊預(yù)覽數(shù)據(jù)。
查看預(yù)覽結(jié)果。
如果加工規(guī)則語法錯誤或者權(quán)限配置錯誤,導(dǎo)致數(shù)據(jù)加工失敗,請根據(jù)頁面提示處理。
如果確認(rèn)數(shù)據(jù)加工結(jié)果無誤,請執(zhí)行步驟4。
單擊修改加工配置。
修改數(shù)據(jù)加工配置,然后單擊確定。
相關(guān)參數(shù)說明,請參見創(chuàng)建數(shù)據(jù)加工任務(wù)。
刪除任務(wù)
刪除數(shù)據(jù)加工任務(wù)后,不可恢復(fù),請謹(jǐn)慎刪除。
如果您要刪除數(shù)據(jù)加工任務(wù),請參見如下方法。
在數(shù)據(jù)加工列表中,選擇目標(biāo)加工任務(wù)后的
,刪除當(dāng)前任務(wù)。在數(shù)據(jù)加工概覽頁面,選擇
。
設(shè)置告警
日志服務(wù)提供數(shù)據(jù)加工任務(wù)運(yùn)行指標(biāo)的數(shù)據(jù)加工診斷儀表盤,您可以隨時查看加工任務(wù)的運(yùn)行指標(biāo)信息,還可以訂閱儀表盤,針對儀表盤中的指標(biāo)信息設(shè)置告警監(jiān)控。更多信息,請參見為數(shù)據(jù)加工任務(wù)開啟監(jiān)控告警。