文件管理
Flink工作空間支持全托管存儲(chǔ)和綁定OSS Bucket兩種存儲(chǔ)類型(在開通時(shí)選擇)。本文為您介紹不同存儲(chǔ)類型下文件管理的使用方法。
使用限制
目前僅北京、上海、杭州和深圳地域開放全托管存儲(chǔ)。
查看存儲(chǔ)類型
單擊目標(biāo)工作空間操作列下的
,查看存儲(chǔ)類型。存儲(chǔ)類型
圖示
OSS Bucket
目錄說明
當(dāng)您在開通Flink工作空間時(shí)存儲(chǔ)類型選擇為OSS Bucket,F(xiàn)link將會(huì)在該Bucket中創(chuàng)建以下目錄存放相關(guān)文件。
目錄 | 內(nèi)容 |
artifacts | 上傳的JAR包和附加依賴、Python文件和依賴都會(huì)被存儲(chǔ)到該目錄。 |
sql-artifacts | 注冊自定義函數(shù)和連接器所依賴的文件會(huì)被存儲(chǔ)到該目錄。 |
flink-jobs | Flink作業(yè)的HA(High Available)信息和系統(tǒng)檢查點(diǎn)信息會(huì)被存儲(chǔ)到該目錄。 |
flink-savepoints | 在實(shí)時(shí)計(jì)算開發(fā)控制臺(tái)上單擊創(chuàng)建快照,最終生成的快照文件會(huì)被存儲(chǔ)到該目錄。 |
flink-sessionclusters | Session集群的HA信息和系統(tǒng)檢查點(diǎn)信息會(huì)被存儲(chǔ)到該目錄。 |
plan | 使用專家模式時(shí),配置的資源信息會(huì)被存儲(chǔ)到該目錄。 |
logs | 如果您將作業(yè)的日志配置輸出到OSS,則日志會(huì)被存儲(chǔ)到該目錄。 |
文件管理
單擊目標(biāo)工作空間操作列下的控制臺(tái)。
在左側(cè)導(dǎo)航欄,單擊文件管理,您可以進(jìn)行如下操作。
上傳資源:單擊上傳資源后選擇本地文件上傳資源,或者直接將待上傳文件拖拽到資源列表區(qū)域。
上傳后,文件路徑格式為
oss://<您綁定的OSS Bucket名稱>/artifacts/namespaces/<項(xiàng)目空間名稱>/<文件名>
,您可以單擊文件名稱復(fù)制路徑。下載資源:單擊操作列的下載,可以將OSS Bucket的文件下載到本地進(jìn)行查看。
刪除資源:單擊操作列的刪除,可以將OSS Bucket的文件直接刪除。
對(duì)于OSS Bucket存儲(chǔ)方式,您在此只能上傳、下載和刪除artifacts目錄的文件。
全托管存儲(chǔ)
單擊目標(biāo)工作空間操作列下的控制臺(tái)。
在左側(cè)導(dǎo)航欄,單擊文件管理。
單擊相應(yīng)的頁簽進(jìn)行相關(guān)操作。
頁簽
說明
資源文件
上傳作業(yè)資源,例如開發(fā)的作業(yè)文件、作業(yè)需要的相關(guān)數(shù)據(jù)文件或注冊自定義函數(shù)和連接器所依賴的文件等。
上傳后,文件路徑格式為
oss://flink-fullymanaged-<工作空間ID>/artifacts/namespaces/<項(xiàng)目空間名>/<文件名>
。作業(yè)狀態(tài)
展示作業(yè)運(yùn)行生成的系統(tǒng)檢查點(diǎn)及作業(yè)快照文件、HA文件的大小和修改時(shí)間等信息。您可以單擊作業(yè)名稱跳轉(zhuǎn)到狀態(tài)集管理中進(jìn)行配置和查看。
作業(yè)日志
展示作業(yè)運(yùn)行生成的TaskManagers和JobManagers日志文件的大小和修改時(shí)間等信息。您可以單擊作業(yè)名稱跳轉(zhuǎn)到作業(yè)日志頁簽查看日志詳情。
編譯文件
展示作業(yè)運(yùn)行生成的執(zhí)行計(jì)劃和Job Graph文件的大小和修改時(shí)間等信息。您可以單擊作業(yè)名稱跳轉(zhuǎn)到部署詳情頁簽查看具體的執(zhí)行計(jì)劃和Job Graph。
其他
其他類型的文件。
相關(guān)文檔
SQL作業(yè)、JAR作業(yè)和Python作業(yè)部署操作,詳情請參見部署作業(yè)。
查看正在運(yùn)行作業(yè)的詳細(xì)日志信息,詳情請參見查看啟動(dòng)和運(yùn)行日志。
查看作業(yè)系統(tǒng)檢查點(diǎn)和作業(yè)快照信息,詳情請參見作業(yè)狀態(tài)集管理。