步驟一：服務(wù)開通

本教程以華東2（上海）地域為例進行演示，請根據(jù)您華東2（上海）地域的服務(wù)開通情況，進行環(huán)境準備操作。

步驟二：為資源組開通公網(wǎng)

DataWorks已提供本案例涉及的原始數(shù)據(jù)供您體驗，并提供其公網(wǎng)訪問地址。若要在DataWorks訪問該原始測試數(shù)據(jù)并確保本次實驗可順利開展，您需要確保您的DataWorks資源組已具備公網(wǎng)訪問能力。

步驟一創(chuàng)建的通用型Serverless資源組默認不具備公網(wǎng)訪問能力，您需要通過公網(wǎng)NAT網(wǎng)關(guān)添加EIP的方式，為資源組綁定的VPC，使該資源組獲得公網(wǎng)訪問能力，具體操作參考下文。

1. 登錄專有網(wǎng)絡(luò)-公網(wǎng)NAT網(wǎng)關(guān)控制臺，在頂部菜單欄切換至華東2（上海）地域。

2. 單擊創(chuàng)建NAT網(wǎng)關(guān)，配置相關(guān)參數(shù)。

   參數(shù)	取值
   所屬地域	華東2（上海）。
   所屬專有網(wǎng)絡(luò)	選擇資源組綁定的VPC和交換機。 您可以前往DataWorks資源組列表，切換地域后，找到步驟一已創(chuàng)建的資源組，然后單擊操作列的網(wǎng)絡(luò)設(shè)置，在數(shù)據(jù)調(diào)度 & 數(shù)據(jù)集成區(qū)域查看DataWorks資源組的綁定專有網(wǎng)絡(luò)和交換機參數(shù)。VPC和交換機的更多信息，請參見什么是專有網(wǎng)絡(luò)。
   關(guān)聯(lián)交換機
   訪問模式	VPC全通模式（SNAT）。
   彈性公網(wǎng)IP	新購彈性公網(wǎng)IP。
   關(guān)聯(lián)角色創(chuàng)建	首次創(chuàng)建公網(wǎng)NAT網(wǎng)關(guān)時，需要創(chuàng)建服務(wù)關(guān)聯(lián)角色，請單擊創(chuàng)建關(guān)聯(lián)角色。

   說明

   上表中未說明的參數(shù)保持默認值即可。

3. 單擊立即購買，勾選服務(wù)協(xié)議后，單擊確認訂單，完成購買。

   

步驟三：創(chuàng)建工作空間

工作空間是DataWorks中進行任務(wù)開發(fā)和成員權(quán)限管理、協(xié)同開發(fā)的基本單元，DataWorks所有開發(fā)工作都將在工作空間內(nèi)進行，請參考以下內(nèi)容準備DataWorks工作空間，為本案例提供基本開發(fā)環(huán)境。

1. 進入工作空間列表頁。

   進入工作空間列表，在頁面頂部切換地域為華東2（上海），然后單擊創(chuàng)建工作空間。

2. 創(chuàng)建工作空間。

   請根據(jù)下圖指引自定義工作空間名稱、指定空間模式（生產(chǎn)、開發(fā)環(huán)境隔離），設(shè)置默認資源組配置為步驟一創(chuàng)建的資源組。其他參數(shù)可使用默認值或不填寫。

   重要

   DataWork工作空間名稱全網(wǎng)唯一，請勿與本教程完全一致，您可以自定義工作空間名稱或添加唯一標(biāo)識作為后綴，避免因命名沖突而報錯。

   

步驟四：創(chuàng)建并綁定MaxCompute數(shù)據(jù)源

在DataWorks數(shù)據(jù)開發(fā)中新建MaxCompute項目，并將其綁定至數(shù)據(jù)開發(fā)模塊作為數(shù)據(jù)開發(fā)計算和存儲的引擎服務(wù)，為本教程提供計算和存儲能力。

1. 前往MaxCompute數(shù)據(jù)源綁定頁。

   您可以通過多種方式進行MaxCompute數(shù)據(jù)源綁定：

   創(chuàng)建工作空間成功頁

   1. 在創(chuàng)建工作空間完成后，DataWorks會自動引導(dǎo)您綁定MaxCompute數(shù)據(jù)源，您可以單擊立即綁定。

      

   2. 在數(shù)據(jù)源頁面，單擊新建數(shù)據(jù)源，然后選擇MaxCompute。

      

   工作空間列表頁

   如果您在創(chuàng)建工作空間成功后關(guān)閉了綁定MaxCompute引導(dǎo)頁，您還可以從工作空間列表頁如下位置創(chuàng)建并綁定MaxCompute數(shù)據(jù)源。

   1. 單擊工作空間操作列的 > 創(chuàng)建數(shù)據(jù)源 > MaxCompute。

      

   2. 在數(shù)據(jù)源頁面，單擊新建數(shù)據(jù)源，然后選擇MaxCompute。

      

   數(shù)據(jù)開發(fā)模塊

   您還可以直接進入DataWorks數(shù)據(jù)開發(fā)中，手動創(chuàng)建并綁定MaxCompute數(shù)據(jù)源。

   1. 單擊工作空間操作列的快速進入 > 數(shù)據(jù)開發(fā)。

      

   2. 在左側(cè)導(dǎo)航欄單擊數(shù)據(jù)源（），然后在數(shù)據(jù)源頁面，單擊新建數(shù)據(jù)源，選擇MaxCompute。

      

2. 請根據(jù)下圖指引創(chuàng)建并綁定MaxCompute數(shù)據(jù)源。

   關(guān)鍵參數(shù)說明：

   • 本教程數(shù)據(jù)源名稱以MaxCompute_Source為例，您可以自定義。

   • 數(shù)據(jù)源創(chuàng)建方式：配置為創(chuàng)建MaxCompute項目。

   • MaxCompute項目名稱：自定義。

     重要

     MaxCompute項目名稱全網(wǎng)唯一，不允許重名，請勿與本教程完全一致，您可以自定義項目名稱或添加唯一標(biāo)識作為后綴，避免因命名沖突而報錯。

   • 計算資源付費類型配置為按量付費，然后選擇默認Quota。

     說明

     如果按量付費不可選，請單擊按量付費后的去開通，完成MaxCompute服務(wù)的開通。

   • 生產(chǎn)環(huán)境默認訪問身份配置為阿里云主賬號。

3. 單擊新建數(shù)據(jù)源并綁定數(shù)據(jù)開發(fā)。

4. 根據(jù)頁面提示，刷新數(shù)據(jù)開發(fā)數(shù)據(jù)源頁面后，即可看到已創(chuàng)建并綁定的MaxCompute數(shù)據(jù)源。

   

步驟一：流程設(shè)計

網(wǎng)站用戶行為分析案例通過DataWorks數(shù)據(jù)集成模塊的離線同步能力，將業(yè)務(wù)數(shù)據(jù)同步至MaxCompute，然后通過DataWorks數(shù)據(jù)開發(fā)（DataStudio）模塊的ODPS SQL，完成用戶畫像的數(shù)據(jù)加工，最終將加工結(jié)果寫入ads_user_info_1d表。業(yè)務(wù)數(shù)據(jù)包括：

• 存儲于MySQL中的用戶基本信息（ods_user_info_d），平臺默認提供，無需開通，將訪問信息以添加數(shù)據(jù)源的方式配置到您的空間即可在您空間下訪問這份數(shù)據(jù)。

• 存儲于OSS中的網(wǎng)站訪問日志數(shù)據(jù)（user_log.txt），平臺默認提供，無需開通，將訪問信息以添加數(shù)據(jù)源的方式配置到您的空間即可在您空間下訪問這份數(shù)據(jù)。

步驟二：任務(wù)開發(fā)

基于步驟一：流程設(shè)計，在DataWorks完成工作流的任務(wù)開發(fā)。DataWorks已提供本教程的相關(guān)代碼，您可參考以下操作通過一鍵導(dǎo)入快速體驗該案例。后續(xù)您也可參考用戶畫像分析（MaxCompute版）逐步實操進行體驗。

1. 進入ETL工作流模板頁面。

   進入ETL工作流模板，找到網(wǎng)站用戶行為分析模板，單擊查看詳情。

2. 載入模板。

   在模板詳情頁，單擊載入模板。然后根據(jù)下圖指引完成模板載入。

   

   關(guān)鍵參數(shù)說明：

   • 工作空間：選擇ETL案例模板導(dǎo)入的目標(biāo)工作空間，配置為步驟三創(chuàng)建的工作空間。

   • 數(shù)據(jù)源名稱：選擇為本教程提供計算和存儲服務(wù)的數(shù)據(jù)源，配置為步驟四創(chuàng)建并發(fā)綁定的MaxCompute數(shù)據(jù)源。

   • 調(diào)度資源組和集成資源組：選擇執(zhí)行任務(wù)同步和任務(wù)調(diào)度的資源組，配置為步驟一創(chuàng)建的資源組。

   • 載入方式：選擇當(dāng)案例包含的節(jié)點或資源已經(jīng)在該空間存在時的處理策略，保持默認即可。

   • 發(fā)布規(guī)則：選擇任務(wù)導(dǎo)入后是否直接進入生產(chǎn)調(diào)度系統(tǒng)進行每日自動調(diào)度，保持默認即可，取消選中表示僅在數(shù)據(jù)開發(fā)測試使用，不自動調(diào)度，后續(xù)您可手動發(fā)布。

3. 確認載入結(jié)果。

   在載入模板頁面，單擊確認后將自動開始載入，您可以在頁面彈窗中查看導(dǎo)入進度，所有內(nèi)容導(dǎo)入完成后，您可以單擊前往查看。

   說明

   關(guān)閉導(dǎo)入進度窗口，不會影響模板的導(dǎo)入，您可以單擊工作空間操作列的快速進入 > 數(shù)據(jù)開發(fā)前往數(shù)據(jù)開發(fā)模塊查看導(dǎo)入的模板內(nèi)容。

   

4. 查看案例介紹。

   在數(shù)據(jù)開發(fā)的業(yè)務(wù)流程下，雙擊體驗案例1_用戶行為分析，打開業(yè)務(wù)流程畫布。

   您可以雙擊畫布中業(yè)務(wù)流程的第一個節(jié)點（），查看該業(yè)務(wù)流程的案例背景和各節(jié)點加工邏輯說明等。

   說明

   • 在業(yè)務(wù)流程執(zhí)行成功前，打開離線同步任務(wù)節(jié)點會因同步目標(biāo)MaxCompute表不存在而報錯。

   • 如果業(yè)務(wù)流程畫布中顯示效果與下圖不一致，可單擊畫布中的進行格式化。

   

步驟三：任務(wù)運行

任務(wù)開發(fā)完成后，可通過以下方式確認代碼及流程是否符合預(yù)期。

1. 運行用戶畫像業(yè)務(wù)流程。

   導(dǎo)入的案例為完整案例，您可以在業(yè)務(wù)流程畫布中，單擊運行按鈕運行整個業(yè)務(wù)流程。

   

2. 查看業(yè)務(wù)流程運行過程。

   請耐心等待2~3分鐘，確保所有任務(wù)節(jié)點均運行成功（如下圖所示）后，再進行后續(xù)步驟。

   

3. 確認用戶畫像數(shù)據(jù)。

   單獨運行最后一個任務(wù)節(jié)點，即可查看最終產(chǎn)出的用戶畫像數(shù)據(jù)。

   在業(yè)務(wù)流程畫布中，雙擊業(yè)務(wù)流程中最后一個節(jié)點用戶行為分析結(jié)果查詢，進入節(jié)點詳情頁面，并按照圖示說明，單獨運行代碼，查詢ads_user_info_1d表，獲取最終的用戶畫像數(shù)據(jù)。

   說明

   • DataWorks提供調(diào)度參數(shù)，可實現(xiàn)代碼動態(tài)入?yún)ⅲ稍赟QL代碼中通過${變量名}的方式定義代碼中的變量，并在調(diào)度配置>調(diào)度參數(shù)處，為該變量賦值。調(diào)度參數(shù)支持的格式，詳情請參見調(diào)度參數(shù)支持的格式。本案例的SQL中使用了調(diào)度參數(shù)${bizdate}，表示業(yè)務(wù)日期為前一天。

   • 若查詢的分區(qū)沒有數(shù)據(jù)或報錯分區(qū)不存在，請再次執(zhí)行業(yè)務(wù)流程，并通過日志查看代碼中的${bizdate}替換情況，明確數(shù)據(jù)最終寫入的分區(qū)。

   

   運行結(jié)果示例：

   

任務(wù)運維