功能描述

在獲得用戶授權的前提下，視頻人臉融合可以精準地定位視頻中的人臉，將用戶上傳的目標人臉照片與另一個人的人臉形象進行面部融合，達到換臉的感官效果。

模板視頻人臉融合是基于用戶預先上傳創建的模版，通過輸入一張待融合人臉圖像，將圖像人臉融合進指定的模板視頻中。使用該方式需要提前創建好模板視頻（AddFaceVideoTemplate），其處理效率高于通用視頻人臉融合方式。

適用場景：

• 有固定數量的模板視頻進行融合的場景。
• 同時支持視頻中有一張臉和多張臉的場景，支持選臉和多臉融合。

為保證生成內容的安全合法，請勿使用公眾人物或涉及敏感信息的圖像或視頻進行融合，同時，本服務也會在合成結果的左下角處添加Generated by AI的水印內容，效果如下圖所示。

應用場景

• 影視后期制作：在影視后期制作時，因為某些原因需要替換演員，通過視頻人臉融合技術，可利用前期拍攝素材進行處理，讓前期視頻素材中的人物看起來是新的演員在表演，可以為制片方節省大量的重新拍攝成本。
• 娛樂性短視頻制作：用戶可以將已獲授權的合法視頻中的人物，換成自己的人臉，生成趣味性視頻。
• 虛擬試衣制作：在婚紗攝影、民族服飾、漢服、仿妝等試衣場景，通過視頻人臉融合技術進行服飾虛擬試穿。
• 電商數字人直播：在電商賣貨帶貨直播場景，通過網紅臉ID換臉實現數字人直播帶貨、虛擬人換臉。

特色優勢

• 高保真、低違和效果：融合后的人臉保留了替換者人臉身份信息的視覺特征，而融入被替換者人臉中又無違和感，融合效果自然。
• 表情膚色一致性：融合后的人臉最大限度保留被替換者的面目表情、膚色一致性。
• 支持復雜人臉角度：支持模板人臉偏側一定角度，融合后的結果真實穩定。
• 支持多人臉指定換臉：支持視頻中含有多張人臉，并指定每個臉與不同的用戶臉進行融合，可應用在全家福、婚紗攝影、多人角色創作等多人互動場景。

接入指引

1. 注冊阿里云賬號：打開阿里云官網，在阿里云官網右上角，單擊立即注冊，按照操作提示完成賬號注冊。

2. 開通能力：請確保您已開通視頻生產服務，若未開通服務請立即開通。本能力僅限企業認證用戶開通。實名認證操作方法請參見實名認證。

3. 創建AccessKey：請確保您已創建AccessKey，如果您使用的是子賬號AccessKey，您需要給子賬號賦予AliyunVIAPIFullAccess權限，具體操作，請參見RAM授權。

4. 在線調試（可選）：您可以通過OpenAPI Explorer在線調試能力，查看完整的調用示例代碼及SDK依賴信息，也可以下載完整的工程。

5. 前提條件：先通過視頻人臉融合模板增加接口（AddFaceVideoTemplate）添加視頻模板獲取模板ID（TemplateId），再使用已上傳視頻對應的模板ID和待融合人臉圖像進行請求。

6. 開發接入步驟：

• 在SDK總覽中選擇您要接入使用的SDK語言。
• 在對應語言的SDK文檔中找到AI類目為視頻生產（videoenhan）類目的SDK包進行安裝。
• 參考文檔中提供的示例代碼進行適當修改后調用。

7. 示例代碼：該能力常用語言的示例代碼，請參見模板視頻人臉融合示例代碼。

8. 客戶端直接調用：該能力常用的客戶端調用方式包括以下幾種。

• Web前端直接調用
• 小程序場景下直接調用
• Android端直接調用
• iOS端直接調用

輸入限制

• 圖像格式：JPEG、JPG、PNG。
• 圖像分辨率：大于等于128×128像素，小于等于4000×4000像素。
• 圖像大小：不大于20 MB。
• URL地址不能包含中文字符。

入參說明

MergeInfos指融合參數，模板視頻的人臉信息及待融合的用戶人臉圖片（TemplateId為多人臉時不可為空）。

• MergeInfos僅為多人視頻場景時使用，需確保用戶添加模板時VideoScene參數傳入了multi值，其中傳入的TemplateFaceID需要與添加模版時返回的FaceInfos里的TemplateFaceID一一對應。
• 同時傳入FaceImageURL和MergeInfos，以TemplateId為單/多人臉為準，過濾另一個入參。

圖像質量建議

• 要求保證圖像中的人臉清晰。圖像中人臉尺寸建議大于64×64像素，人臉區域建議不大于全圖區域的2/3。
• 建議圖像中人臉五官區域輪廓完整，無明顯遮擋。人臉融合算法支持人臉偏側一定角度，在偏側角度不超過30度的情況下能取得更佳效果。
• 對于多人臉視頻場景，系統會自動識別出整個視頻中的不同人物ID，建議視頻中的人物不要出現角度過大的轉動以及明顯遮擋的情況，否則識別出的人物ID個數可能不準確。

推薦圖像示例：

不推薦圖像示例：

調用步驟

該能力為異步能力，需分兩步進行調用。

第一步調用MergeVideoModelFace接口提交任務，請求成功后，得到一個任務ID。

第二步調用GetAsyncJobResult接口查詢結果，根據任務ID查詢任務執行狀態和結果。如果任務還在處理中，可稍等一段時間后再進行查詢。

計費說明

關于模板視頻人臉融合的計費方式及報價，請參見計費介紹。

請求參數

返回數據

查詢結果

該接口為異步接口，當前并未返回真實的請求結果，您需要通過返回的RequestId調用GetAsyncJobResult接口來獲取該接口的真實請求結果。詳情請參見GetAsyncJobResult。

SDK參考

阿里云視覺AI視頻生產類目下的模板視頻人臉融合能力推薦使用SDK調用，支持多種編程語言，調用時請選擇AI類目為視頻生產（videoenhan）的SDK包，文件參數通過SDK調用可支持本地文件及任意URL，具體可參見SDK總覽。

示例代碼

該能力常用語言的示例代碼，請參見模板視頻人臉融合示例代碼。

示例

請求示例

http(s)://videoenhan.cn-shanghai.aliyuncs.com/?Action=MergeVideoModelFace      //更多關于訪問域名（Endpoint）信息，請參見：http://m.bestwisewords.com/document_detail/143103.html
&TemplateId=3bf2418c-7adf-4002-a9d6-2f7cf1889c0d
&FaceImageURL=http://viapi-test.oss-cn-shanghai.aliyuncs.com/viapi-3.0domepic/videoenhan/MergeVideoFace/MergeVideoFace-xxxx.png
&AddWatermark=true
&Enhance=true
&WatermarkType=EN
&MergeInfos=[{"TemplateFaceID":"f913c614-d542-42ba-b173-07db2058c207_0","TemplateFaceURL":"http://viapi-test.oss-cn-shanghai.aliyuncs.com/viapi-/videoenhan/MergeVideoModelFace/xxx.jpg","ImageURL":"http://viapi-test.oss-cn-shanghai.aliyuncs.com/test-team/MergeVideoModelFace/xxx.jpg"}]
&公共請求參數

正常返回示例

XML格式

HTTP/1.1 200 OK
Content-Type:application/xml

<MergeVideoModelFaceResponse>
    <RequestId>334F180F-3B50-51CB-B4CB-9A86A542D3BC</RequestId>
    <Message>該調用為異步調用，任務已提交成功，請以requestId的值作為jobId參數調用同類目下GetAsyncJobResult接口查詢任務執行狀態和結果。</Message>
</MergeVideoModelFaceResponse>

JSON格式

HTTP/1.1 200 OK
Content-Type:application/json

{
  "RequestId" : "334F180F-3B50-51CB-B4CB-9A86A542D3BC",
  "Message" : "該調用為異步調用，任務已提交成功，請以requestId的值作為jobId參數調用同類目下GetAsyncJobResult接口查詢任務執行狀態和結果。"
}

返回示例補充說明

//查詢結果：請求示例
http(s)://videoenhan.cn-shanghai.aliyuncs.com/?Action=GetAsyncJobResult
&JobId=E75FE679-0303-4DD1-8252-1143B4FA8A27
&<公共請求參數>

//查詢結果：返回示例
{
  "RequestId" : "43A0AEB6-45F4-4138-8E89-E1A5D63200E3",
  "Data" : {
    "Status" : "PROCESS_SUCCESS",
    "JobId" : "186AC396-0EEC-46F1-AAA1-BF3585227427",
    "Result" : "{\"VideoURL\":\"http://vibktprfx-prod-prod-aic-gd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-face-fusion/334F180F-3B50-51CB-B4CB-9A86A542D3BC-5716-20210906-074905.mp4?Expires=1630916420&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=OEtNqVYxXRwkyO4BrsYVJ8q5bx****\"}"
  }
}

//Result反序列化
{
  "VideoURL" : "http://vibktprfx-prod-prod-aic-gd-cn-shanghai.oss-cn-shanghai.aliyuncs.com/video-face-fusion/334F180F-3B50-51CB-B4CB-9A86A542D3BC-5716-20210906-074905.mp4?Expires=1630916420&OSSAccessKeyId=LTAI4FoLmvQ9urWXgSRp****&Signature=OEtNqVYxXRwkyO4BrsYVJ8q5bx****"
}

錯誤碼

關于模板視頻人臉融合的錯誤碼，詳情請參見常見錯誤碼。

安全聲明

• 請確保上傳的圖片或文件來源符合相應的法律法規。
• 通過體驗調試上傳的臨時文件有效期為1小時，在24小時后會被系統自動清理刪除。