日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

AI 助理
備案控制臺(tái)
文檔
有獎(jiǎng)?wù){(diào)研
輸入文檔關(guān)鍵字查找
首頁(yè) 隱私增強(qiáng)計(jì)算 快速入門(mén) 步驟三：創(chuàng)建隱私計(jì)算任務(wù)并執(zhí)行 安全聯(lián)合分析TrustDA/MPCSQL

安全聯(lián)合分析TrustDA/MPCSQL

更新時(shí)間：
我的收藏

一、什么是聯(lián)合分析？

功能介紹：在原始數(shù)據(jù)不可見(jiàn)的前提下，提供SQL模式對(duì)多方數(shù)據(jù)進(jìn)行聯(lián)合分析。

image.png

二、哪些場(chǎng)景適合用聯(lián)合分析？

適用場(chǎng)景：適用于雙方數(shù)據(jù)不共享，但有一些統(tǒng)計(jì)分析的需求。例如電商平臺(tái)在媒體平臺(tái)進(jìn)行了營(yíng)銷(xiāo)廣告投放，投放結(jié)束后，電商平臺(tái)期望能聯(lián)合兩邊的數(shù)據(jù)，進(jìn)行全鏈路的營(yíng)銷(xiāo)活動(dòng)復(fù)盤(pán)分析，就可以借助聯(lián)合分析功能實(shí)現(xiàn)。

三、字段保護(hù)控制

DataTrust提供字段級(jí)別的訪問(wèn)控制，業(yè)務(wù)方可根據(jù)字段的敏感程度來(lái)配置字段的使用范圍，總共有5種字段保護(hù)等級(jí)。

字段保護(hù)等級(jí)

字段保護(hù)內(nèi)容

保護(hù)程度

不允許使用

不允許用于SQL分析，設(shè)置后該字段對(duì)合作方不可見(jiàn)

最高

只用于比較/聚合查詢

不能作為關(guān)聯(lián)鍵，不能作為分組鍵；不能查詢明細(xì)，能在比較/聚合函數(shù)中透出，

次之

用于比較/聚合查詢，可做關(guān)聯(lián)鍵

能作為關(guān)聯(lián)鍵，不能作為分組鍵；作為分組鍵時(shí)，可以查詢明細(xì)，能在比較/聚合函數(shù)中透出

次之

用于比較/聚合查詢，可做分組鍵

不能作為關(guān)聯(lián)鍵，能作為分組鍵；作為分組字段時(shí)能查詢明細(xì)，能在比較/聚合函數(shù)中透出

次之

使用無(wú)限制

任意操作；可以任意出現(xiàn)在SELECT的分析中

不保護(hù)

四、聯(lián)合分析當(dāng)前支持的SQL能力

1、支持SQL算子

實(shí)現(xiàn)了對(duì)常用算子的覆蓋，包括密文下的JOIN(LEFT/RIGHT/FULL/INNER)、GROUP BY、ORDER BY、WHERE密文比較，支持密文聚合函數(shù)(SUM/COUNT)等，支持復(fù)雜SQL嵌套查詢。

2、字段級(jí)保護(hù)設(shè)置

提供了字段級(jí)別的訪問(wèn)控制，業(yè)務(wù)方可根據(jù)字段的敏感程度來(lái)配置字段的使用范圍。

3、大數(shù)據(jù)場(chǎng)景優(yōu)化

對(duì)大數(shù)據(jù)場(chǎng)景下的分布式數(shù)據(jù)分析，進(jìn)行了優(yōu)化升級(jí)，可支持小時(shí)級(jí)10億級(jí)數(shù)據(jù)的多方聯(lián)合SQL分析，支持ODPS/FLINK計(jì)算引擎，支持常用JDBC/文件常用數(shù)據(jù)源。

五、如何進(jìn)行聯(lián)合分析

步驟一：

打開(kāi)【通用計(jì)算-合作數(shù)據(jù)】設(shè)置字段保護(hù)等級(jí)

DataTrust提供字段級(jí)別的訪問(wèn)控制，業(yè)務(wù)方可根據(jù)字段的敏感程度來(lái)配置字段的使用范圍。

image.pngimage.png

步驟二：

建立MpcPre緩存任務(wù)（單次查詢/小數(shù)據(jù)量，可以不需要）

如果數(shù)據(jù)量級(jí)超過(guò)百萬(wàn)且需要多次SQL分析，建議使用緩存以提升SQL執(zhí)行效率。

1、Alice新建MpcPre任務(wù)

Alice：在【通用計(jì)算/對(duì)應(yīng)項(xiàng)目/任務(wù)研發(fā)】，新建【TrustDA/MpcPre】任務(wù)。

image.pngimage.png

Alice：配置TrustDA/MpcPre任務(wù)。

image.png

2、審批執(zhí)行MpcPre任務(wù)

Bob：在【通用計(jì)算/對(duì)應(yīng)項(xiàng)目/審批流程】，查看并同意待審批任務(wù)。

Alice：執(zhí)行MpcPre任務(wù)，進(jìn)行預(yù)計(jì)算。

image.png

步驟三：

建立MpcSql分析任務(wù)，進(jìn)行統(tǒng)計(jì)分析，可以直接從已有任務(wù)復(fù)制

當(dāng)前，每個(gè)SQL查詢語(yǔ)句查詢，需要建一個(gè)【MpcSql分析】任務(wù)進(jìn)行查詢。

1、Alice新建MpcSql任務(wù)

Alice：在【通用計(jì)算/對(duì)應(yīng)項(xiàng)目/任務(wù)研發(fā)】，新建【TrustDA/Mpcql】任務(wù)。

image.png

2、mpcSql腳本任務(wù)配置及編寫(xiě)SQL腳本

使用緩存：這里可以選擇是否使用緩存，如果使用，則選擇步驟二中建好的緩存任務(wù)名稱，可以加快sql執(zhí)行效率。

SQL腳本編寫(xiě)：

  • 當(dāng)前支持join（inner join/full join/left join/right join)、group by 、order by、聚合（sum/count）等；

  • 當(dāng)前暫不支持在【控制臺(tái)】直接查看輸出結(jié)果，需要使用INSERT OVERWRITE TABLE 語(yǔ)句將輸出結(jié)果寫(xiě)在了輸出表中；

  • 可以使用【SQL檢查】對(duì)當(dāng)前SQL語(yǔ)句進(jìn)行安全檢查；

image.png
INSERT OVERWRITE TABLE lscc_inner_alice.sj_mpcsql_out PARTITION (job_name = 'pre_groupby_2side_count_having_count_order_test')
SELECT 
 t1.age as col2_string,
 t2.native_country as col3_string,
 count(t1.workclass) as col1_int
FROM 
 lscc_inner_alice.host_train_adult_10 t1 
JOIN
 datatrust_inner_bob.slave_train_adult_10 t2
ON 
 t1.id = t2.id
where t1.age >= 27
GROUP BY 
 t1.age,t2.native_country
order by 
 t1.age DESC

3、Bob審批Alice創(chuàng)建的MpcSql任務(wù)

Bob：在【項(xiàng)目臺(tái)/對(duì)應(yīng)項(xiàng)目/審批臺(tái)】，查看并同意待審批任務(wù)。

image.png

4、執(zhí)行任務(wù)查看結(jié)果

Alice執(zhí)行MpcSql任務(wù)，進(jìn)行統(tǒng)計(jì)分析，統(tǒng)計(jì)分析結(jié)果，在輸出表中查看。

當(dāng)前，暫不支持在【控制臺(tái)】直接查看輸出結(jié)果，需要使用INSERT OVERWRITE TABLE 語(yǔ)句將輸出結(jié)果寫(xiě)在了輸出表中，在輸出表中查看統(tǒng)計(jì)結(jié)果。