產(chǎn)品架構(gòu)
智能媒體管理圍繞海量數(shù)據(jù)、端云拉通、標(biāo)準(zhǔn)統(tǒng)一、智能分析、場(chǎng)景結(jié)合及一鍵處理六個(gè)關(guān)鍵點(diǎn)，采用分層架構(gòu)進(jìn)行設(shè)計(jì)。該分層架構(gòu)由處理引擎、元數(shù)據(jù)管理和場(chǎng)景化封裝三層構(gòu)成。
智能媒體管理采用分層架構(gòu)進(jìn)行設(shè)計(jì)，該架構(gòu)包含處理引擎、元數(shù)據(jù)管理和場(chǎng)景化封裝三層，并且存在依賴關(guān)系的上下層應(yīng)用及場(chǎng)景，如下圖所示。
對(duì)下依賴對(duì)象存儲(chǔ)、文件存儲(chǔ)等阿里云存儲(chǔ)服務(wù)，通過安全的機(jī)制訪問阿里云存儲(chǔ)中的非結(jié)構(gòu)化數(shù)據(jù)（例如圖片、視頻），提取有價(jià)值的信息。
對(duì)上基于場(chǎng)景理解進(jìn)行封裝，支撐網(wǎng)盤、云相冊(cè)、社交圖庫(kù)、家庭監(jiān)控等圖片和視頻應(yīng)用場(chǎng)景，為應(yīng)用提供新的價(jià)值。
處理引擎層
基于阿里云存儲(chǔ)提供就近構(gòu)建計(jì)算框架，該框架支持批量異步處理、實(shí)時(shí)同步處理，在一鍵關(guān)聯(lián)阿里云存儲(chǔ)（例如指定OSS Bucket的目錄前綴、指定OSS Bucket的某個(gè)對(duì)象）后，實(shí)現(xiàn)快速的自動(dòng)數(shù)據(jù)處理，通過整合業(yè)界先進(jìn)的數(shù)據(jù)處理算法，目前處理引擎層提供如下功能：
文檔格式轉(zhuǎn)換
支持將包括OFFICE在內(nèi)的48種格式的文檔轉(zhuǎn)換為JPG、PNG、PDF、TXT、VECTOR 5種格式，可用于網(wǎng)盤文檔瀏覽等場(chǎng)景。
內(nèi)容識(shí)別
識(shí)別圖片中場(chǎng)景、物體、事件等信息，實(shí)現(xiàn)圖片的自動(dòng)打標(biāo)，可用于圖片內(nèi)容審核、圖片檢索等場(chǎng)景。
人臉檢測(cè)
檢測(cè)圖片中的人臉以及人的年齡、性別、心情等，可用于相冊(cè)分類等場(chǎng)景。
二維碼檢測(cè)
檢測(cè)圖片中的二維碼以及二維碼中存儲(chǔ)的內(nèi)容，可以判斷圖片中是否含有二維碼信息，輸出二維碼包含的信息，可用于圖像內(nèi)容審核等場(chǎng)景。
人體檢測(cè)
檢測(cè)圖片中的人體區(qū)域和置信度，可用于異常行為檢測(cè)等場(chǎng)景。
人臉?biāo)阉?/p>
搜索與指定圖片最相似的前N張圖片，結(jié)果按相似度降序排列，可用于會(huì)員管理、相冊(cè)分類、目標(biāo)人員搜索等場(chǎng)景。
人臉對(duì)比
比較兩張圖片中分別最大的兩個(gè)人臉的相似度，可用于身份識(shí)別驗(yàn)證等場(chǎng)景。
圖片盲水印
為圖片添加圖片或文字類型的盲水印。盲水印添加后，在圖片中不能直接看到該水印，但是可以通過使用智能媒體管理的解析圖片盲水印功能恢復(fù)圖中隱藏的水印，可用于圖片版權(quán)追溯等場(chǎng)景。
元數(shù)據(jù)管理層
基于處理引擎層提供的功能，通過對(duì)場(chǎng)景的深入理解和梳理，智能媒體管理封裝了場(chǎng)景的元數(shù)據(jù)設(shè)計(jì)，對(duì)外提供場(chǎng)景的元數(shù)據(jù)訪問接口，簡(jiǎn)化場(chǎng)景應(yīng)用的設(shè)計(jì)難度、無需關(guān)注元數(shù)據(jù)索引數(shù)據(jù)庫(kù)的運(yùn)維工作，目前支持的元數(shù)據(jù)索引如下：
人臉聚類索引
構(gòu)建元數(shù)據(jù)集合，然后調(diào)用人臉分組的索引接口分析圖片，將得到的元數(shù)據(jù)加入到該元數(shù)據(jù)集合中，從而可以得到該集合中相似的人臉。通過該索引，可以快速的支撐網(wǎng)盤的人臉相冊(cè)、家庭監(jiān)控的陌生人檢測(cè)、新零售的顧客管理等場(chǎng)景。
標(biāo)簽分組索引
構(gòu)建元數(shù)據(jù)集合，然后調(diào)用標(biāo)簽分組的索引接口分析圖片，將得到的元數(shù)據(jù)加入到該元數(shù)據(jù)集合中，從而可以根據(jù)標(biāo)簽搜索圖片。通過該索引，可以快速的支撐網(wǎng)盤的場(chǎng)景相冊(cè)、家庭監(jiān)控的寵物跟蹤、低俗圖片等標(biāo)簽的搜索。
場(chǎng)景封裝層
通過阿里云對(duì)場(chǎng)景的支撐，把處理引擎層和元數(shù)據(jù)管理層的功能進(jìn)行包裝，并按照資源包方式提供出來，從而簡(jiǎn)化使用，方便應(yīng)用快速的接入，實(shí)現(xiàn)AI和場(chǎng)景的緊密結(jié)合，目前支持的場(chǎng)景實(shí)例如下：
文檔標(biāo)準(zhǔn)型
將文檔相關(guān)的格式轉(zhuǎn)換和預(yù)覽整合，快速實(shí)現(xiàn)文檔的智能管理能力。
圖片標(biāo)準(zhǔn)型
將內(nèi)容識(shí)別、人臉檢測(cè)等AI功能整合，快速實(shí)現(xiàn)圖片的智能管理能力。