基于MaxCompute的數據倉庫能力,您可以與阿里云其他產品集成,實現可視化開發、數據存儲、數據遷移、機器學習、業務決策等能力,構建滿足實際業務需求的解決方案。本文為您介紹支持與MaxCompute集成的各阿里云產品信息。
MaxCompute支持集成的阿里云產品如下。
阿里云產品 | 說明 |
DataWorks是基于MaxCompute計算和存儲,提供工作流可視化開發、調度運維托管的一站式海量數據離線加工分析平臺。您可以將DataWorks理解為MaxCompute的一種Web客戶端,MaxCompute是DataWorks的一種計算引擎。 MaxCompute和DataWorks提供完善的ETL、數據分析、數據地圖、數據治理和數據倉庫管理能力,并支持SQL、MapReduce、Graph等多種經典的分布式計算模型,能夠更快速地解決用戶海量數據計算問題,有效降低企業成本,保障數據安全。 更多DataWorks信息,請參見DataWorks。 | |
MaxCompute可以通過數據集成功能加載不同數據源(例如MySQL數據庫)的數據,也可以通過數據集成把MaxCompute的數據導出到各種業務數據庫。 數據集成功能已集成在DataWorks上,您可以直接在DataWorks上配置MaxCompute數據源并讀寫MaxCompute表。更多操作請參見配置MaxCompute數據源、讀取MaxCompute表和寫入MaxCompute表。 更多數據集成信息,請參見數據集成。 | |
人工智能平臺 PAI是基于MaxCompute的一款機器學習算法平臺,實現了數據無需搬遷,便可進行從數據處理、模型訓練、服務部署到預測的一站式機器學習。您創建MaxCompute項目并開通機器學習服務后,即可通過機器學習平臺的算法組件對MaxCompute數據進行模型訓練等操作。 更多人工智能平臺 PAI信息,請參見機器學習PAI。 | |
Hologres是一站式實時數據倉庫引擎,支持海量數據實時寫入、實時更新、實時分析,支持標準SQL(兼容PostgreSQL協議),支持PB級數據多維分析(OLAP)與即席分析(Ad Hoc),支持高并發低延遲的在線數據服務(Serving),與MaxCompute深度融合,提供離線實時一體化全棧數倉解決方案。更多操作請參見 Hologres外部表。 更多實時數倉Hologres信息,請參見實時數倉Hologres | |
Quick BI是一個專為云上用戶量身打造的新一代智能BI服務平臺。在MaxCompute上對數據進行加工處理后,您可以將MaxCompute項目添加為Quick BI數據源,即可在Quick BI頁面制作報表,對MaxCompute表數據進行可視化分析。 更多Quick BI信息,請參見Quick BI。 | |
云原生數據倉庫 AnalyticDB MySQL 版(AnalyticDB for MySQL)是海量數據實時高并發在線分析(Realtime OLAP)云計算服務,與MaxCompute結合應用于大數據驅動業務系統的場景。通過MaxCompute離線計算挖掘,產出高質量數據后,導入分析型數據庫,供業務系統調用分析。 將MaxCompute數據導入AnalyticDB for MySQL,有如下兩種方式:
更多AnalyticDB for MySQL信息,請參見云原生數據倉庫 AnalyticDB MySQL 版。 | |
表格存儲是構建在阿里云飛天分布式系統之上的分布式NoSQL數據存儲服務,MaxCompute 2.0支持直接通過外部表方式訪問表格存儲中的表數據并進行處理,詳情請參見Tablestore外部表。 更多表格存儲信息,請參見表格存儲。 | |
對象存儲OSS是海量、安全、低成本、高可靠的云存儲服務,MaxCompute 2.0支持直接通過外部表方式訪問對象存儲中的表數據并進行處理,詳情請參見OSS外部表。 更多OSS信息,請參見對象存儲OSS。 | |
開放搜索OpenSearch是一款阿里云自主研發的大規模分布式搜索引擎平臺。您通過MaxCompute對數據進行計算處理后,可以在OpenSearch平臺上通過添加數據源的方式將MaxCompute數據接入,詳情請參見MaxCompute數據源配置。 更多OpenSearch信息,請參見開放搜索OpenSearch。 | |
移動數據分析Quick A+ Digital Analytics是阿里云推出的一款移動App數據統計分析產品,為開發者提供一站式數據化運營服務。當移動數據分析自帶的基礎分析報表不能滿足App開發者的個性化需求時,App開發者可以將數據一鍵同步至MaxCompute,結合自己的業務需求來進一步加工、分析數據。 更多Quick A+ Digital Analytics信息,請參見移動數據分析Quick A+ Digital Analytics。 | |
日志服務SLS能快速完成日志類數據采集、消費、投遞以及查詢分析等操作。日志數據采集后,需要更多的個性化分析、挖掘,您可以通過DataWorks的數據集成將日志服務數據同步到MaxCompute,通過MaxCompute對日志數據進行個性化、深層次的數據分析、挖掘。 更多SLS信息,請參見日志服務SLS。 | |
RAM是阿里云為客戶提供的用戶身份管理與資源訪問控制服務。MaxCompute與RAM的集成使用主要有兩個場景:
|
阿里云產品支持的字符集
在同時使用MaxCompute和阿里云其他產品過程中,需要關注字符集格式,確保滿足MaxCompute字符集格式要求,避免因使用了不支持的字符集導致產品無法正常使用。
產品名稱 | 支持的字符集 |
MaxCompute | UTF-8 |
DataWorks | 在DataStudio中進行數據上傳,支持UTF-8、GBK、CP936、ISO-8859,但在DataWorks中會統一為UTF-8。數據下載支持UTF-8、GBK。 |
數據集成 | |
實時數倉Hologres | UTF-8 |
人工智能平臺 PAI | UTF-8 |
Quick BI | UTF-8 |
AnalyticDB for MySQL | UTF-8 |
表格存儲 | UTF-8 |
對象存儲OSS | UTF-8 |
開放搜索OpenSearch | UTF-8 |
移動數據分析Quick A+ Digital Analytics | UTF-8 |
日志服務SLS | UTF-8 |
訪問控制RAM | 不涉及 |