日本熟妇hd丰满老熟妇,中文字幕一区二区三区在线不卡 ,亚洲成片在线观看,免费女同在线一区二区

AI 助理
備案控制臺
文檔
產品文檔
輸入文檔關鍵字查找
首頁 開源大數據平臺 E-MapReduce EMR on ECS 操作指南 組件操作 Hive EMR Hive功能增強

EMR Hive功能增強

更新時間：
一鍵部署
產品詳情
相關技術圈
我的收藏

本文為您介紹E-MapReduce（簡稱EMR）各版本對應的Hive組件版本，以及各版本中Hive相對開源增強的功能。

Hive針對開源功能增強的功能如下表。

EMR-5.x系列

EMR版本

組件版本

功能增強

EMR-5.12.1

Hive 3.1.3

Hive warehouse支持默認使用OSS-HDFS存儲。

EMR-5.9.0

Hive 3.1.3

支持開啟Kerberos身份認證。

EMR-5.8.0

Hive 3.1.2

支持一鍵對接LDAP。

EMR-5.6.0

Hive 3.1.2

修復了TEZ開啟Speculation后重復Commit的缺陷。

EMR-5.5.0

Hive 3.1.2

  • 優化了Hive Jindo批量刪除的問題。

  • 優化了HiveServer2 OOM問題。

  • 優化了Hive on Spark。

  • 適配JindoSDK。

EMR-5.4.0

Hive 3.1.2

Hive on JindoFS（Block）支持批量元數據優化功能，默認未開啟。

EMR-5.3.0

Hive 3.1.2

Hive on JindoFS（Block模式）支持批量元數據優化功能。

EMR-5.2.1

Hive 3.1.2

  • 修復使用DLF元數據執行show create table命令，結果顯示不正確的問題。

  • 優化Hive默認參數，以提升作業性能。

  • 修改E-MapReduce控制臺上，Hive服務配置頁面的hive-env頁簽的配置項名稱為大寫，便于用戶使用。

  • 修復UDF（User Define Function）導致HiveServer2內存泄露的問題。

  • 優化文件系統與MetaStore不一致時寫Hive表的報錯信息。

EMR-3.x系列

EMR版本

組件版本

功能增強

EMR-3.46.1

Hive 2.3.9

Hive warehouse支持默認使用OSS-HDFS存儲。

EMR-3.40.0

Hive 2.3.8

  • 修復了TEZ開啟Speculation后重復Commit的缺陷。

  • 修復了必須Reload Function才能調用UDF的缺陷。

EMR-3.39.1

Hive 2.3.8

適配JindoSDK。

EMR-3.36.1

Hive 2.3.8

  • 升級Hive至2.3.8版本。

  • 修復使用DLF（DataLakeFormation）元數據執行show create table命令時，結果顯示不正確的問題。

  • 優化Hive默認參數，以提升作業性能。

  • 修改E-MapReduce控制臺上，Hive服務配置頁面的hive-env頁簽的配置項名稱為大寫，便于用戶使用。

  • 優化文件系統與MetaStore不一致時寫Hive表的報錯信息。

EMR-3.35.0

Hive 2.3.7

修復Fetch Task相關的社區問題。

EMR-3.34.0

Hive 2.3.7

  • 優化了部分默認配置。
  • 性能優化：增強CBO。
  • 支持一鍵開啟或關閉LDAP功能。
  • 升級Calcite版本至1.12.0。
  • 增加參數hive.security.authorization.sqlstd.confwhitelist.append。

EMR-3.33.0

Hive 2.3.7

  • 升級至2.3.7版本。
  • HCatalog支持Data Lake Formation。
  • 支持Hive元數據和作業運行信息輸出至DataWorks。

EMR-3.32.0

Hive 2.3.5

  • 修復了HiveServer連接池泄漏的問題。
  • JindoTable支持打開或關閉數據采集功能。
  • 優化ADD COLUMN的性能。
  • 修復了讀取HUDI表時數據不正確的問題。
  • 默認的參數配置，可以根據集群節點大小調整。

EMR-3.30.0

Hive 2.3.5

  • 支持阿里云DLF（Data Lake Formation）元數據。
  • 解決了讀Delta表空目錄時寫DUMMY文件問題。
  • 升級HAS依賴至2.0.1。

EMR-3.29.0

Hive 2.3.5

  • Hive升級至2.3.5.6.0。
  • 支持第三方Metastore的功能。
  • 增加datalake metastore-client。

EMR-3.28.0

Hive 2.3.5

支持Delta 0.6.0版本。

EMR-3.27.2

Hive 2.3.5

  • hcatalog表支持magic committer。
  • 移除一些過時的默認配置。

EMR-3.26.3

Hive 2.3.5

hcatalog表支持direct committer。

EMR-3.25.0

Hive 2.3.5

修復自動LOCAL模式下MR任務執行失敗的問題

EMR-3.24.0

Hive 2.3.5

  • 增加SQL兼容性檢查功能邏輯。
  • Hive2.3.5+Hadoop2.8.5組合發布。
  • 重啟組件時不同步hiveserver2-site.xml中的內容至spark-conf下的hive-site.xml。
  • 支持使用MSCK命令添加增量目錄。
  • 修復Hive復用tez container時出現的bug。
  • 支持使用MSCK命令優化列目錄。

EMR-3.23.0

Hive 2.3.5

  • 刪除老版本的hive hook。
  • 添加支持多個count distinct字段的數據傾斜處理優化。
  • 解決join不同bucketversion的表時丟數據的問題。

EMR-3.23.0之前版本

Hive 2.x

外部統一數據庫保存至Hive Meta，所有使用外部Hive Meta的集群共享同一份Meta信息。

EMR-4.x系列

EMR版本

組件版本

功能增強

EMR-4.10.0

Hive 3.1.2

  • 修復了Hue查詢歷史記錄時，中文亂碼的問題。

  • 修復了Hue與Oozie集成使用時界面顯示的問題。

  • 修復YARN Job Browser在部分情況下無法正常展示和終止作業的問題。

  • 默認配置中放開YARN Job Browser。

  • 默認配置中支持Presto協議。

EMR-4.8.0

Hive 3.1.2

  • 優化了部分默認配置。

  • 性能優化：增強CBO。

  • 支持一鍵開啟或關閉LDAP功能。

EMR-4.6.0

Hive 3.1.2

  • HCatalog支持Data Lake Formation。

  • 支持Hive元數據和作業運行信息輸出至DataWorks。

EMR-4.5.0

Hive 3.1.2

  • 支持數據湖構建（DLF）元數據。

  • 支持Ranger Ownership權限。

EMR-4.4.1

Hive 3.1.2

優化默認的參數配置。

EMR-4.4.0

Hive 3.1.2

  • 升級至3.1.2版本。
  • 優化JindoFS。
  • 優化MSCK。
  • HCatalog支持JindoCommitter。
  • 升級HAS依賴。

EMR-4.3.0

Hive 3.1.1

支持自定義部署。