版本

日期

EMR-5.3.1

2021年9月

EMR-5.3.0

2021年8月

服務

變更點

SmartData

升級SmartData至3.7.1版本。

Hue

修復了高安全集群無法使用Impala的問題。

Kudu

支持Kerberos。

HBase

• 修復了高安全集群重啟HBase耗時過長的問題。

• 修復了Spark 3.1.1版本與HBase集成使用時失敗的問題。

• 優化了Graceful Stop流程。

服務

變更點

SmartData

升級SmartData至3.7.0版本。

Spark

修復了與Delta Lake兼容性的問題。

Hive

Hive on JindoFS（Block模式）支持批量元數據優化功能。

默認未開啟此功能。

DeltaLake

• 支持DeltaLake的分區特性。

• 修復了desc detail命令和Spark 3.1.1版本不兼容的問題。

YARN

• 節點Containers REST API增加了appId，CPU和Memory資源使用信息。

• 修復了彈性伸縮釋放節點上AM日志無法查看的問題。

• 修復了State Store歷史數據造成集群不可用的問題。

• 支持彈性伸縮Decommission后清理釋放的節點。

• 完善了彈性伸縮Graceful Decommission的操作邏輯，待NM進程結束后再標記下線完成。

Zookeeper

升級至社區3.6.3版本。

Flink

• 新增了SmartData組件。

• 修復了SSH到DataFlow-Flink集群中提交作業時，無法免密訪問OSS的問題。

Impala

修復了直接刪除OSS分區目錄出現list目錄循環的問題。

Hue

修復了Hue與Oozie集成使用時界面顯示的問題。

Kudu

升級至社區1.14.0版本。

Clickhouse

組件版本為21.3.13.9。

Iceberg

新增Iceberg組件，組件版本為0.12.0。