EMR-5.4.x版本說(shuō)明
本文介紹EMR-5.4.x版本的發(fā)布日期、更新內(nèi)容和發(fā)行版本信息。
發(fā)布日期
版本 | 日期 |
EMR-5.4.3 | 2021年12月 |
EMR-5.4.2 | 2021年12月 |
EMR-5.4.1 | 2021年11月 |
EMR-5.4.0 | 2021年10月 |
更新內(nèi)容
EMR-5.4.3
修復(fù)了所有相關(guān)組件的Log4j安全漏洞,詳細(xì)信息請(qǐng)參見漏洞公告 | Apache Log4j2遠(yuǎn)程代碼執(zhí)行漏洞。
服務(wù) | 變更點(diǎn) |
Presto | 修復(fù)了Elasticsearch連接器的Log4j漏洞。 |
DLF Metastore |
|
Delta Lake | 修復(fù)了變更Schema同步到Metastore的問(wèn)題。 |
Sqoop | 修復(fù)了Sqoop導(dǎo)入HCatalog表時(shí),Decimal類型精度丟失的問(wèn)題。 |
EMR-5.4.2
服務(wù) | 變更點(diǎn) |
SmartData |
|
EMR-5.4.1
服務(wù) | 變更點(diǎn) |
SmartData | 升級(jí)SmartData至3.7.3版本,詳情請(qǐng)參見SmartData 3.7.x版本簡(jiǎn)介。 |
Oozie | 修復(fù)了HA情況下Oozie的Jetty Server依賴JAR包沖突,導(dǎo)致Jetty Server無(wú)法啟動(dòng)的問(wèn)題。 |
Impala | 修復(fù)了查詢DLF元數(shù)據(jù)表時(shí)提示 |
DLF-Auth | 升級(jí)DLF-Auth至1.0.1版本。 |
EMR-5.4.0
服務(wù) | 變更點(diǎn) |
SmartData | 升級(jí)SmartData至3.7.2版本,詳情請(qǐng)參見SmartData 3.7.x版本簡(jiǎn)介。 |
Spark |
|
Hive | Hive on JindoFS(Block)支持批量元數(shù)據(jù)優(yōu)化功能,默認(rèn)未開啟。 |
Presto | Delta表支持StorageHandler查詢。 |
DeltaLake |
|
Hudi |
說(shuō)明 支持Spark 3.1.2版本。 |
HDFS | NameNode預(yù)留空間默認(rèn)參數(shù)自適應(yīng)增加,保證磁盤空間不足時(shí), NameNode及時(shí)進(jìn)入SafeMode。 |
Storm | 組件下線。 |
Zeppelin | 升級(jí)Zeppelin至社區(qū)0.10.0版本。 |
Hue |
|
Druid | 修復(fù)了服務(wù)器掉電時(shí)Pid文件殘留,導(dǎo)致節(jié)點(diǎn)重啟失敗的問(wèn)題。 |
ClickHouse |
|
Iceberg |
|
Knox | 修復(fù)了Spark Task第一次訪問(wèn)時(shí)失敗的問(wèn)題。 |
DLF-Auth | 新增組件。 支持DLF權(quán)限,可以控制Hive和Spark權(quán)限。版本為1.0.0,詳情請(qǐng)參見DLF-Auth。 |
發(fā)行版本信
Hadoop集群
服務(wù) | 版本 |
HDFS | 3.2.1 |
YARN | 3.2.1 |
Hive | 3.1.2 |
Spark | 3.1.2 |
Knox | 1.1.0 |
Tez | 0.9.2 |
Ganglia | 3.7.2 |
Sqoop | 1.4.7 |
SmartData | EMR-5.4.0版本:3.7.2 EMR-5.4.1版本:3.7.3 EMR-5.4.2版本:3.8.0 |
Bigboot | |
Iceberg | 0.12.0 |
DLF-Auth | 1.0.0 |
Hudi | 0.9.0 |
DeltaLake | 1.0.0 |
OpenLDAP | 2.4.44 |
Hue | 4.9.0 |
HBase | 2.3.4 |
Zookeeper | 3.6.3 |
Presto | 338 |
Impala | 3.4.0 |
Zeppelin | 0.10.0 |
Flume | 1.9.0 |
Livy | 0.7.1 |
Superset | 0.36.0 |
Ranger | 2.1.0 |
ESS | 1.2.0 |
Alluxio | 2.5.0 |
Kudu | 1.14.0 |
Oozie | 5.2.1 |
Kafka集群
服務(wù) | 版本 |
Zookeeper | 3.6.3 |
Ganglia | 3.7.2 |
Kafka | 2.4.1 |
Kafka-Manager | 1.3.3.16 |
OpenLDAP | 2.4.44 |
knox | 1.1.0 |
Ranger | 2.1.0 |
ClickHouse集群
服務(wù) | 版本 |
Zookeeper | 3.6.3 |
Ganglia | 3.7.2 |
Clickhouse | 21.3.13.9 |