本文介紹EMR-3.28.x發行版本的發布日期和更新內容等信息。

發布日期

EMR-3.28.0 2020年6月12日

新增內容

服務 變更點
Bigboot
  • 發布首個JindoTable版本,基于表或分區的熱度統計。
  • 支持Block模式上完整的存儲策略,支持分層存儲策略,包括低頻和歸檔等。
  • 增加數據遷移工具Jindo DistCp。
  • 完善和修復Jindo Fuse。
  • 完善Cache模式中JFS Scheme在Hive引擎和Jindo JobCommitter上的集成。
  • Block模式讀路徑上,設置比重可以直接讀OSS,用來緩解和分攤讀本地緩存的開銷。
  • JindoFS軟件模塊解耦,分為Bigboot(管控層)、Smartdata(分布式服務)和JindoFS SDK。每塊獨立升級維護。

更新內容

服務 變更點
Flink 已將開源Flink升級為企業版Ververica Platform,基于開源Flink 1.10深度定制,提供自研存儲引擎Gemini等增值功能。
Bigboot 升級至2.7.0版本。
Delta
  • 升級至0.6.0版本。
  • 解耦Delta與Spark代碼。
Spark
  • 升級至2.4.5版本。
  • 兼容DataFactory的streaming-sql腳本。
  • 支持Delta 0.6.0版本。
Hive 支持Delta 0.6.0版本。
Ranger
  • 支持HDFS、Hive和Spark自定義部署。
  • 支持在控制臺配置ranger-admin-site和ranger-ugsync-site。
HDFS 針對HDFS寫入時無可用DataNode節點的異常,打印對應DataNode異常信息(HDFS-9023)。
Hue
  • 支持Gateway集群安裝Hue組件。
  • 支持在單個節點部署多個Hue實例。
DataFactory 支持Delta 0.6.0版本。
Druid 升級至0.18.0版本。
Knox
  • 升級至1.1.0-1.0.7版本。
  • 適配HBase UI。