1. 程式人生 > >關於CDH6的一些介紹

關於CDH6的一些介紹

cdh6 的介紹 hadoop cdh

  • 一:cdh6 的介紹
  • 二: cdh6 使用組件的版本與下載

一: cdh6 的介紹

1.1: cdh6 的發布


Cloudera在北京時間5月16日的半夜,在其社區(community.cloudera.com)對外宣布發布Cloudera Enterprise 6,Beta。咱們在5月沒有等到CDH5.15,等到C6 beta也是不錯的

C6相較於C5是一次各個組件的大版本升級,可以說是翻天覆地的,簡單說你以前期待的Hadoop3的一些激動人心的新功能

1.2: cdh 6 版本的新功能

1.打包集成Solr7,更好的應對無論是結構化數據還是非結構化數據。Solr7支持直接使用SQL查詢,並且通過SQL接口可以將對非結構化數據的查詢對接到傳統BI工具。Cloudera Enterprise 6.0支持新的 JSON Facet Module以及Nested Documents,對於Solr7的新的查詢界面UI也在6.x的Roadmap中。

2.Hive2的矢量化(vectorization )進一步提升分析性能,帶來20%-80%的性能提升。YARN可以在帶有GPU的專有硬件上調度作業,對於深度學習用例的性能提升在5倍到10倍。

3.通過全自動的wire encryption(TLS)以及對於Cloudera Manager用戶的更加細粒度對每個集群訪問的控制,提升Cloudera Manager的集群管理效率,並保護敏感數據以及對基礎架構的訪問。從而使管理員可以在幾分鐘之內部署超過2500個節點的多個集群,同時管理開銷最小。

二: cdh 6 版本使用組件的版本

2.1: cdh6 使用的版本


Cloudera Enterprise 6.0中的主要組件的升級:

SDX
Cloudera Manager 6.0
Cloudera Director 6.0
Cloudera Navigator 6.0
Cloudera Navigator Key Trustee 6.0
Apache Sentry 2.0
Apache Kafka 1.0

Analytics and Machine Learning Workloads
Apache Solr 7.0
Apache Spark 2.3

Core Platform
Apache Hadoop 3.0
Apache Hive 2.1
Apache HBase 2.0
Apache Oozie 5.0
Apache Avro 1.8
Apache Parquet 1.9

2.2升級或者安裝前置:

CDH
只支持從CDH5.7或以上版本升級到C6,所以如果你在使用CDH5.7以下版本,建議你至少先升級到5.7.

外部數據庫支持:
MySQL 5.7或更高
MariaDB 5.5或更高
PostgreSQL 8.4或更高
Oracle 12c或更高

JDK
Oracle JDK1.8,將不再支持JDK1.7

操作系統支持
RHEL 6.8或更高
RHEL 7.2或更高
SLES 12 SP2或更高
Ubuntu 16或更高

重要的事情這裏僅說一遍:未來不能從C6 beta升級到C6正式版。Cloudera Enterprise 6 beta是沒有Cloudera官方支持的。但是你可以在Cloudera社區的一個新版面尋求一些幫助:https://community.cloudera.com/t5/C6-Beta/qa-p/C6_Beta,當然你也可以反饋一些你的建議。

2.3 : cdh6 beta 版本的下載

下載Cloudera Enterprise 6 - Beta的參考鏈接地址:
https://www.cloudera.com/products/cloudera-enterprise-6.html

本文原文地址:
https://community.cloudera.com/t5/Community-News-Release/ANNOUNCE-Cloudera-Enterprise-6-Beta-Released/m-p/67312

關於CDH6的一些介紹