一: cdh6 的介绍
二: cdh6 使用组件的版本与下载
一: cdh6 的介绍
1.1: cdh6 的发布
Cloudera 在北京时间 5 月 16 日的半夜, 在其社区 (community.cloudera.com) 对外宣布发布 Cloudera Enterprise 6,Beta. 咱们在 5 月没有等到 CDH5.15, 等到 C6 beta 也是不错的
C6 相较于 C5 是一次各个组件的大版本升级, 可以说是翻天覆地的, 简单说你以前期待的 Hadoop3 的一些激动人心的新功能
1.2: cdh 6 版本的新功能
打包集成 Solr7, 更好的应对无论是结构化数据还是非结构化数据. Solr7 支持直接使用 SQL 查询, 并且通过 SQL 接口可以将对非结构化数据的查询对接到传统 BI 工具. Cloudera Enterprise 6.0 支持新的 JSON Facet Module 以及 Nested Documents, 对于 Solr7 的新的查询界面 UI 也在 6.x 的 Roadmap 中.
Hive2 的矢量化 (vectorization ) 进一步提升分析性能, 带来 20%-80%的性能提升. YARN 可以在带有 GPU 的专有硬件上调度作业, 对于深度学习用例的性能提升在 5 倍到 10 倍.
通过全自动的 wire encryption(TLS)以及对于 Cloudera Manager 用户的更加细粒度对每个集群访问的控制, 提升 Cloudera Manager 的集群管理效率, 并保护敏感数据以及对基础架构的访问. 从而使管理员可以在几分钟之内部署超过 2500 个节点的多个集群, 同时管理开销最小.
二: cdh 6 版本使用组件的版本
2.1: cdh6 使用的版本
Cloudera Enterprise 6.0 中的主要组件的升级:
- SDX
- Cloudera Manager 6.0
- Cloudera Director 6.0
- Cloudera Navigator 6.0
Cloudera Navigator Key Trustee 6.0
- Apache Sentry 2.0
- Apache Kafka 1.0
Analytics and Machine Learning Workloads
- Apache Solr 7.0
- Apache Spark 2.3
- Core Platform
- Apache Hadoop 3.0
- Apache Hive 2.1
- Apache HBase 2.0
- Apache Oozie 5.0
- Apache Avro 1.8
- Apache Parquet 1.9
2.2 升级或者安装前置:
CDH
只支持从 CDH5.7 或以上版本升级到 C6, 所以如果你在使用 CDH5.7 以下版本, 建议你至少先升级到 5.7.
外部数据库支持:
MySQL 5.7 或更高
MariaDB 5.5 或更高
PostgreSQL 8.4 或更高
Oracle 12c 或更高
JDK
Oracle JDK1.8, 将不再支持 JDK1.7
操作系统支持
RHEL 6.8 或更高
RHEL 7.2 或更高
SLES 12 SP2 或更高
Ubuntu 16 或更高
重要的事情这里仅说一遍: 未来不能从 C6 beta 升级到 C6 正式版. Cloudera Enterprise 6 beta 是没有 Cloudera 官方支持的. 但是你可以在 Cloudera 社区的一个新版面寻求一些帮助: https://community.cloudera.com/t5/C6-Beta/qa-p/C6_Beta, 当然你也可以反馈一些你的建议.
2.3 : cdh6 beta 版本的下载
下载 Cloudera Enterprise 6 - Beta 的参考链接地址:
https://www.cloudera.com/products/cloudera-enterprise-6.html
来源: http://www.bubuko.com/infodetail-2605980.html