通过各种各样的 ISV 解决方案功能增强 Hortonworks Data Platform (HDP)
独立软件供应商 (ISV) 的数据相关解决方案通常与大数据环境(例如 Apache Hadoop 或 Spark)相集成,以便利用数据处理或分析处理能力。许多数据软件解决方案通过优化或增强 Hadoop 功能来提供独特的附加价值。这些解决方案的功能涵盖广泛的特性,比如促进快速摄取数据,提高数据质量,在更大的数据湖环境中移动数据,或者访问 Hadoop 数据,以便在现有 BI 仪表板和报告中分析和可视化它们。一些解决方案旨在简化与 Hadoop 环境的连接,而其他解决方案旨在能够直接在一个或多个 Hadoop 节点(例如管理、数据或边缘节点)上运行。
本文将介绍一组 ISV 数据相关解决方案,它们与 Linux®on IBM® Power Systems™ 上运行的 HDP 相集成。这里列出的解决方案是经过 IBM 或 ISV 测试的解决方案,它们不代表可用于此环境的所有解决方案。随着这个解决方案生态系统的不断壮大,本文将定期更新。
以下每个用例都至少展示了一种提供必要功能的 ISV 解决方案。本节中的解决方案已配置为连接到 Linux on Power 上运行的 HDP,但没有在 HDP 集群上运行它们的软件。
以下用例(已在表 1 中列出)通过提供某种形式的高级分析功能来扩充 HDP。
用例:访问 HDP 中的数据以用于分析
这对扩展 Power Systems 上的现有分析环境来利用 HDP 中的数据很有用。
表 1:访问 HDP 中的数据以用于分析的解决方案
解决方案 | 测试者 | 参考资料 | ISV 网站 |
---|---|---|---|
SAP HANA 与 SAP HANA Spark Controller | IBM,由 SAP 协助 | 通过 IBM Power Systems 上运行的 SAP HANA Spark Controller 集成 SAP HANA 与 Hortonworks Data Platform (HDP) | https://www.sap.com/products/hana.html |
Base SAS 与 SAS/ACCESS Interface for Hadoop | IBM,由 SAS 协助 | SAS 软件与在 IBM POWER8 上运行的 Hortonworks Data Platform (HDP) | https://www.sas.com/en_us/software/base-sas.html |
SynerScope | SynerScope | 不适用 | https://www.synerscope.com/products-services |
以下用例(已在表 2 中列出)通过提供数据可视化、报告或仪表板等商业智能功能来扩充 HDP。
用例:访问 HDP 中的数据并可视化这些数据
表 2:访问 HDP 中的数据并可视化这些数据的解决方案
解决方案 | 测试者 | ISV 网站 |
---|---|---|
MicroStrategy | IBM | https://www.microstrategy.com/us |
QlikView | IBM | https://www.qlik.com/us/products/qlikview |
Qlik Sense | IBM,由 Qlik 协助 | https://www.qlik.com/us/products/qlik-sense |
Tableau Server | IBM | https://www.tableau.com/products/server |
以下用例(已在表 3 中列出)通过提供企业数据仓库功能来扩充 HDP。
表 3:连接各种数据源中的数据并将它们移动到 HDP 的解决方案
用例 | 解决方案 | 测试者 | 参考资料 |
---|---|---|---|
以无代理方式批量或增量地将来自 IBM AIX 上的 Oracle 数据库或其他支持的数据源中的数据加载到 HDP 中的 Hive 内,通过这种方式加速数据复制 | Attunity Replicate | IBM,由 Attunity 协助 | • 演示 • ISV 网站 |
在 AIX 和 HDP 上的数据源之间建立数据连接 | Progress DataDirect | Progress | ISV 网站 |
将来自 AIX 上的 Oracle 数据库的数据移动并批量加载到 HDP 中 | Oracle 12c Instant Client 和 Apache Sqoop | IBM | ISV 网站 |
将来自许多异构数据源的数据移动到 HDP | Veristorm vStorm Enterprise | IBM,由 Veristorm 协助 | ISV 网站 |
从受支持的数据源提取数据,转换它,并将它加载到 HDP 中 | Paxata Adaptive Information Platform | Paxata | ISV 网站 |
下面这个用例通过提供安全功能来扩充 HDP。
用例:加密和保护 HDP 数据节点上的数据
Zettaset Big Data Encryption Suite:
无论 HDP 在何种平台上运行,都有许多 ISV 解决方案支持 Hadoop 并与 HDP 集成。如今,通过在 Linux on Power 上运行的 HDP,可以将这些解决方案用在生产环境中。在一些用例中测试了特定解决方案后,我们会更新本文,让您知道我们实际测试了哪些解决方案。此外,还有其他一些在 HDP 集群上本地运行的解决方案,需要测试或移植它们才能将它们用于 IBM Power Systems 上的 HDP。我们将继续与许多合作伙伴合作完成这项工作,并会在生态系统不断壮大过程中将这些解决方案记录在本文中。
来源: http://www.ibm.com/developerworks/cn/linux/l-isv-solution-hortonworks/index.html