Cloudera数据平台（CDP）私有云基础版是Cloudera数据平台的本地版本。...在安装CDP私有云基础版集群时，您将安装一个名为Cloudera Runtime的Parcel，其中包含所有组件。...除Cloudera Runtime组件外，CDP私有云基础版还包括功能强大的工具，可帮助您管理、治理和保护集群。...CDP私有云基础版的工具 Cloudera Manager CDP-私有云基础版使用Cloudera Manager来管理一个或多个集群及其配置，并监视集群性能。...Apache Ranger还通过用户界面管理访问控制，以确保跨CDP-私有云基础版组件进行一致的策略管理。
我们最近的博客讨论了从传统平台到 CDP 私有云基础的四种途径。在本博客和随附的视频中，我们将深入探讨运行从 CDH5 或 CDH6 到 CDP 私有云基础的就地升级的机制。...在下面的视频中，我们将介绍从 CDH 到 CDP 私有云基础的完整的端到端升级。 步骤 1：准备升级 在继续升级之前，有必要查看文档中指定的先决条件。...在某些情况下，在 CDP 中将特定的旧组件替换为新的等效组件可能需要额外的代码更新才能与您的操作完全集成。...步骤3：升级 JDK CDP 支持 Open JDK 1.8 和 1.11 以及 Oracle JDK 1.8。...有关升级过程的其他信息，请参阅 CDP 私有云基础升级文档 Cloudera 升级指南伴侣 CDP 知识中心 原文作者：Tristan Stevens 原文链接：https://blog.cloudera.com
Replication Manager 可用于将 Hive、Impala 和 HDFS 工作负载迁移到 CDP私有云基础。...支持的场景 CDH 到CDP 私有云基础 Replication Manager概述 Cloudera Manager 提供了一个集成的、易于使用的管理解决方案，用于在 Hadoop 平台上启用数据保护...CDP 私有云基础上的 Replication Manager 支持矩阵 支持列表包含 Replication Manager 中跨功能的兼容性信息。...它将托管表从源集群转换为CDP 私有云基础集群的外部表。Replication Manager 将复制的表存储为外部表。...此限制仅影响 Cloudera Manager 管理控制台，不影响 CDH 命令行工具或未由管理控制台执行的操作，例如使用命令行工具的 Replication Manager。
此脚本有助于创建使用 AWS 作为云服务提供商安装 CDP Private Cloud Base（试用版）所需的基础设施和要求。 无需编辑或修改脚本。 重要提示：记下脚本输出、概要和操作项目部分。...下载试用版 让我们从Cloudera 下载站点下载CDP Private Cloud Base 的试用版： 选择CDP 私有云，免费试用。...选择CDP 私有云基地，立即试用 选择试用版 CDP 私有云，立即试用 按照页面上提供的试用安装说明进行操作。 注意：在上一步中，我们故意让主节点的ssh连接保持打开状态。...进一步阅读 视频 混合云视频采集 所有CDP视频合集 博客 CDP私有云博客合集 混合云博客合集 其他 CDP 用户页面- 其他 CDP 资源，包括视频、教程、博客和活动 有一个问题？...加入Cloudera 社区 CDP 私有云文档 CDP 私有云产品页面 附录 A：卸载集群 当您准备好终止用于 Cloudera Data Platform Private Cloud Base（试用版
对于在边缘添加分析的数据驱动型组织，此版本扩展了流处理工作负载的可见性和控制，旨在将数据流管道引入管理良好的数据网格架构。...流处理增强功能 提高了流的安全性、可靠性和性能，并具有扩展的可见性和无与伦比的控制能力。...CDP 私有云基础扩展了第三方对平台集成的更多选择的支持。...CDP 私有云基础 7.1.8 是继长期支持 (LTS) 版本之后的第一个功能版本，将支持 18 个月。...可提供帮助的其他资源： 7.1.8 发布总结 7.1.8 运行时发行说明 Cloudera Manager 7.7.1 发布摘要 CDP私有云基础概述 CDP私有云基础安装升级文档 CDP私有云基地试用资料及下载
授权有多种方式处理，从访问控制列表（ACL）到HDFS扩展的ACL，再到使用Ranger的基于角色的访问控制（RBAC）。 几种不同的机制一起工作以对集群中的用户和服务进行身份验证。...如果域控制器与集群不在同一子网中，或者被防火墙隔开，则这特别有用。...通常，Cloudera建议在与集群相同的子网上设置Active Directory域控制器（Microsoft服务器域服务），并且永远不要通过WAN连接进行设置。...将集群与Active Directory域控制器上运行的KDC分开会导致大量延迟，并影响集群性能。...Kerberos Sqoop Kerberos YARN Kerberos (also see HDFS) Zookeeper Kerberos 原文链接：https://docs.cloudera.com/cdp-private-cloud-base
您可以了解有关我们如何迁移到CDP的更多信息。 升级前的内部环境 成功升级到CDP私有云基础版的最重要步骤是了解您的环境。...您所依赖的CDP特定组件（例如HBase、Impala等），基础架构的使用时间以及工作负载的特征都影响着迁移到CDP的复杂性。...尽管面临这些挑战，我们知道我们想进入CDP私有云基础版。升级之前，我们的集群正在运行CDH 5.16.2。对于我们所依赖的产品（例如HBase和Solr），我们在CDP的许多主要版本升级中也缺少创新。...更重要的是，升级到CDP使我们可以选择增加一套新功能，并为将来提供更现代的数据平台。 转移到CDP的准备 转到CDP时，首先要做出的决定是升级现有集群还是迁移到新集群。...要计划升级或迁移到CDP私有云基础，请联系您的Cloudera客户团队，他们将安排一些时间与您一起探讨可用的选项。
GDPR、CCPA、HIPAA、PCI DSS和FIPS-200之类的法规均要求组织采取适当措施来保护敏感信息，这些措施可包括以下三个支柱： 静态和动态加密-确保未经身份验证的参与者无法访问数据 访问控制...（强身份验证和授权）–确保用户就是他们所说的身份（身份验证），并且只能访问他们被允许访问的内容（授权） 审计和核算–了解谁访问了什么内容、何时访问以及谁更改了权限或访问控制设置，并有可能在发生数据泄露时而不是在事发后发出警报...在CDP中： 可以使用基于TLS或SASL的加密方式对所有有线协议进行加密 可以使用HDFS透明数据加密（私有云）或对象存储加密（公共云）对所有静态数据进行加密 在公共云和私有云中，所有用户访问均通过Kerberos...所有数据访问均通过基于属性的访问控制或基于角色的访问控制（使用Apache Ranger作为SDX的一部分）进行授权。 再次使用Apache Ranger审核所有数据访问和数据访问控件。...在此博客中，我们讨论了使用基于文件的审计和基于Syslog的审计生成将CDP中的审计事件发送到外部SIEM的方法。 有关配置和使用Apache Ranger的更多信息，请查阅CDP文档。
Cloudera于2021年3月宣布发布Cloudera Data Platform（CDP）私有云（PvC）基本版本7.1.6和Cloudera Manager版本7.3.1。...Accumulo支持 CDP私有云基础版现在支持基于Accumulo 2.0的由Apache Accumulo增强的操作数据库（OpDB）。...现在，这使得使用Accumulo升级到CDP私有云基础版的CDH 5、HDP 2和HDP 3客户成为可能。更多细节 在这里。...平台支持增强 新的操作系统版本 CDP私有云基础版现在支持针对Intel x86和IBM PPC硬件的RHEL / CENTOS 7.9。...新的数据库版本 CDP私有云基础版现在支持MySQL8和Postgres12。
伴随着CDP私有云的每个新版本，我们正在努力提供这些内容。伴随着许多新功能，我们正在尽可能简化升级过程。...如下所示，CDP私有云基础堆栈为CDH 5.13 – 5.16和HDP 2.6.5的客户提供了升级途径。在此版本中，我们还支持从HDP 3.1.5升级。...CDP私有云基础7.1.6提供以下类别的好处： 更好的升级支持 支持从HDP 3.1.5到CDP私有云基础版的就地升级，并增强了自动化工具的功能，可以轻松地从Ambari过渡到Cloudera Manager...我们添加了基于Accumulo 2.0的“由ApacheAccumulo支持的OpDB”，使使用Accumulo的HDP客户能够使用语义版本控制，批量导入和简化脚本等功能升级到CDP私有云基础版。...借助7.1.6版本添加的新功能，增强功能和改进的升级途径，现在没有更好的时间将现有的CDH或HDP集群过渡到CDP私有云基础版。
Cloudera数据平台（CDP）私有云是用于集成分析和数据管理的最全面的本地平台。...为了进行性能比较，我们使用YCSB工作负载将CDP 私有云7中可用的HBase2与CDH 5中可用的Hbase1进行了测量。...CDH 5.16.3运行完成后，将CDP私有云7.1 HBase2干净安装，并在同一集群上重新生成数据。然后运行CDP私有云7.1 YCSB工作负载以获取测试时间。...*吞吐量（操作数/秒）=每秒操作数 CDP私有云7.1包括HBase2，而CDH 5.16.3包括HBase1。CDP私有云7.1和CDH5均已安装JDK 8。...CDP私有云7.1支持JDK11，并且CDP私有云7.1已更新为使用JDK 11进行YCSB测试，CDH 5.13.3运行与JDK 8（1.8.0_141）一起运行 测试配置 • YCSB版本0.17.0
在CDP 私有云基础集群上进行必要的配置更改。 CDP 私有云基础集群上的配置更改 在复制期间，必须跳过领域名称，并且只有指定的用户才能访问 HDP 集群。...HDP 集群迁移到不安全的CDP 私有云基础集群。...执行以下步骤将 HDFS 数据从安全的 HDP 集群迁移到安全的CDP 私有云基础集群： HDP 集群和CDP 私有云基础 集群的配置变更 你必须使HDP集群和一些配置的变化CDP私有云的基础，你从HDP...集群的迁移数据前簇CDP私有云基地集群。...在CDP 私有云基础集群上运行 DistCp 作业。
因此，我们很高兴地宣布公开发布基于 Ansible 的自动化来部署 CDP 私有云基础集群。...: "~/.ssh/mykey.pem" 以下方法描述了将 CDP 私有云部署到物理机或虚拟机上。...在某些情况下（可能是开发环境），可能需要在 EC2、Azure VM 或 GCE 上部署 CDP 私有云，但是应该注意的是，将 CDP 公共云用于任何公共云工作负载都具有显着的成本、性能和敏捷性优势....总结 在本博客中，我们介绍了如何将 CDP 私有云基础自动化部署到物理或虚拟机上的机制，也包括在公共云中部署。...通过一个简单的定义，分为三个配置文件以方便使用，我们已经能够控制集群部署的所有方面，包括与企业基础设施的集成。 这种规模的自动化极大地提高了 CDP 私有云基础的价值实现时间。
CDP 公共云的引入大大减少了您可以使用 Cloudera 的最新技术启动和运行的时间，无论是容器化数据仓库、机器学习、操作数据库或数据工程经验，还是基于虚拟机的多用途数据中心部署方式。...在 CDP 私有云中，在 RedHat OpenShift Kubernetes 集群上引入Cloudera Data Warehouse 和 Cloudera Machine Learning Experiences...意味着我们可以在一小时内在现有的 Base 集群上部署新的工作负载，但 CDP 私有云 Base 集群的安装却滞后了....CDP 私有云的自动化 今天，我们将发布基于 Ansible 的自动化公开版本，用于部署 CDP 私有云基础集群，该集群可以安装在数据中心或公共云中的裸机服务器或虚拟机上。...如果您需要有关 CDP 升级或迁移项目或使用自动化的帮助，请联系您的客户团队。
但是，对于影音发烧友、高度重视数据安全、数据密集型的极客和中小企业用户而言，个人DIY的私有云依然是不二的选择。...目前市场上的私有云产品大致可以分为四类：PC私有云、NAS私有云、智能路由私有云和WiFi移动存储私有云。...可道云kodexplorer——是一款开源免费的web文档管理器，能够用来搭建成私有云，私有网盘，取代ftp的传输工具等等，界面可以说非常漂亮，用起来也非常的流畅。...opt-1 (1).png tab-frk.png 20171103021433218.png plugin.png opt-9.png 这么完美的一款神器，就让我们快速的完成私有云搭建...image.png 三、到此我们的私有云就已经搭建好了，kodexplorer不需要数据库，所以不用更多的操作，解压之后就已经是安装好了。
而在云服务时代，我们只需要打开电脑、点点鼠标就可以完成资源的购置，在线进行业务系统的部署，所以云计算相对于传统IT来说，有三点优势：提高效率、降低成本、助力创新。 那么云计算有哪些交付方式呢？...1、私有云：构建在企业自己的数据中心内部，面向企业内部组织用户服务；具有数据安全性高，IT基础架构可控制能力强、合规等特点； 2、公有云：由云服务商统一建设，面向任何网络用户提供云服务，初期投入成本低，...弹性灵活； 3、混合云：即在数据中心内部建设了私有云，又使用了公有云服务；具有安全、合规、弹性、低成本的特性。...额外提供运行环境层面的部署，用户只需要部署业务系统即可； 3、SAAS服务：应用即服务，相对于PAAS层来说，应用也已经完成了部署，用户只需要开通账号使用即可； 聊完这些之后，我们言归正传，讲讲什么是私有云...由此可见，一套完整的私有云是基于虚拟化和云平台的整合，虚拟化提供资源池化、资源调度，云平台提供资源管理、运营等。两者相辅相成！
混合云配图2.jpg 近两年云计算行业最受欢迎的概念无疑是混合云。混合云私有云的配置成为众多企业支持的对象。...虽然照目前情况来说，混合云并没有一个很好的定义，但大多数情况下，我们所说的混合云是指公有云 自营私有云的IT架构。 众所周知，私有云的安全相比起公有云来说完全是碾压般的存在。...而有关计算资源方向，私有云远达不到公有云层次。在这种矛盾的情况下，混合云的出现无疑解决了这个棘手的问题。...但是，与云计算和混合云的最终形态相距甚远。 混合云配图1.jpg 目前企商在线搭建混合云平台，可以根据用户需求，进行私有云部署、和公有云业务。...不难看出云计算目前形式炙手可热，但也能够看出目前在传统行业不管是私有云搭建还是公有云的部署并没有很被认可，业务层次不够深入。
虚拟私有云也是类似的情况，虚拟私有云计算(VPC)之于公有云计算有如虚拟私有网络(Virtual Private Network, V**)之于公共网络。...但是在选择部署虚拟私有云之前，了解并权衡虚拟私有云与本地私有云之间的差异性非常重要。 虚拟私有云的优势 除了更独立的性质之外，虚拟私有云可以将公有云定位为数据中心的扩展。...消除构建本地私有云的复杂性 虚拟私有云 VS 本地私有云 企业选择虚拟私有云而不是构建本地私有云的原因是从头开始构建私有云将会非常困难。...本地私有云的成本和有效性也不尽相同，一些构建私有云的工具和标准虚拟机管理程序基本上都是廉价的云，花费数百万美元构建私有云价值并不高。...大多数云服务提供商都愿意与公有云共同实现混合云模式，而AWS则更倾向于实现虚拟私有云。” 虚拟私有云可以完全在AWS内，或者组织也可以将私有的本地资源与公有云连接，以实现混合部署。
现在我们很高兴宣布PowerScale和ECS将通过CDP私有云（PvC）基本版的Cloudera质量保证测试套件（QATS）认证流程向前推动。...PowerScale和ECS作为CDP私有云基础的存储层 Cloudera的质量保证测试套件（QATS）是一系列功能测试，将在最新版本的CDP PvC Base和Dell / EMC OneFS（PowerScale...*为清楚起见，当前认证的范围涵盖CDP-私有云基础版。将来将考虑CDP私有云体验的认证。 认证过程旨在验证各种云、存储和计算平台上的Cloudera产品。...对于现有的CDH和HDP客户，下表突出显示了新的CDP PvC Base平台的功能： CDH客户的新功能Ranger 2.0•动态行过滤和动态列掩码•基于属性的访问控制•SparkSQL细粒度的访问控制...HDFS的10倍可扩展性•支持十亿个对象，S3原生支持安全•使用Knox的基于网关的SSO•支持Ranger KMS-KeyTrustee集成 HDP客户的新功能Cloudera Manager•虚拟私有集群
关于私有云 随着IT规模的发展与增长，后续的IT发展方向可以以私有云的建设为核心进行。通过在池化的IT资源基础上创建抽象层，私有云彻底变革了业务流程与消耗IT服务的方式。...什么是私有云 私有云是一种计算模型，它使用专用于组织的资源。私有云与公共云具有许多相同的特性，包括以标准方式提供的资源共用、自助服务、弹性和按使用付费，并且专用资源提供附加控制和自定义。...最重要的是，私有云承诺通过提高工作 负荷密度和资源使用率超越虚拟化基础结构的成本效益。...私有云通常具备下列特征： 池化资源 在私有云中，资源会进行池化处理，这样不同业务单元就能更高效地利用，并实现更高扩展性。...控制与定制 私有云是构建在专属的资源之上，这意味着对整个云的架构将具备更多控制与定制能力。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
腾讯会议
云直播
对象存储
