首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Apache Hadoop版本详解

1.Apache HadoopApache版本衍化 截至目前(2012年12月23日),ApacheHadoop版本分为两代,我们将第一代Hadoop称为Hadoop 1.0,第二代Hadoop称为Hadoop2.0...Apache版本下载 (1)各版本说明:http://hadoop.apache.org/releases.html。 (2)下载稳定版:找到一个镜像,下载stable文件夹下的版本。...2.Cloudera HadoopCDH版本衍化 Apache当前的版本管理是比较混乱的,各种版本层出不穷,让很多初学者不知所措,相比之下,Cloudera公司的Hadoop版本管理的要很多。...截至目前为止,CDH共有4个版本,其中,前两个已经不再更新,最近的两个,分别是CDH3(在Apache Hadoop0.20.2版本基础上演化而来的)和CDH4在Apache Hadoop2.0.0版本基础上演化而来的...最新的稳定版分别是Hadoop1.0.4和CDH3U4,因此,你可以从中任选一个使用。

3.1K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Apache Hudi 0.15.0 版本发布

    迁移指南 此版本保留与 0.14.0 版本相同的表版本 (6),如果从 0.14.0 升级,则无需升级表版本。...有一些模块和 API 更改以及行为更改,如下所述,用户在使用 0.15.0 版本之前应采取相应的操作。 如果从旧版本(0.14.0 之前)迁移,请按顺序查看每个旧版本的升级说明。...该配置现已弃用,并将在下一个版本后删除。...此配置可用于 kafka 主题更改等场景,在这些场景中,我们希望在切换主题后从最新或最早的偏移量开始引入(在这种情况下,我们希望忽略先前提交的检查点,并依赖其他配置来选择起始偏移量)。...引用链接 [1] 版本亮点: [https://hudi.apache.org/releases/release-0.15.0/#release-highlights](https://hudi.apache.org

    41310

    Apache Hudi 0.9.0 版本发布

    下载信息 源码地址: Apache Hudi 源码 版本相关jar包: here 版本迁移指南 如果从旧版本进行迁移,还请检查下面每个后续版本的升级说明 在0.9.0中,Hudi添加了更多的表属性...类似地,还添加了一个用于降级的命令行工具(command-downgrade),因为可能有些用户想要将Hudi从表版本2降级到表版本1,或者从Hudi 0.9.0移动到0.9.0之前。...版本亮点 Spark SQL DDL/DML支持 Apache Hudi 0.9.0实验性地支持使用Spark SQL进行DDL/DML操作,朝着让所有用户(非工程师、分析师等)更容易访问和操作Hudi...org.apache.hudi.client.validator.SqlQueryEqualityPreCommitValidator[8]可用于验证提交前后行的数据行相同 org.apache.hudi.client.validator.SqlQueryInequalityPreCommitValidator...通过支持不同的 Hive 版本(1.x、2.x、3.x),大大改善了 Hive 同步。

    1.3K20

    Apache Kylin最新的Streaming OLAP实现

    Apache Kylin是第一个来自中国的Apache顶级开源项目,连续两年获得了InfoWorld最佳开源大数据工具奖,2016年更是与Google TensorFlow一起获得该奖。...Apache Kylin的架构 我们会要求把数据放在Hadoop上,用Hive呈现出来。在Kylin里面定义整个元数据,在一个企业里面不是工程师去做,而应该是BI人员或者分析师去做。...当然,这里带来的问题是要写很多的手工配置,如下图是1.5版本。 在2016年11月的时候改了很多东西。最开始是怎么处理的?...其他的改进: 自动寻找开始和结束的offset 支持嵌套式JSON消息 支持自定义时间格式 允许多segment并行构建/合并 通过Rest API触发 Kylin Streaming 先决条件 Kafka版本不能太低...声明:"Apache and Apache Kylin are either registered trademarks or trademarks of The Apache Software Foundation

    1.1K70

    Apache Druid 0.15.0版本发布

    0.15.0版本具有250多项新功能和性能/稳定性/文档增强功能。与往常一样,请访问Apache Druid下载页面以获取该软件和发行说明。...01 一个新的Data Loader Apache社区对Druid的一个共同需求是简化数据摄取过程,在本版本之前这个过程是需要手动配置数据摄取任务的。...这些支持会在后续的版本中逐渐放出。如果您现在就要对接这些实时数据,可以参考使用Apache Druid Kafka Indexing Service或其他Druid的服务来完成实时数据的加载。...02 Druid 的 SQL 能力的增强 Apache Druid在0.10.0版本推出了实验性的Druid SQL, 现在它可以作为一个标准的查询接口,你几乎可以抛弃以往的使用Druid经典查询方法(...从0.10.0版本开始,Druid的每一个版本都在完善对SQL的支持能力,在0.15版本中也不例外。

    2.3K10

    【重磅】Apache InLong(incubating) 发布 0.10.0 版本

    Apache InLong(incubating) 刚刚发布了 0.10.0 版本,该版本是升级为 InLong(应龙) 后的第二个版本,着力解决InLong应用门槛高问题。...PART TWO Apache InLong(incubating) 0.10.0版本简介 我们从上个版本( 0.9.0 )始,将 TubeMQ 升级为 InLong ,第一次将全链路数据接入能力开源出来...PART FOUR Apache InLong(incubating) 后续规划 在 InLong 后续版本规划中,我们会进一步释放 InLong 的能力,覆盖更多的使用场景,主要包括 支持 Apache...在过去的一个版本Apache InLong 新增国内外贡献者 6 名,实现快速增长。...Apache 社区 2019年11月3日,进入 Apache 社区孵化 2020年5月30日,按照 Apache 社区规范发布第一个社区版本 2020年12月20日,进行项目改名讨论和投票 2021年

    51710

    Apache Kafka 版本演进及特性介绍

    比如Kafka 2.1.1,大版本就是2,小版本是1,Patch版本为1,是为修复Bug发布的第1个版本。...截止目前,最新版本是Kafka 2.4.0,也是最新稳定版本。 0.7.x版本 这是很老的Kafka版本,它只有基本的消息队列功能,连消息副本机制都没有,不建议使用。...新旧版本Producer API如下: //旧版本Producer kafka.javaapi.producer.Producer //新版本Producer org.apache.kafka.clients.producer.KafkaProducer...选择一个自己熟悉且稳定的版本,如果说没有比较熟悉的版本,建议选择一个较新且稳定、使用比较广泛的版本。...主要参考: 1. https://www.cnblogs.com/huxi2b/ 2. http://kafka.apache.org/downloads及相关的Release记录 本文重点总结了Kafka

    5K30
    领券