ApacheHudi

腾讯云

开发者社区

文档建议反馈控制台

首页

文章/答案/技术大牛

发布

LV1

发表了文章 9天前2025-04-14 03:02:36

Uptycs: 构建快如闪电的分析

在 Uptycs，我们的数据平台架构多年来随着几乎所有数据平台的自然发展而发展。最初我们的架构围绕在线事务处理（OLTP）数据库（在我们的例子中主要是 P...

ApacheHudi 9天前2025-04-14 03:02:36

数据湖、工作、事件、数据、数据库

发表了文章 18天前2025-04-05 06:08:20

2025 年 3月 Apache Hudi 社区新闻

欢迎阅读由 Onehouse.ai[1] 为您带来的 2025 年 3 月 Hudi 通讯！本月，我们为您带来新一轮的项目更新、社区焦点和技术深度探讨，这些内容...

ApacheHudi 18天前2025-04-05 06:08:20

存储、架构、数据、同步、apache

发表了文章 30天前2025-03-24 08:45:30

详解 Apache Hudi 的记录合并

与流式处理工作负载相关的主要挑战之一是传入事件的无序性质。在典型的流式处理方案中，由于网络延迟、处理延迟或其他因素，事件可能会不按顺序到达。随着从各种来源（尤其...

ApacheHudi 30天前2025-03-24 08:45:31

压缩、apache、事件、数据、系统

发表了文章 2025-03-032025-03-03 13:49:54

抖音集团数据湖表优化与管理实践

抖音集团内部使用的数据湖格式称为 ByteLake，它是基于 Apache Hudi 深度定制的一个数据库框架，其核心功能包括支持 ACID、增量消费更新和湖仓...

ApacheHudi 2025-03-032025-03-03 13:49:54

服务、管理、实践、优化、数据湖

发表了文章 2025-02-182025-02-18 05:43:59

一文详解开放数据湖的并发控制

并发控制在数据库管理系统中至关重要，以确保多个用户对共享数据的一致且安全的访问。关系数据库（RDBMS），例如MySQL（InnoDB）[1]和分析数据库（例如...

ApacheHudi 2025-02-182025-02-18 05:43:59

服务、事务、数据、数据湖、并发

发表了文章 2025-02-062025-02-06 05:03:52

2025 年 1 月 Apache Hudi 社区新闻

欢迎阅读2025年1月的Hudi简报，由Onehouse.ai[1]为您带来！随着我们迈入新的一年，Hudi生态系统继续发展壮大，带来新的项目更新、社区贡献和实...

ApacheHudi 2025-02-062025-02-06 05:03:52

apache、数据湖、并发、博客、入门

发表了文章 2025-01-202025-01-20 13:02:06

加速 Lakehouse 表性能完整指南

数据Lakehouse的概念是由 Uber 的一个团队于 2016 年首创，当时该团队试图解决存储大量大容量更新插入数据的问题。该项目最终成为Apache Hu...

ApacheHudi 2025-01-202025-01-20 13:02:07

数据、索引、性能、存储、服务

发表了文章 2025-01-132025-01-13 04:29:14

流式高频写入：Apache Hudi 非阻塞并发控制详解

在流式摄取场景中，有很多使用案例需要从多个流式源进行并发摄取。用户可以将所有上游源输入合并到一个下游表中，以收集记录，以便跨联合查询进行统一访问。另一种非常常见...

ApacheHudi 2025-01-132025-01-13 04:29:14

压缩、apache、并发、布局、服务

发表了文章 2024-12-232024-12-23 05:21:41

Apache Hudi 1.0 重点特性及下一代Lakehouse详解

我们很高兴地宣布 Apache Hudi 1.0 的发布，这是我们充满活力的社区取得的里程碑式成就，它定义了下一代数据湖仓一体应该实现的目标。Hudi 在 20...

ApacheHudi 2024-12-232024-12-23 05:21:41

数据湖、数据、索引、apache、存储

发表了文章 2024-12-202024-12-20 08:58:31

Apache Hudi 1.0.0 版本正式发布

Apache Hudi 1.0.0 是 Apache Hudi 的一个重要里程碑版本。此版本包含重要的格式更改和令人兴奋的新功能。

ApacheHudi 2024-12-202024-12-20 08:58:31

迁移、并发、索引、统计、apache

发表了文章 2024-12-202024-12-20 08:58:01

2024 年 11 月 Apache Hudi 社区新闻

最新发布的 Hudi-rs 0.2.0 延续了首个版本的势头，为 Rust 和 Python 生态系统中的数据湖平台带来了更多功能。Hudi-rs 让无需 JV...

ApacheHudi 2024-12-202024-12-20 08:58:01

存储、数据湖、博客、数据、apache

发表了文章 2024-12-092024-12-09 03:15:45

Apache Hudi 从零到一：增量处理（八）

导读本文介绍了 Apache Hudi 从零到一：增量处理（八）。本文翻译自原英文博客 https://blog.datumagic.com/p/apache...

ApacheHudi 2024-12-092024-12-09 03:15:45

apache、存储、架构、日志、数据

发表了文章 2024-12-052024-12-05 06:07:18

存储 2000 亿个实体：Notion 的数据湖项目

自 2021 年以来，著名的生产力应用程序 Notion 的数据增长了惊人的 10 倍。

ApacheHudi 2024-12-052024-12-05 06:07:19

存储、数据处理、数据湖、工作、数据

发表了文章 2024-11-262024-11-26 01:10:57

开放表格式的历史和演变 - 第二部分

在第一部分中[1]，我们介绍了传统表管理系统的起源和架构，以及第一代开放表格式（OTF）。在最后一部分中，我将讨论第二代和第三代 OTF。

ApacheHudi 2024-11-262024-11-26 01:10:57

数据湖、表格、日志、事件、数据

发表了文章 2024-11-232024-11-23 05:03:15

开放表格式的历史和演变 - 第一部分

如果在过去几年中一直在关注数据工程领域的趋势，那么肯定已经听说过很多关于 Open Table Formats 和 Data Lakehouse 的信息。

ApacheHudi 2024-11-232024-11-23 05:03:15

表格、管理、架构、数据、存储

发表了文章 2024-11-232024-11-23 05:02:33

2024 年 10 月 Apache Hudi 社区新闻

重磅！Hudi团队发布了首个预览版《Apache Hudi权威指南》[1]。无论您是Hudi的多年用户，还是刚刚开始了解Hudi的功能，本指南都将帮助您构建稳健...

ApacheHudi 2024-11-232024-11-23 05:02:34

工程师、数据、同步、apache、博客

发表了文章 2024-11-232024-11-23 05:01:57

如何优化开放数据湖仓一体的性能

虽然采用湖仓一体架构提供了这些切实的好处，但重要的是要认识到这只是旅程的第一步。随着越来越多的数据被摄取到存储中，无论是 Amazon S3、GCS 或 Azu...

ApacheHudi 2024-11-232024-11-23 05:01:57

性能、优化、数据湖、排序、数据

发表了文章 2024-11-232024-11-23 05:01:17

不同表格式如何表示规范文件集？

所有表格式都在元数据文件中存储对一组规范数据和删除数据集的引用。每种表格格式采用的方法略有不同，但大致可以将它们分为两类：

ApacheHudi 2024-11-232024-11-23 05:01:17

日志、数据、存储、表格、客户端

发表了文章 2024-11-232024-11-23 05:00:33

G行基于 Apache Hudi 的实时数据湖架构与实践

近年来，随着银行业务尤其是互联网金融业务的不断发展，金融业务数据量持续快速增长。同时，基于大数据、云计算、湖仓一体等技术体系的成熟，数据资产和价值挖掘得到越来越...

ApacheHudi 2024-11-232024-11-23 05:00:33

apache、数据湖、架构、实践、数据

发表了文章 2024-11-232024-11-23 04:59:39

一文聊透开放表格式和开放数据Lakehouse

三个项目 - Apache Hudi、Apache Iceberg 和 Delta Lake - 现在是该领域所有关注和供应商的中心。这些项目对于为数据打造一个...

ApacheHudi 2024-11-232024-11-23 04:59:39

存储、数据湖、表格、架构、数据

12 3 4 5 6 7 8...12 下一页

个人简介

暂未填写公司和职称
暂未填写个人简介
暂未填写技能专长
暂未填写学校和专业
暂未填写个人网址
暂未填写所在城市
加入社区时间：2019-12-25

个人成就

获得 470 次赞同
文章被阅读 273.5K 次

关注了：1关注者：97