大数据Doris（十五）：Doris分区Partition

第一层是 Partition，即分区。用户可以指定某一维度列作为分区列，并指定每个分区的取值范围，分区支持 Range 和 List 的划分方式。

数据中台建设（二）：数据中台简单介绍

2014年马云正式提出“DT(Data Technology)”的概念，人类从IT时代走向DT时代，阿里内部的数据平台事业部大刀阔斧的建立整个集团的数据资产，同...

2021年大数据Spark（二十一）：Spark Core案例-SogouQ日志分析

使用搜狗实验室提供【用户查询日志(SogouQ)】数据，使用Spark框架，将数据封装到RDD中进行业务数据处理分析。数据网址：http://www.sogou...

大数据调度平台Airflow（六）：Airflow Operators及案例

Airflow中最重要的还是各种Operator，其允许生成特定类型的任务，这个任务在实例化时称为DAG中的任务节点，所有的Operator均派生自BaseOp...

VMware14安装CentOS7的详细教程

本篇文章主要介绍了VMware安装Centos7超详细过程（图文），具有一定的参考价值，感兴趣的小伙伴们可以参考一下

大数据Spark（五十八）：Spark Pi介绍

Spark Pi是Apache Spark官方提供的一个示例程序，该案例使用 Spark 进行分布式计算，通过蒙特卡罗方法估算圆周率（π）的值，其估算π原理如下...

大数据Spark（五十七）：Spark运行架构与MapReduce区别

Apache Spark 和 Hadoop MapReduce 都是用于大规模数据处理的分布式计算框架，但它们在架构设计、数据处理方式和应用场景等方面存在显著差...

大数据Spark（五十六）：Spark生态模块与运行模式

Spark 生态模块包括：SparkCore、SparkSQL、SparkStreaming、StructuredStreaming、MLlib 和 Graph...

大数据Spark（五十五）：Spark框架及特点

Apache Spark 是一个专为大规模数据处理而设计的快速、通用的计算引擎。最初由加州大学伯克利分校的 AMP 实验室（Algorithms, Machin...

大数据Azkaban（三）：Azkaban编译及报错问题解决

Azkaban官方并没有提供Linux系统的编译安装包，需要读者根据需求在官网选择指定版本的Azkaban源文件，然后进行编译打包。 ...

大数据Azkaban（二）：Azkaban简单介绍

Azkaban通过作业的依赖性解决业务调度顺序，并提供易于使用的UI界面来维护和跟踪工作流程，其主要特点如下：

大数据Azkaban（一）：工作流管理器概述

无论是在业务开发还是在大数据开发中，工作流管理是必不可少的，在初期可以使用Linux自带的crontab工具来定时调度任务，但是当业务规模变大并且需要可视化监控...

云原生（六十） | Web源码迁移部署

在 CentOS 7 上使用 Remi 仓库安装 PHP 7.4，您可以按照以下步骤操作 安装 EPEL 仓库：

云原生（五十四） | RDS数据导入与导出

思考：我们刚才的操作都是通过SQL语句实现的，如果我们要导入的文件是以SQL、CSV或Excel等形式存储，应该如何导入呢？

云原生（五十三） | SQL查询操作

案例：基于DMS在db_xxxx数据库中创建tb_students数据表，包含字段id、name、age、gender、mobile信息

云原生（五十二） | DataGrip软件使用

云原生（五十一） | MySQL Client客户端连接服务器

DataGrip是JetBrains公司推出的管理数据库的产品（数据库客户端软件），功能非常强大，可以兼容各种数据库。它的设计符合数据库管理员、开发人员需要。用...

云原生（四十八） | Nginx软件安装部署

云原生（四十七） | PHP软件安装部署

在 CentOS 7 上使用 Remi 仓库安装 PHP 7.4，您可以按照以下步骤操作 安装 EPEL 仓库：

云原生（四十六） | MySQL软件安装部署

注： 如果安装过程中报错Public key for mysql-community-icu-data-files-8.0.29-1.el7.x86_64.rp...