文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布
首页
学习
活动
专区
圈层
工具
MCP广场
返回腾讯云官网
社区首页 >专栏 >030.Zabbix分布式部署

030.Zabbix分布式部署

作者头像
木二
发布于 2019-07-26 01:37:38
发布于 2019-07-26 01:37:38
1.1K00
举报
文章被收录于专栏：木二天空木二天空
运行总次数：0
关联问题
换一批

一 分布式Zabbix介绍

zabbix proxy 可以代替 zabbix server 收集性能和可用性数据,然后把数据汇报给 zabbix server,并且在一定程度上分担了zabbix server 的压力。

此外，当所有agents和proxy报告给一个Zabbix server并且所有数据都集中收集时，使用proxy是实现集中式和分布式监控的最简单方法。

zabbix proxy 使用场景:

  • 监控远程区域设备
  • 监控本地网络不稳定区域
  • 当 zabbix 监控上千设备时,使用它来减轻 server 的压力
  • 简化分布式监控的维护

二 分布式Zabbix架构

2.1 架构示意图

2.2 环境准备

节点主机名

IP地址

备注

zabbixserver

172.24.8.71/24

Zabbix服务器

zabbixpoxy01

172.24.8.72/24

Zabbix poxy代理服务器1

zabbixpoxy02

172.24.8.73/24

Zabbix poxy代理服务器2

node01

172.24.8.74/24

模拟poxy1所监控的服务器node01

node02

172.24.8.75/24

模拟poxy2所监控的服务器node02

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 # systemctl stop firewalld
  2 # systemctl disable firewalld
  3 # setenforce 0
  4 # sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config
  5 # vi /etc/hosts			#添加在server和proxy节点添加以下主机名配置
  6 172.24.8.71     zabbixserver
  7 172.24.8.72     zabbixpoxy01
  8 172.24.8.73     zabbixpoxy02

提示：可关闭防火墙和SELinux，若没有关闭可参考《004.Zabbix3.2-Server服务端安装》进行相应放通。

2.3 工作模式

  • 被动模式

Passive（被动模式），zabbix-server和zabbix-agent之间的通信是zabbix的专用协议，数据格式为JSON。默认情况下，zabbix-agent工作在被动模式下，工作的模式是由Key和zabbix_agentd.conf参数配置决定的。

  • 被动模式的流程
  1. Server打开一个TCP连接。
  2. Server发送一个key为agent.ping\n。
  3. Agent接收到这个请求，然后响应数据<HEADER><DATALEN>1.
  4. Server对接收到的数据进行处理。
  5. TCP连接关闭。
  • 主动模式

　　Active(主动模式），主动模式由于是Agent将采集到的数据主动发送给Server，而不需要Server每次连接Agent等待采集，所以采用主动模式会使Zabbix-Server具有最好的性能。在大型环境下，一定要将工作模式设置为主动模式，并尽可能采用更多的proxy以降低Server的负担，一般多机房，每个机房肯定都要设置proxy的。

  • 主动模式的流程
  1. Agent向Server建立一个TCP的连接。
  2. Agent请求需要检测的数据列表。
  3. Server响应Agent，发送一个Items列表（item key、delay）。
  4. Agent响应请求。
  5. TCP连接完成本次会话后关闭。
  6. Agent开始周期性的收集数据。

提示：本环境采用主动模式，即Zabbix Agent---->Zabbix Proxy---->Zabbix Server。

无论是主动模式还是被动模式都是对zabbix客户端（zabbix_agentd）来说的,许多设备都是通过snmp协议进行监控的，是无法实行主动监控，因为监控类型不支持。

2.4 模式配置

被动模式设置主要参数

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 Server=172.24.8.71			#被动模式下的Zabbix服务端地址
  2 ListenPort=10050
  3 ServerActive=172.24.8.71		#主动模式下的Zabbix服务端地址，若纯被动模式可注释此行

主动模式设置主要参数

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 Server=127.0.0.1,172.24.8.71	#被动模式下的Zabbix服务端地址，若纯主动模式可注释此行
  2 StartAgents=0
  3 ServerActive=172.24.8.71		#主动模式下的Zabbix服务端地址

三 部署Zabbix-Proxy

3.1 安装Zabbix官方源和epel源

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@proxy01 ~]# yum -y install epel-release.noarch
  2 [root@proxy01 ~]# rpm -ivh http://repo.zabbix.com/zabbix/4.0/rhel/7/x86_64/zabbix-release-4.0-1.el7.noarch.rpm

3.2 安装Zabbix-proxy等组件

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@proxy01 ~]# yum install -y zabbix-proxy zabbix-proxy-mysql mariadb mariadb-server zabbix-agent

注意：1 Zabbix官方的yum源为：http://repo.zabbix.com/zabbix/3.2/rhel/7/x86_64/。

2 服务器端也需要监控，因此也安装Zabbix-Agent。

3.3 简单优化MariaDB

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@proxy01 ~]# vi /etc/my.cnf
  2 [mysqld]
  3 datadir=/var/lib/mysql
  4 socket=/var/lib/mysql/mysql.sock
  5 symbolic-links=0
  6 character-set-server=utf8		#设置字符集为utf8
  7 innodb_file_per_table=1		#设置innodb的每个表文件单独存储
  8 [mysqld_safe]
  9 log-error=/var/log/mariadb/mariadb.log
 10 pid-file=/var/run/mariadb/mariadb.pid
 11 ……
 12 [root@proxy01 ~]# systemctl enable mariadb		#设为开机启动
 13 [root@proxy01 ~]# systemctl start mariadb		#开启MariaDB数据

3.4 设置数据库相关项

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@proxy01 ~]# mysql_secure_installation		#设置安全性，并设置数据库root密码
  2 [root@proxy01 ~]# mysql -u root -p
  3 MariaDB [(none)]> create database zabbixproxydb character set utf8 collate utf8_bin;

注意：1 若之后忘记该密码可使用以下命令修改密码——

UPDATE zabbixproxydb.user SET passwd=md5('proxy') WHERE alias='Admin'

3.5 导入数据库相关表

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@proxy01 ~]# cd /usr/share/doc/zabbix-proxy-mysql-4.0.0/    #进入数据库模板所在目录
  2 [root@proxy01 zabbix-proxy-mysql-4.0.0]# ls
  3 AUTHORS  ChangeLog  COPYING  NEWS  README  schema.sql.gz
  4 [root@proxy01 zabbix-proxy-mysql-4.0.0]# zcat schema.sql.gz | mysql -uroot -p zabbixproxydb

注意：也可以gunzip create.sql.gz解压后使用mysql -uroot -p zabbixproxydb< create.sql恢复模板。

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 MariaDB [(none)]> show databases;
  2 MariaDB [(none)]> use zabbixproxydb;
  3 MariaDB [zabbixproxydb]> show tables;			#查看数据表
  4 MariaDB [zabbixproxydb]> exit

3.6 配置zabbix_proxy.conf项

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@proxy01 ~]# vi /etc/zabbix/zabbix_proxy.conf
  2 ProxyMode=0        # 默认即为0，代表 Proxy 处于主动模式，即 Proxy 主动去请求 Zabbix Server 获取监控项；1 代表被动模式
  5 Server=127.0.0.1,172.24.8.71		#若为纯主动模式需要注释此行
  6 ServerActive=172.24.8.71			#主动模式，Proxy主动向Server传送数据
  7 ServerPort=10051                            # 默认即为10051，Zabbix Server 监听端口，同上只在 Proxy 为主动模式时生效
  9 
 10 Hostname=zabbixpoxy01                       # Server端添加proxy的时候需要一致，建议采用主机名
 12 LogFile=/var/log/zabbix/zabbix_proxy.log	# Proxy 日志文件位置
 13 LogFileSize=0
 14 PidFile=/var/run/zabbix/zabbix_proxy.pid
 15 DBHost=localhost               		# 连接数据库的主机
 16 DBName=zabbixproxydb			# 数据库名
 17 DBUser=proxy				# 连接用户
 18 DBPassword=x120952576           		# 用户密码
 19 ConfigFrequency=60  # proxy主动从server端检索配置更新的频率，单位秒，主动proxy 参数， 被动 proxies忽略此项
 21 DataSenderFrequency=60                      # Proxy 向 Zabbix Server 发送监控数据间隔，单位为秒
 23 Timeout=4

提示：对于DBHost，强烈建议不要喝Server端相同，避免损毁Server端数据库;更多参数解释参考官方文档：https://www.zabbix.com/documentation/3.4/zh/manual/appendix/config/zabbix_proxy

3.7 Proxy自身agent配置

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@imxhy02 ~]# vi /etc/zabbix/zabbix_agentd.conf
  2 PidFile=/var/run/zabbix/zabbix_agentd.pid
  3 LogFile=/var/log/zabbix/zabbix_agentd.log
  4 LogFileSize=0
  5 Server=127.0.0.1,172.24.8.71		#若为纯主动模式需要注释此行
  6 ServerActive=172.24.8.71			#主动模式，proxy自身主Server传送数据
  7 Hostname=zabbixserver			#zabbix server web上添加自身需要用到

提示：为防止proxy异常导致监控故障，Server端需要监控Proxy。

3.8 zabbix启动级开机启动

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@proxy01 ~]# systemctl start zabbix-proxy.service
  2 [root@proxy01 ~]# systemctl enable zabbix-proxy.service
  3 [root@proxy01 ~]# systemctl start zabbix-agent.service
  4 [root@proxy01 ~]# systemctl enable zabbix-agent.service

提示：Proxy02参考proxy01配置即可，hostname配置为Hostname=zabbixpoxy02。

四 部署Zabbix-Server

4.1 安装Zabbix官方源和epel源

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# rpm -ivh http://repo.zabbix.com/zabbix/4.0/rhel/7/x86_64/zabbix-release-4.0-1.el7.noarch.rpm
  2 [root@server ~]# ls /etc/yum.repos.d/			#查看Zabbix源是否安装成功
  3 epel.repo  epel-testing.repo  zabbix.repo

4.2 安装Zabbix Server等组件

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# yum -y install zabbix-get zabbix-server-mysql zabbix-web-mysql zabbix-web zabbix-agent mariadb mariadb-server

注意：1 Zabbix官方的yum源为：http://repo.zabbix.com/zabbix/3.2/rhel/7/x86_64/。

2 服务器端也需要监控，因此也安装Zabbix-Agent。

4.3 简单优化MariaDB

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# vi /etc/my.cnf
  2 [mysqld]
  3 datadir=/var/lib/mysql
  4 socket=/var/lib/mysql/mysql.sock
  5 symbolic-links=0
  6 character-set-server=utf8		#设置字符集为utf8
  7 innodb_file_per_table=1		#设置innodb的每个表文件单独存储
  8 [mysqld_safe]
  9 log-error=/var/log/mariadb/mariadb.log
 10 pid-file=/var/run/mariadb/mariadb.pid
 11 ……
 12 [root@server ~]# systemctl enable mariadb		#设为开机启动
 13 [root@server ~]# systemctl start mariadb		#开启MariaDB数据

4.4 设置数据库相关项

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# mysql_secure_installation		#设置安全性，并设置数据库root密码
  2 [root@server ~]# mysql -u root -p
  3 MariaDB [(none)]> create database zabbix character set utf8 collate utf8_bin;
  4 #创建数据库且字符集为utf8，使web界面显示中文不出现乱码
  5 MariaDB [(none)]> grant all privileges on zabbix.* to zabbix@'localhost' identified by 'x120952576';
  6 #创建zabbix数据库和Zabbix用户，且赋予此用户拥有此数据库全部权限。
  7 MariaDB [(none)]> flush privileges;
  8 MariaDB [(none)]> exit;

注意：1 若之后忘记该密码可使用以下命令修改密码——

UPDATE zabbix.user SET passwd=md5('zabbix') WHERE alias='Admin'

4.5 导入数据库相关表

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# cd /usr/share/doc/zabbix-server-mysql-4.0.0/	#进入数据库模板所在目录
  2 [root@server zabbix-server-mysql-4.0.0]# ls
  3 AUTHORS  ChangeLog  COPYING  create.sql.gz  NEWS  README
  4 [root@server zabbix-server-mysql-4.0.0]# zcat create.sql.gz | mysql -uroot -p zabbix  #将模板数据恢复至Zabbix数据库

注意：也可以gunzip create.sql.gz解压后使用mysql -uroot -p zabbix < create.sql恢复模板。

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# mysql -u zabbix -px120952576 zabbix -e "show tables"	#查看数据表项

4.6 配置Zabbix_server.conf项

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# vi /etc/zabbix/zabbix_server.conf
  2 LogFile=/var/log/zabbix/zabbix_server.log
  3 LogFileSize=0
  4 PidFile=/var/run/zabbix/zabbix_server.pid
  5 DBHost=localhost					#修改主机
  6 DBName=zabbix
  7 DBUser=zabbix
  8 DBPassword=x120952576				#修改DB密码(之前所创建密码)
  9 SNMPTrapperFile=/var/log/snmptrap/snmptrap.log
 10 Timeout=4
 11 AlertScriptsPath=/usr/lib/zabbix/alertscripts
 12 ExternalScripts=/usr/lib/zabbix/externalscripts
 13 LogSlowQueries=3000

4.7 Server自身agent配置

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# vi /etc/zabbix/zabbix_agentd.conf
  2 PidFile=/var/run/zabbix/zabbix_agentd.pid
  3 LogFile=/var/log/zabbix/zabbix_agentd.log
  4 LogFileSize=0
  5 Server=127.0.0.1,172.24.8.71			#若为纯主动模式需要注释此行
  6 ServerActive=172.24.8.71			        #主动模式，Server自身主动向自己传送数据
  7 Hostname=zabbixserver				#zabbix server web上添加自身需要用到

提示：为防止Server异常导致监控故障，Server端也需要被监控。

4.8 启动Zabbix服务

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# systemctl enable zabbix-server		#设为开机启动Zabbix服务
  2 [root@server ~]# systemctl start zabbix-server		#启动Zabbix服务
  3 [root@server ~]# systemctl start zabbix-agent		#需要监控自己，因此也开启agent
  4 [root@server ~]# systemctl enable zabbix-agent		#启动Zabbix服务

4.8 配置php

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# vi /etc/php.ini
  2 date.timezone= Asia/Shanghai
  3 max_execution_time = 300
  4 post_max_size = 16M
  5 memory_limit = 128M
  6 [root@server ~]# vi /etc/httpd/conf.d/zabbix.conf
  7 Alias /zabbix /usr/share/zabbix
  8 <Directory "/usr/share/zabbix">
  9     Options FollowSymLinks
 10     AllowOverride None
 11     Require all granted
 12     <IfModule mod_php5.c>
 13         php_value max_execution_time 300
 14         php_value memory_limit 128M
 15         php_value post_max_size 16M
 16         php_value upload_max_filesize 2M
 17         php_value max_input_time 300
 18         php_value max_input_vars 10000
 19         php_value always_populate_raw_post_data -1
 20         php_value date.timezone Europe/Riga
 21     </IfModule>
 22 </Directory>

注意：1 若之后配置web时，提示任何参数不满足安装配置要求，修改对应的参数后重启httpd即可；

2 yum安装可能zabbix.conf中已包含相关配置。

4.9 启动Apache服务

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# systemctl start httpd.service
  2 [root@server ~]# systemctl enable httpd.service

注意：此处建议为了防止不必要的问题，可关闭SELinux和防火墙。

4.10 Web界面配置

略，可参考《004.Zabbix3.2-Server服务端安装》。

4.11 Server端添加Proxy

登录Zabbix Server的Web后，管理---->agent代理程序---->创建代理

Proxy name ： 输入代理名称，它必须与代理配置文件中的Hostname参数中的名称相同。

Proxy mode ： 选择代理模式。

Proxy address ： 添加的代理主机IP地址。

Description： 输入代理描述。

提示：参考以上添加Proxy02节点。

五 部署Zabbix Agent节点

5.1 安装Zabbix官方源和epel源

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@node01 ~]# rpm -ivh http://repo.zabbix.com/zabbix/4.0/rhel/7/x86_64/zabbix-release-4.0-1.el7.noarch.rpm
  2 [root@node01 ~]# ls /etc/yum.repos.d/			#查看Zabbix源是否安装成功
  3 epel.repo  epel-testing.repo  zabbix.repo

5.2 安装Zabbix Agent等组件

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@node01 ~]# yum -y install zabbix-agent

注意：1 Zabbix官方的yum源为：http://repo.zabbix.com/zabbix/3.2/rhel/7/x86_64/。

2 node2参考node1部署即可。

5.3 node节点agent配置

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@server ~]# vi /etc/zabbix/zabbix_agentd.conf
  2 PidFile=/var/run/zabbix/zabbix_agentd.pid
  3 LogFile=/var/log/zabbix/zabbix_agentd.log
  4 LogFileSize=0
  5 Server=127.0.0.1,172.24.8.72			#若为纯主动模式需要注释此行
  6 ServerActive=172.24.8.72			        #主动模式，node01向proxy01主动传送数据
  7 Hostname=node01					#Zabbix server web上添加node需要用到

提示：为防止Server异常导致监控故障，Server端也需要被监控。

5.4 启动Zabbix服务

代码语言：javascript
代码运行次数：0
运行
AI代码解释
复制
  1 [root@node01 ~]# systemctl start zabbix-agent
  2 [root@node01 ~]# systemctl enable zabbix-agent		#启动Zabbix agent服务

提示：node2参考node1部署，Server主动模式改为：ServerActive=172.24.8.73，Hostname=node02即可。

六 添加主机

6.1 修改模板监控模式

配置---->模板---->Template OS Linux---->全克隆

在新克隆的模板中，将采集方式修改为主动式。

Linux系统模板---->监控项---->全选---->批量更新---->类型---->zabbix客户端（主动式）---->更新

提示：Zabbix自带监控模板的采集方式为被动式，需要修改为主动式。

Linux系统模板---->自动发现规则，需要将两个发现规则均改为主动式。

Mounted filesystem discovery自动发现规则修改为主动式。

Network interface discovery参考即可。

6.2 添加Server自身

略，Zabbix Server默认会添加自身节点。

6.3 添加Proxy节点

为了方便管理，可新建代理节点监控主机组。

配置---->主机---->添加主机

配置项

描述

主机名(Host name)

输入在agent配置文件中配置的主机名， 必须唯一且不重复且和host定义的Host name名称一致。

访问名(Visible name)

在主机列表、图表等地方显示的名字，需要utf-8支持。

群组(Groups in groups)

选择主机所属的群组，一个主机必须属于至少一个主机组。

新主机组(New group)

自动创建一个新的群组，并加入此群组。

接口协议

Zabbix支持的协议有：Agent、SNMP、JMX和IPMI，选择对应的即可。

IP地址(IP address)

需要监控的主机的IP地址

DNS名称(DNS name)

需要监控主机的DNS能够解析的名称

与agent的通信方式(Connect to)

连接要监控主机的IP地址/要监控主机能解析的DNS名称

端口(Port)

TCP协议的端口，Zabbix客户端使用的默认为10050

代理监控(Monitored by proxy)

可以通过Zabbix服务器或者Zabbix的一个代理去监控客户端

注意：推荐采用DNS监控，防止更换IP后某个网站无法监控（对固定域名的网站）。

为主机选择相应的模板

提示：Proxy02参考proxy01添加即可，主机名及接口地址配置为proyx02节点信息即可。

6.3 添加node节点

为了方便管理，可新建代理节点监控应用主机组。

配置---->主机---->添加主机

为主机选择相应的模板

提示：参考node01添加node02，node02节点由agent代理程序监测选择proxy02即可。

七 确认验证

7.1 查看log

进入相关节点的/var/log/zabbix/zabbix*.log可查看相关日志。

7.2 主机图形确认

登录Zabbix之后查看主机及图形

随机查看node01节点监控图形。

本文参与 腾讯云自媒体同步曝光计划，分享自作者个人站点/博客。
原始发表：2018-11-15 ，如有侵权请联系 cloudcommunity@tencent.com 删除
zabbix
node.js
网络安全
tcp/ip
linux

本文分享自 作者个人站点/博客 前往查看

如有侵权，请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ，欢迎热爱写作的你一起参与！

zabbix
node.js
网络安全
tcp/ip
linux
评论
登录后参与评论
暂无评论
登录 后参与评论
推荐阅读
五、Hadoop集群部署：从零搭建三节点Hadoop环境（保姆级教程）
配置hadoop部署集群教程
前言： 想玩转大数据，Hadoop集群是绕不开的一道坎。很多小伙伴一看到集群部署就头大，各种配置、各种坑。别慌！这篇教程就是你的“救生圈”。
IvanCodes
2025/09/28
1.1K0
五、Hadoop集群部署：从零搭建三节点Hadoop环境（保姆级教程）
hadoop-3.2.0------>入门十一 完全分布式配置
hadoopxmlbashbash 指令yarn
由于ResourceManager和NameNode还有SecondaryNameNode比较消耗资源，顾三个配置分别配置到不同的主机上
用户5899361
2020/12/07
1.1K0
hadoop-3.2.0------>入门十一 完全分布式配置
Hadoop完全分布式安装
xml分布式hadoopyarnnode.js
完全分布式安装部署，其实步骤上来说与伪分布式没有太大的区别，主要增加2台虚拟机部署称为一个3台的集群
我脱下短袖
2019/12/21
5420
Hadoop分布式部署
hadoopxmlsshmapreduceyarn
对于Hadoop Master（ResourceManager/NameNode）节点硬件配置要高一些
用户5252199
2022/04/18
5750
Hadoop分布式部署
深入浅出学大数据（二）Hadoop简介及Apache Hadoop三种搭建方式
hadoopTDSQL MySQL 版分布式node.jsxml
此系列主要为我的学弟学妹们所创作，在某些方面可能偏基础。如果读者感觉较为简单，还望见谅！如果文中出现错误，欢迎指正~
不温卜火
2021/09/29
2.1K0
深入浅出学大数据（二）Hadoop简介及Apache Hadoop三种搭建方式
一文教你快速了解伪分布式集群搭建(超详细!)
xmlhadoopbashbash 指令http
首先，我们需要知道配置伪分布式集群要修改的配置文件 所有配置文件都在 /opt/module/hadoop-2.7.2/etc/hadoop/内
不温卜火
2020/10/28
6720
一文教你快速了解伪分布式集群搭建(超详细!)
【快速入门大数据】Hadoop分布式集群搭建
xml分布式hadoophttpyarn
修改hadoop配置文件 /root/software/hadoop-2.6.0-cdh5.7.0/etc/hadoop
瑞新
2021/12/06
2860
【快速入门大数据】Hadoop分布式集群搭建
hadoop2.5.0完全分布式环境搭建（亲测有效）
hadoop分布式
      说在前头的一些东西，关于Linux本身环境本身的一些处理见如下链接，主要是讲Hadoop环境的前期准备：http://www.jianshu.com/p/d8720d0828dd
z小赵
2018/09/05
5220
Hadoop学习指南：探索大数据时代的重要组成——Hadoop运行模式(上）
hadoop大数据集群脚本配置
1）Hadoop 官方网站：http://hadoop.apache.org/ 2）Hadoop 运行模式包括：本地模式、伪分布式模式以及完全分布式模式。 ➢ 本地模式：单机运行，只是用来演示一下官方案例。==生产环境不用。 == ➢ 伪分布式模式：也是单机运行，但是具备Hadoop集群的所有功能，一台服务器模 拟一个分布式的环境。==个别缺钱的公司用来测试，生产环境不用。 == ➢ 完全分布式模式：多台服务器组成分布式环境。==生产环境使用。 ==
老虎也淘气
2024/01/30
3470
Hadoop学习指南：探索大数据时代的重要组成——Hadoop运行模式(上）
Hadoop 集群部署
部署集群配置分布式hadoop
Hadoop各个功能模块的理解 零. 概述 HDFS模块 HDFS负责大数据的存储，通过将大文件分块后进行分布式存储方式，突破了服务器硬盘大小的限制，解决了单台机器无法存储大文件的问题，HDFS是个相对独立的模块，可以为YARN提供服务，也可以为HBase等其他模块提供服务。
Freedom123
2024/03/29
3750
Windows上使用CentOS部署HA大数据环境
apacheflinkhttpshttpxml
http://mirrors.aliyun.com/centos/7/isos/x86_64/
码客说
2022/11/14
1.8K0
Windows上使用CentOS部署HA大数据环境
【快速入门大数据】hadoop和它的hdfs、yarn、mapreduce
大数据mapreducejavayarnnode.js
技术架构挑战 量大，无法用结构化数据库，关系型数据库 经典数据库没有考虑数据多类别 比如json 实时性的技术挑战 网络架构、数据中心、运维挑战
瑞新
2021/12/06
1.1K0
【快速入门大数据】hadoop和它的hdfs、yarn、mapreduce
大数据之Phonenix与Hbase集成
hbaseTDSQL MySQL 版编程算法jdbcxml
Phoenix是构建在HBase上的一个SQL层，能让我们用标准的JDBC APIs而不是HBase客户端APIs来创建表，插入数据和对HBase数据进行查询。 Phoenix完全使用Java编写，作为HBase内嵌的JDBC驱动。Phoenix查询引擎会将SQL查询转换为一个或多个HBase扫描，并编排执行以生成标准的JDBC结果集。直接使用HBase API、协同处理器与自定义过滤器，对于简单查询来说，其性能量级是毫秒，对于百万级别的行数来说，其性能量级是秒。 Phoenix通过以下方式使我们可以少写代码，并且性能比我们自己写代码更好：
码客说
2022/12/16
1.8K0
大数据之Phonenix与Hbase集成
hadoop之完全分布式集群配置（centos7）
hadoopbashbash 指令ssh
克隆好之后需要做三件事：1、更改主机名称 2、修改ip地址 3、将ip地址和对应的主机号加入到/etc/hosts文件中
西西嘛呦
2020/08/26
5450
hadoop之完全分布式集群配置（centos7）
Hadoop集群搭建
hadoop服务器集群脚本配置
'readonly' option is set (add ! to override) 查看5.1解决。
ha_lydms
2023/08/10
9690
Hadoop集群搭建
CentOS7搭建Hadoop-3.3.0集群
hadoop大数据jdkxmlssh
这篇文章是基于Linux系统CentOS7搭建Hadoop-3.3.0分布式集群的详细手记。
Throwable
2020/12/29
2.4K0
Hadoop完全分布式搭建
hadoop网络安全xmlzookeeperjdk
一、介绍 Hadoop2.0中，2个NameNode的数据其实是实时共享的。新HDFS采用了一种共享机制，Quorum Journal Node（JournalNode）集群或者Nnetwor
用户1263954
2018/06/22
1.4K0
大数据学习之路01——让Hadoop在MacOS上跑起来
hadoop大数据mac osjdkxml
解决方案：重新编译hadoop，将编译后的hadoop-dist/target/hadoop-2.8.4/lib/native替换$HADOOP_HOME/lib/native。
汪志宾
2019/05/16
3.1K0
大数据学习之路01——让Hadoop在MacOS上跑起来
hadoop2.6.0完全分布式手动安装
hadoopjavajdk
遇到的问题： 15/05/01 09:56:48 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable 下载：http://dl.bintray.com/sequenceiq/sequenceiq-bin/ 覆盖： tar -xvf hadoop-native-64-2.6.0.tar -C /home/cluster/hadoop/lib/native
字母哥博客
2020/09/23
3790
hadoop搭建完全分布式集群
hadoopbashbash 指令zookeeperssh
后面的启动步骤可以用一步来代替,进入hadoop安装目录的sbin目录，执行：start-dfs.sh 。但建议还是按部就班来执行，比较可靠。
许喜朝
2020/10/27
5690
推荐阅读
编辑精选文章
万字详解高可用架构设计Go 开发者必备：Protocol Buffers 入门指南10分钟带你彻底搞懂分布式链路跟踪多租户的 4 种常用方案亿级月活的社交 APP，陌陌如何做到 3 分钟定位故障？60页PPT全解：DeepSeek系列论文技术要点整理
相关讨论
国家大数据实验室落地哪里？大数据平台几种计算引擎配置和资源规划？大数据平台为什么不推荐采用k8s作为计算集群控制？
相关课程
AI绘画-StableDiffusion图像生成腾讯云WeData大数据开发与治理训练营AI驱动的TDSQL-Cserverless实战营
五、Hadoop集群部署：从零搭建三节点Hadoop环境（保姆级教程）
1.1K0
hadoop-3.2.0------>入门十一 完全分布式配置
1.1K0
Hadoop完全分布式安装
5420
Hadoop分布式部署
5750
深入浅出学大数据（二）Hadoop简介及Apache Hadoop三种搭建方式
2.1K0
一文教你快速了解伪分布式集群搭建(超详细!)
6720
【快速入门大数据】Hadoop分布式集群搭建
2860
hadoop2.5.0完全分布式环境搭建（亲测有效）
5220
Hadoop学习指南：探索大数据时代的重要组成——Hadoop运行模式(上）
3470
Hadoop 集群部署
3750
Windows上使用CentOS部署HA大数据环境
1.8K0
【快速入门大数据】hadoop和它的hdfs、yarn、mapreduce
1.1K0
大数据之Phonenix与Hbase集成
1.8K0
hadoop之完全分布式集群配置（centos7）
5450
Hadoop集群搭建
9690
CentOS7搭建Hadoop-3.3.0集群
2.4K0
Hadoop完全分布式搭建
1.4K0
大数据学习之路01——让Hadoop在MacOS上跑起来
3.1K0
hadoop2.6.0完全分布式手动安装
3790
hadoop搭建完全分布式集群
5690
相关推荐
五、Hadoop集群部署：从零搭建三节点Hadoop环境（保姆级教程）
更多 >
张哥编程0
LV.3
东方资本CEO
文章
1.3K
获赞
1.1K
排名
535
专栏
3
目录
  • 一 分布式Zabbix介绍
  • 二 分布式Zabbix架构
    • 2.1 架构示意图
    • 2.2 环境准备
    • 2.3 工作模式
    • 2.4 模式配置
  • 三 部署Zabbix-Proxy
    • 3.1 安装Zabbix官方源和epel源
    • 3.2 安装Zabbix-proxy等组件
    • 3.3 简单优化MariaDB
    • 3.4 设置数据库相关项
    • 3.5 导入数据库相关表
    • 3.6 配置zabbix_proxy.conf项
    • 3.7 Proxy自身agent配置
    • 3.8 zabbix启动级开机启动
  • 四 部署Zabbix-Server
    • 4.1 安装Zabbix官方源和epel源
    • 4.2 安装Zabbix Server等组件
    • 4.3 简单优化MariaDB
    • 4.4 设置数据库相关项
    • 4.5 导入数据库相关表
    • 4.6 配置Zabbix_server.conf项
    • 4.7 Server自身agent配置
    • 4.8 启动Zabbix服务
    • 4.8 配置php
    • 4.9 启动Apache服务
    • 4.10 Web界面配置
    • 4.11 Server端添加Proxy
  • 五 部署Zabbix Agent节点
    • 5.1 安装Zabbix官方源和epel源
    • 5.2 安装Zabbix Agent等组件
    • 5.3 node节点agent配置
    • 5.4 启动Zabbix服务
  • 六 添加主机
    • 6.1 修改模板监控模式
    • 6.2 添加Server自身
    • 6.3 添加Proxy节点
    • 6.3 添加node节点
  • 七 确认验证
    • 7.1 查看log
    • 7.2 主机图形确认
加入讨论
的问答专区 >
不惑
产品KOL擅长5个领域
相关课程
一站式学习中心 >
AI绘画-StableDiffusion图像生成
1726人在学
腾讯混元生图
高性能应用服务
腾讯云WeData大数据开发与治理训练营
1618人在学
数据开发治理平台 WeData
AI驱动的TDSQL-Cserverless实战营
1443人在学
云原生数据库 TDSQL-C
领券

腾讯云开发者

扫码关注腾讯云开发者

扫码关注腾讯云开发者

领取腾讯云代金券

热门产品

热门推荐

更多推荐

Copyright © 2013 - 2025 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有 

深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 深公网安备号 44030502008569

腾讯云计算（北京）有限责任公司 京ICP证150476号 |  京ICP备11018762号 | 京公网安备号11010802020287

问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档

Copyright © 2013 - 2025 Tencent Cloud.

All Rights Reserved. 腾讯云 版权所有

登录 后参与评论