开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

在storm.yaml中更改storm zookeeper服务器

是指在Apache Storm分布式实时计算系统的配置文件storm.yaml中修改Zookeeper服务器的地址和端口信息。

Apache Storm是一个开源的分布式实时计算系统，用于处理大规模实时数据流。它使用Zookeeper来进行协调和管理集群中的各个组件。

要更改storm.yaml中的Zookeeper服务器，可以按照以下步骤进行操作：

打开storm.yaml文件：在Storm安装目录下的conf文件夹中，可以找到storm.yaml文件。
查找zookeeper服务器配置项：在storm.yaml文件中，可以找到名为"storm.zookeeper.servers"的配置项。该配置项用于指定Zookeeper服务器的地址和端口。
修改zookeeper服务器地址和端口：根据实际情况，将"storm.zookeeper.servers"配置项的值修改为所需的Zookeeper服务器的地址和端口。多个服务器可以用逗号分隔。
保存并关闭文件：在完成修改后，保存并关闭storm.yaml文件。
重新启动Storm集群：根据具体情况，可以使用相应的命令或工具来重新启动Storm集群，以使配置更改生效。

需要注意的是，修改storm.yaml文件可能会对Storm集群的正常运行产生影响，因此在进行修改之前，建议先备份原始的storm.yaml文件，并在修改后进行测试和验证。

推荐的腾讯云相关产品和产品介绍链接地址：

腾讯云Storm产品页：https://cloud.tencent.com/product/storm
腾讯云Zookeeper产品页：https://cloud.tencent.com/product/zookeeper
腾讯云分布式消息队列CMQ产品页：https://cloud.tencent.com/product/cmq
腾讯云云服务器CVM产品页：https://cloud.tencent.com/product/cvm
腾讯云云数据库CDB产品页：https://cloud.tencent.com/product/cdb
腾讯云对象存储COS产品页：https://cloud.tencent.com/product/cos
腾讯云容器服务TKE产品页：https://cloud.tencent.com/product/tke
腾讯云人工智能AI产品页：https://cloud.tencent.com/product/ai
腾讯云物联网IoT产品页：https://cloud.tencent.com/product/iot
腾讯云移动开发产品页：https://cloud.tencent.com/product/mobile

相关搜索:Storm 1.2.2 Supervisor也将本地主机作为nimbus，无法连接到它，尽管nimbus位于另一台服务器中，并且已经在storm.yaml中指定导入org.apache.zookeeper.Zookeeper无法在maven中解析 Zookeeper在连续更改时错过了事件更改嵌入式Kafka中的zookeeper日志目录 Storm在java中从Kafka读取数据在新的Kafka版本中删除Zookeeper 在storm中，如何指定特定版本的python 在zookeeper中"java.net.ConnectException:Connection refused"关键字"cnxn“在zookeeper中的含义我可以在Zookeeper中递归创建路径吗？Apache STORM - Tuples在工作人员中的分布在apache storm中，如何在每天/小时开始时触发事件？无法在策展人框架2.9.1中解析org.apache.zookeeper 在activeMQs嵌入式Camel模块中找不到Camel Zookeeper组件有没有办法告诉Storm Nimbus在特定的supervisor中启动拓扑？在领域对象服务器中更改IP地址在SQL SERVER 2008中更改服务器名称在Storm Crawler中搜索特定基本URL的所有子URL的完成事件在VBA中更改DSN 在Eclipse中更改TODO

相关搜索:

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

Twitter Storm: 搭建Storm集群

下面是搭建storm集群的一些主要步骤：搭建ZooKeeper集群。在Nimbus和所有工作机器上面安装所有的软件。在Nimbus和所有工作机器上下载并解压storm的发行版。...所以zookeeper上的负载是非常低的，单个节点的zookeeper在大多数情况下都已经足够了，但是如果你要部署大一点的storm集群，那么你需要的zookeeper也要大一点。...配置storm.yaml storm发行版在conf/storm.yaml包含了一些配置信息。你可以在这里看到默认配置。...storm.yaml里面的配置比default.xml的优先级要高，下面是要运行storm集群所必须的配置: 1. storm.zookeeper.servers 这个配置storm集群使用的zookeeper.../lib:/usr/lib, 大多情况下是对的，所以你应该不用更改这个配置。

5181 0

Jstorm 环境搭建

配置 storm.yaml 配置zookeeper相关的配置项 $ cd /home/jstorm/jstorm-2.4.0/conf/ $ vi storm.yaml storm.zookeeper.servers...: - "hd-23" - "hd-24" - "hd-25" storm.zookeeper.root: "/jstorm" storm.local.dir: "/...== 4.在24.25服务器上重复上述操作。....安装WEB UI mkdir ~/.jstorm cp -f /home/jstorm/jstorm-2.4.0/conf/storm.yaml ~/.jstorm #编辑文件，在末尾添加一下配置，...启动jstorm # 在主节点服务器上执行以下命令 $ cd jstorm-2.4.0 $ nohup bin/jstorm nimbus & # 查看是否启动成功 $ jps 4346 Bootstrap

5802 0

CentOS 6.8 安装并使用JStorm集群

:/a - "10.1.1.78"' /opt/jstorm/conf/storm.yaml sed -i /'storm.zookeeper.servers:/a - "10.1.1.80"' /opt.../jstorm/conf/storm.yaml sed -i /'storm.zookeeper.servers:/a - "10.1.1.97"' /opt/jstorm/conf/storm.yaml...sed -i /'storm.zookeeper.root/a nimbus.host: "10.1.1.78"' /opt/jstorm/conf/storm.yaml 配置项： storm.zookeeper.servers...: 表示zookeeper 的地址; nimbus.host: 表示nimbus的地址; storm.zookeeper.root: 表示JStorm在zookeeper中的根目录，当多个JStorm共享一个...7、安装JStorm Web UI 强制使用tomcat7.0或以上版本，切记拷贝**~/.jstorm/storm.yaml，** Web UI 可以和Nimbus在同一个节点上 mkdir ~/.

7121 0

Storm集群搭建的错误分析

/45370381 这个是一个写的不错的, 或者说比较详细的搭建步骤, 不过里面有一些坑没有填, 也可能是我遇到了, 在此提出几个搭建过程中遇到问题的解决方案, 给大家参考： 1.java .net ....解析:一般来说这个问题就是我们的 zookeeper 出了问题, 这个是之前在搭 zookeeper 集群的时候, 二号机出了问题：搭建好 zookeeper 的集群之后一定要先启动测试一下, 并查看每一台的...配置了其他机器的信息, 我用的就是 zookeeper 集群啊, 当然要配其他机器的信息, 这和 storm 集群没什么冲突啊, 所以我按照他的方案试了一下, 依然没有解决问题； (3)我自己的解决方案了..., 所以一直没有注意, 因为我在实验阶段, 没有这句话也能连接上 (虽然报错了) 所以秘密就在这解开了, 把每一台服务器上的 storm.yaml 都复制一份到/root/.storm/storm.yaml...说到这, 祝大家能顺利搭建成功, 在大数据处理上再迈出一步！

5505 0

Twitter Storm 集群搭建

发行版本解压目录下有一个 conf/storm.yaml文件：用于配置Storm。...默认配置在这里可以查看 conf/storm.yaml中的配置选项将覆盖defaults.yaml中的默认配置。...以下配置选项是必须在 conf/storm.yaml中进行配置的： storm.zookeeper.servers: Storm集群使用的Zookeeper集群地址，其格式如下： storm.zookeeper.servers...然后在storm.yaml中配置该目录，如： storm.local.dir: "/usr/storm/workdir" 分别启动三台机器 master:到storm的bin目录下 ..../logs/su.log 2>&1 & (启动后台进程,并把正确和错误的信息输出到该文件中) 在master上启动UI管理界面 .

3741 0

Apache Storm使用

每一个工作进程执行一个Topology的子集；一个运行中的Topology由分布在不同工作节点上的多个工作进程组成 Nimbus 和 Supervisor 节点之间所有的协调工作是通过 Zookeeper...此外，Nimbus 和 Supervisor 进程都是快速失败（fail-fast)和无状态（stateless）的；Storm 集群所有的状态要么在 Zookeeper 集群中，要么存储在本地磁盘上。...conf/storm.yaml中的配置选项将覆盖defaults.yaml中的默认配置。...以下配置选项是必须在conf/storm.yaml中进行配置的： storm.zookeeper.servers: Storm集群使用的Zookeeper集群地址，其格式如下： storm.zookeeper.servers...然后在storm.yaml中配置该目录，如： storm.local.dir: “/home/admin/storm/workdir” java.library.path: Storm使用的本地库加载路径

3801 0

IDEA中调试Topology出现的错误

在IDEA的maven项目中编写Topology出错： NoClassFound找不到主类：解决– 在pom.xml中，找到中的storm，添加compi kafka中的topic不新建也可以使用...- maven有很多插件，在IDEA中调试时需要使用compile插件来执行compile命令、 mvn compile exec:Java -Dstorm.topology=storm.starter.WordCountTopology...server.log kafka主题的日志才在自己自定义的目录中 2017-03-01 17:23:12.906 o.a.s.u.NimbusClient [WARN] Using deprecated...Please update your storm.yaml so it only has config nimbus.seeds 2017-03-01 17:23:12.906 o.a.s.u.NimbusClient...Please update your storm.yaml so it only has config nimbus.seeds 错误原因：更改UI端口只修改了nimbus的，没有修改supervisor

1.4K3 0

storm安装教程

分为四个步骤：安装Java环境安装 Zookeeper 安装Storm（单机）运行Storm实例-WordCount 安装Java环境 [root@localhost strom]# yum install...[root@localhost strom]# find / -name java-1.7.0-openjdk /usr/lib/jvm/java-1.7.0-openjdk 在/root目录下编辑.bashrc...下载zookeeper-3.4.6.tar.gz，上传到服务器，解压 [root@localhost strom]# tar -zxf zookeeper-3.4.6.tar.gz 进入zookeeper...STARTED 安装Storm（单机）下载apache-storm-0.9.6.tar.gz 上传服务器，解压 [root@localhost strom]# tar -zxf apache-storm...-0.9.6.tar.gz 进入storm的conf目录，修改storm.yaml文件，地址改成127.0.0.1，ui端口改成8888 [root@localhost conf]# vi storm.yaml

1K1 0

Strom搭建全分布HA

1.下载相应版本、上传服务器、解压、配置环境变量并生效 2.配置文件：conf/storm.yaml // zookeeper的信息 storm.zookeeper.servers:...- 6700 - 6701 - 6702 - 6703 // 配置一个目录，用于Nimbus保存任务和元信息目录 storm.local.dir...: "/root/training/apache-storm-1.0.3/tmp" 3.复制到其他节点 4.启动 storm nimbus storm supervisor storm ui & (后台启动...) 5.HA // 如果要搭建Storm的HA，只需要在nimbus.seeds中设置多个nimbus即可。

2282 0

storm(2)-基于k8s的安装

=/home/frank/conf/storm export STORM_CONF_FILE=/home/frank/conf/storm/storm.yaml sed -i -e "s/storm.zookeeper.servers...: \[localhost\]/storm.zookeeper.servers: \[${STORM_ZK_QUORUM}\]/" /home/frank/conf/storm/storm.yaml...sed -i -e "s/storm.zookeeper.root: \"\/storm\"/storm.zookeeper.root: \/${STORM_ZK_ROOT}/" /home/frank.../conf/storm/storm.yaml # if use cluster model, pod ${JOB_CLUSTER_NAME}-0,${JOB_CLUSTER_NAME}-1 as jobmanager.../storm.yaml echo "pod hostname match nimbus config host, change action to nimbus."

1K3 0

CentOS 6.8 安装JStorm集群（jstorm-2.1.1 ）

:/a\ - "10.1.1.78"' /opt/jstorm/conf/storm.yaml sed -i /'storm.zookeeper.servers:/a\ - "10.1.1.80"' /...opt/jstorm/conf/storm.yaml sed -i /'storm.zookeeper.servers:/a\ - "10.1.1.97"' /opt/jstorm/conf/storm.yaml...sed -i /'storm.zookeeper.root/a\ nimbus.host: "10.1.1.78"' /opt/jstorm/conf/storm.yaml 配置项： storm.zookeeper.servers...: 表示zookeeper 的地址， nimbus.host: 表示nimbus的地址 storm.zookeeper.root: 表示JStorm在zookeeper中的根目录，当多个JStorm共享一个...7、安装JStorm Web UI 强制使用tomcat7.0或以上版本，切记拷贝~/.jstorm/storm.yaml， Web UI 可以和Nimbus在同一个节点上 mkdir ~

9646 0

Storm集群安装详解

此外，Nimbus和Supervisor进程都是快速失败（fail-fast)和无状态（stateless）的；Storm集群所有的状态要么在Zookeeper集群中，要么存储在本地磁盘上。...conf/storm.yaml中的配置选项将覆盖defaults.yaml中的默认配置。...然后在storm.yaml中配置该目录，如： storm.local.dir: "/home/admin/storm/workdir" 3) java.library.path: Storm使用的本地库...注意事项：启动Storm后台进程时，需要对conf/storm.yaml配置文件中设置的storm.local.dir目录具有写权限。...为了方便使用，可以将bin/storm加入到系统环境变量中。启动Storm后台进程时，需要对conf/storm.yaml配置文件中设置的storm.local.dir目录具有写权限。

1.9K1 0

jstorm2.1.1及jstorm webui安装

storm.yaml storm.zookeeper.servers: - "10.5.3.100" - "10.5.3.101" - "10.5.3.102" storm.zookeeper.root...否则报错 2、zookeeper端口必须一致，默认2128 3、不能写hostname只能写ip 配置完成后，将安装包分发到其它机器上，在nimbus节点执行 nohup jstorm...jstorm的安装目录，下载一个tomcat，然后将war拷贝到webapps下，并且解压到root文件夹，以下是官方命令 mkdir ~/.jstorm cp -f $JSTORM_HOME/conf/storm.yaml.../startup.sh 然后在创建~/.jstorm文件，并把jstorm的配置文件storm.yaml拷贝到这个文件夹下，编辑配置文件 storm.zookeeper.servers: -..."10.5.3.100" - "10.5.3.101" - "10.5.3.102" storm.zookeeper.root: "/jstorm" nimbus.host:

9583 0

【转】storm和zookeeper中的节点的关系

一、Nimbus Nimbus既需要在Zookeeper中创建元数据，也需要从Zookeeper中获取元数据。...3、路径a和b只有在提交新的Topology时才会创建，且b中的数据设置好以后就不会再变化；c在第一次为该Topology进行任务分配的时候会创建，若任务分配计划有变，Nimbus会更新它内容。...1、箭头3表示Supervisor在Zookeeper中创建的路径是/storm/supervisor/。新节点加入时会在该路径下创建一个znode节点。...1、箭头5表示Worker在Zookeeper中创建的路径是/storm/workerbeats//node-port。...箭头7表示Executor在Zookeeper中创建的路径，每个Executor会在运行过程中记录发生的错误。

9942 0

Storm0.9.0.1升级安装

1，下载0.9.0.1 http://storm.incubator.apache.org/downloads.html 2，安装就jdk,Python,zookeeper 在服务器 "192.168.1.1..." "192.168.1.1""192.168.1.2"上 3，解压，修改conf下的storm.yaml storm.zookeeper.servers: - "192.168.1.1" ...，192.168.1.12，192.168.1.13，并在三台服务器上创建/data/storm/work给足够的写权限 5，启动 192.168.1.10 #启动storm nimbus进程... nohup storm nimbus & #启动storm ui监控界面进程 nohup storm ui & 192.168.1.12，192.168.1.13 #启动storm...启动该进程，可以在storm ui界面上看各个supervisor节点上日志 nohup storm logviewer & 6，show time http://192.168.1.10:

2592 0

Storm集群部署手册

一、准备 1、硬件三台装好RHEL6.7_x64的x86服务器，机器名如下 storm01 storm02 storm03 2、软件 jdk-7u80-linux-x64.rpm apache-storm...-1.0.1.zip 3、 zookeeper storm需用到zookeeper，开始安装前先安装好zookeeper，参照zookeeper集群部署手册 4、 Python storm需用到python.../storm.yaml，将红色字体改成实际值。...storm.zookeeper.servers: - "zookeeper01" - "zookeeper02" - "zookeeper03" nimbus.seeds:...-1.0.1 bin/storm nimbus & bin/storm supervisor & bin/storm ui & 2、执行完成后可在浏览器中输入以下网址查看是否安装成功 http://

3221 0

storm单机安装

下载 wget https://archive.apache.org/dist/storm/apache-storm-1.1.0/apache-storm-1.1.0.tar.gz 配置 tar xf...apache-storm-1.1.0.tar.gz cd apache-storm-1.1.0 vim conf/storm.yaml storm.zookeeper.servers: - "..." nimbus.seeds: ["alex"] supervisor.slots.ports: - 6700 - 6701 - 6702 - 6703 启动zookeeper...（已经安装） cd zookeeper vim conf/zoo.cfg tickTime=2000 initLimit=10 syncLimit=5 dataDir=/tmp/zookeeper LogDir...=/tmp/zookeeper clientPort=2181 zkServer.sh start 启动storm /bin/storm nimbus & /bin/storm supervisor

8045 0

storm0.9.5集群安装

集群,并启动zookeeper集群。...2、上传storm的安装包，解压 3、修改storm配置文件storm.yaml 必填配置 #所使用的zookeeper集群主机的ip地址 storm.zookeeper.servers: - "weekend01...比如，你向一个运行中的集群增加了节点。再平衡命令将会停用拓扑，然后在相应超时时间之后重分配工人，并重启拓扑。...5、Storm集群的进程及日志熟悉 5.1、查看nimbus的日志信息在nimbus的服务器上 cd /export/servers/storm/logs tail -100f /export.../servers/storm/logs/nimbus.log 5.2、查看ui运行日志信息在ui的服务器上，一般和nimbus一个服务器 cd /export/servers/storm/logs

3522 0

storm(1)-物理机的安装

系统： CentOS Linux release 7.3.1611 (Core) jdk: java version "1.8.0_121" 首先要安装zookeeper 下载storm的包 apache-storm...-1.2.2.tar.gz 配置storm.yaml storm.zookeeper.servers: ["10.189.108.107","10.189.108.108","10.189.108.109..."] nimbus.seeds: ["10.189.108.110"] storm.local.dir: "/data/storm/data" ui.host: 0.0.0.0 ui.port...: 8088 storm.zookeeper.root: "/stormNew" supervisor.slots.ports: - 6700 - 6701 - 6702...这个是启动脚本的位置不对，导致出问题，不能到bin里面去启动 storm移除zk中的数据,会导致nimbus,supervisor停掉

8772 0

Storm和Zookeeper集群搭建及在java项目中的使用

3、关闭3台服务器的防火墙： service firewalld stop 关于Cent OS防火墙的使用可以参考：CentOS 7中firewall防火墙详解和配置以及切换为iptables防火墙 Zookeeper...分别下载到3台服务器上，然后解压到自己合适的位置，我这里都是：/home/xuliugen/server 2、配置Storm 配置文件在：/home/xuliugen/server/apache-storm...-1.1.0/conf 目录下的storm.yaml 默认只需要修改如下部分： ?.../storm supervisor ? ? 查看Storm UI如下： ? 4、最后查看任一台Zookeeper服务器，查看节点情况： ? ?.../temp/stormdemo.jar为打包的jar在服务器上的位置；（2）com.xuliugen.demo.topology.TopologyMain位主函数全路径； ?

6003 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭