腾讯云

开发者社区

文档建议反馈控制台

首页

文章/答案/技术大牛

发布

社区首页 >问答首页 >可以用Ambari安装Apache Bigtop Stack吗？

问可以用Ambari安装Apache Bigtop Stack吗？
EN

Stack Overflow用户

提问于 2020-05-07 01:22:19

回答 1查看 1.2K关注 0票数 1

任何人都可以提供使用Ambari安装Apache BigTop堆栈的教程或步骤吗？

我试着学习以下信息

https://cwiki.apache.org/confluence/display/BIGTOP/Bigtop+1.3.0+Release

但是，使用amabri安装每个hadoop组件的步骤是什么？

我不想使用HDP堆栈安装。

hadoop

ambari

hdp

bigtop

人脸识别特惠活动

精准实时的人脸检测、分析、识别等服务，在线、离线满足多样需求，可应用于智慧零售、智慧社区、在线娱乐等多种应用场景

回答 1

Stack Overflow用户

发布于 2020-05-11 04:24:27

@Jessica如果您想在ambari中安装自定义服务，您有两个选项：

#1：Ambari色调服务的一个例子

#2：麋鹿管理包的示例

我使用GitHub上的开源示例，如或自定义Ambari，并根据我的需要定制它们。链接到上面，我为Elasticsearch、HUE、NIFI和许多其他服务做了这件事。

票数 1

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/61654230

复制

Notes: Hadoop-based open source projects

hadoop apache hive linux hbase

Here's my notes about introduction and some hints for Hadoop-based open source projects. Hope it's useful to you.

四火

2022/07/15

3210

Notes: Hadoop-based open source projects

ambari系列--报错问题

hadoop yum var x86 数据

hbase 启动不起来，通常是因为节点日期不同步。 HDFS 无法启动，通常是因为hdfs 进入了安全模式，需要先退出来，再启动。

Dlimeng

2023/06/29

4550

Hadoop家族学习路线图

hadoop

Hadoop家族系列文章，主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flume, Bigtop, Crunch, Hue等。从2011年开始，中国进入大数据风起云涌的时代，以Hadoop为代表的家族软件，占据了大数据处理的广阔地盘。开源界及厂商，所有

小小科

2018/05/03

1.4K0

ambari安装

数据库登录服务配置系统

执行完这个命令后，会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥）

Dlimeng

2023/06/29

4080

ambari安装指南

云数据库 SQL Server linux 数据库

（一）准备工作 1、准备几台机器 10.1.51.100 ambariserver 本地mirrorserver及ambari server都在这一台机器 10.1.51.10 master 10.1.51.11 slave1 10.1.51.12 slave2 2、都创建管理用户hadoop 3、做ssh免密码登录(ambariserver到其他机器的，hadoop用户) ssh-keygen cd .ssh cat id_rsa.pub >> authorized_keys chmod 700 ~/.ssh chmod 600 ~/.ssh/authorized_keys 注意，免密码一定要互相登陆一次，让他记住密码 4、设置sudo免密码(hadoop用户)---后续所有操作都在hadoop用户下去做在各节点上进入root: visudo 加入如下内容： hadoop ALL=(ALL) NOPASSWD: ALL 5、Maximum Open File Descriptors(10000) 检查语句 ulimit -Sn ulimit -Hn sudo vi /etc/security/limits.conf @hadoop soft nproc 262144 @hadoop hard nproc 262144 @hadoop soft nofile 262144 @hadoop hard nofile 262144 sudo vi /etc/security/limits.d/90-nproc.conf @hadoop soft nproc 262144 以上改动重启才能生效，最好同时执行ulimit -u 10240 命令，是其立即生效。（ulimit 命令很多啊） 6、Check Existing Package Versions 7、Set up Service User Accounts(设置服务用户账户) http://docs.hortonworks.com/HDPDocuments/Ambari-2.0.0.0/Ambari_Doc_Suite/ADS_v200.html#ref-70627b43-7d78-4cbb-8df8-e3f43cbd8422 hdp的各个服务运行在不同的linux账户下，如果你创建了这些账户，ambari就会直接用，否则他会自动创建，但是自动创建的用户不知道密码是什么，但是还是可以 sudo su hdfs进入到这些用户下，不过这样就不方便了。比较好的办法是自己创建的账户，使用ambari安装组件时选择自定义账户即可(UID >= 1000)。 8、Enable NTP on the Cluster and on the Browser Host 集群各节点，包括安装ambari webui的机器都得开启ntp服务已同步时间，如果有条件，局域网应该有ntp服务器 To check that the NTP service is on, run the following command on each host:chkconfig --list ntpd To set the NTP service to start on reboot, run the following command on each host:chkconfig ntpd on To turn on the NTP service, run the following command on each host:service ntpd start 9、Check DNS(可以选择10) 集群所有机器必须配置正向和反向DNS,如果条件不允许，就设置/etc/hosts文件，每个节点都得改 10、/etc/hosts 1.2.3.4 <fully.qualified.domain.name> //一行一个注意：这两行千万不要删除 127.0.0.1 localhost.localdomain localhost ::1 localhost6.localdomain6 localhost6 vi /etc/sysconfig/network NETWORKING=yesNETWORKING_IPV6=yes HOSTNAME=<fully.qualified.domain.name> 11、关闭防火墙 12、Disable SELinux and PackageKit and check the umask Value set SELINUX=disabled in /etc/selinux/config sudo vi /etc/yum/pluginconf.d/refresh-packagekit.conf 设置：enabled=0 Ambari supports a umask value

挖掘大数据

2018/01/16

1.6K0

平台安装--ambari安装

编程算法 hadoop yum hive

baseurl=http://192.168.199.50/ambari/centos7/

小徐

2019/08/05

3.8K0

Ambari安装指南顶

ssh node.js hadoop postgresql yum

Ambari 跟 Hadoop 等开源软件一样,也是 Apache Software Foundation 中的一个项目,并且是顶级项目.目前最新的发布版本是 2.1.2. 就 Ambari 的作用来说,就是创建,管理,监视 Hadoop 的集群,但是这里的 Hadoop 是广义,指的是 Hadoop 整个生态圈(例如 Hive,Hbase,Sqoop,Zookeeper 等),而并不仅是特指 Hadoop. 用一句话来说,Ambari 就是为了让 Hadoop 以及相关的大数据软件更容易使用的一个工具. 说到这里,大家就应该明白什么人最需要 Ambari 了.那些苦苦花费好几天去安装,调试 Hadoop 的初学者是最能体会到 Ambari 的方便之处的. 而且,Ambari 现在所支持的平台组件也越来越多,例如流行的 Spark,Storm 等计算框架,以及资源调度平台 YARN 等,我们都能轻松地通过 Ambari 来进行部署. Ambari 自身也是一个分布式架构的软件,主要由两部分组成:Ambari Server 和 Ambari Agent.简单来说,用户通过 Ambari Server 通知 Ambari Agent 安装对应的软件; Agent 会定时地发送各个机器每个软件模块的状态给 Ambari Server,最终这些状态信息会呈现在 Ambari 的 GUI,方便用户了解到集群的各种状态,并进行相应的维护.

白石

2019/08/23

1.5K0

安装Ambari和HDP

数据库 sql 专用宿主机开源 yum

soundhearer

2020/10/15

3.2K0

Hadoop家族学习路线图v

hadoop hive hbase zookeeper

主要介绍Hadoop家族产品，常用的项目包括Hadoop, Hive, Pig, HBase, Sqoop, Mahout, Zookeeper, Avro, Ambari, Chukwa，新增加的项目包括，YARN, Hcatalog, Oozie, Cassandra, Hama, Whirr, Flume, Bigtop, Crunch, Hue等。从2011年开始，中国进入大数据风起云涌的时代，以Hadoop为代表的家族软件，占据了大数据处理的广阔地盘。开源界及厂商，所有数据软件，无一不向Hado

庞小明

2018/03/07

1.8K0

Ambari2.7.1安装

其他

注：主机名修改后需要重启机器才可彻底生效。如果用户不想重启，可使用命令 hostnamectlset-hostname node1.ambari.com来修改主机名，可使用命令 hostname来检验主机名是否修改成功。这种修改方式只是暂时的，待机器重启后就恢复原样 localhost了。

create17

2018/12/12

1.8K0

大数据测试学习笔记之hadoop家族

其他

前言在进行大数据测试之前，我们必须了解下大数据处理的的相关技术体系，今天主要学习和了解了hadoop家族，这里记录下来分享给大家。 hadoop家族产品 hadoop项目地址： http://had

苦叶子

2018/04/09

6830

完结撒花 | 全网稀有的Ambari自定义服务集成实战（全）

hadoop 大数据

自从 2020 年开始，我就发觉网上使用 Ambari 的同学多了很多，随着 cloudera 收购 hdp 并进入收费模式，越来越多的企业选择了 Ambari 来管理大数据平台，Ambari 集成第三方服务的需求也就变得越来越常见。

create17

2021/04/07

1.8K0

Apache顶级项目Ambari正式宣告退役！

apache hadoop 网站

Apache Ambari 是一个基于 Web 的 Apache Hadoop 集群的供应、管理和监控工具，曾是 Apache Software Foundation 的顶级项目。

王知无-import_bigdata

2022/03/11

1.2K0

使用Ambari安装hadoop集群

spark ubuntu hadoop

最近需要做些spark的工作，所以弄了几台dell7500就这么准备开始搭建集群，之前用过几台更破的台式机搭建过一次，折腾了半个月之久，终于成功搭建，这次不想走老路，所以网上查了一下，发现一个神器AMBARI，可以部署、管理集群，果然是个好东西，所以就拿来用，但是在安装的过程中碰到了许许多多的问题，所以现在把安装过程总结一下，放到这里，以方便下次安装或者其他有对ambari感兴趣的同学可以参考之。安装过程大量查阅了网上的相关资料，主要是https://cwiki.apache.or

魏守峰

2018/04/28

1.3K0

Ambari安装与集群配置

node.js yum http postgresql 存储

参考网址： http://www.ibm.com/developerworks/cn/opensource/os-cn-bigdata-ambari/index.html http://docs.hortonworks.com/HDPDocuments/Ambari-2.4.2.0/bk_ambari-installation/content/index.html

程裕强

2022/05/06

4390

Ambari 与 HDP 安装指南

http https 网络安全 jdk 数据库

大数据平台，涉及到很多软件产品，如果刚刚入行Hadoop，直接下载软件包，手动配置文件的方式，并没有那么直观和容易。

星哥玩云

2022/07/13

1.2K0

Ambari——大数据平台的搭建利器

大数据 hadoop 开源 apache

Ambari 是什么 Ambari 跟 Hadoop 等开源软件一样，也是 Apache Software Foundation 中的一个项目，并且是顶级项目。目前最新的发布版本是 2.0.1，未来不久将发布 2.1 版本。就 Ambari 的作用来说，就是创建、管理、监视 Hadoop 的集群，但是这里的 Hadoop 是广义，指的是 Hadoop 整个生态圈（例如 Hive，Hbase，Sqoop，Zookeeper 等），而并不仅是特指 Hadoop。用一句话来说，Ambari 就是为了让

小莹莹

2018/04/23

1.3K0

Ambari集成Elasticsearch 5.x

其他

该文是关于介绍如何使用 Elasticsearch 进行日志搜索的内容。文章首先介绍了 Elasticsearch 的基本概念和架构，然后详细讲解了如何使用 Elasticsearch 进行日志搜索。文章还介绍了 Elasticsearch 的各种插件和工具，以及如何在实践中进行配置和部署。

程裕强

2018/01/02

2.3K1

CentOS 6.5下安装Ambari

yum ssh centos linux http

一、准备工作： 1.基本工具 yum rpm scp curl wget pdsh 前几个一般系统都自带了，pdsh需要自己装： yum install pdsh 这个命令没有成功执行自己下载pdsh.tar.bz2，用tar -jxvf filename.tar.bz解压。之后进入filename文件夹，执行./configure,然后执行make和make install命令。安装结束。

星哥玩云

2022/07/03

5590

Ambari2.7安装配置

云数据库 SQL Server java https 网络安全 unity

下载链接: https://pan.baidu.com/s/1rlqZejpZZqio9RPzgnGOEg 提取码: j47n ；内有jdk-8u151-linux-x64.tar.gz和mysql-connector-java.jar文件。

create17

2019/03/12

1.3K0

相似问题

我们如何在Ambari中安装Apache BigTop？

3296

Apache ambari安装

安装Apache Nifi后可以集成Ambari吗？

115

Apache Bigtop未构建

部署Apache Ambari 2.5.1时Apache Metrics Collector安装失败

253

活动推荐

即时通信IM，低门槛快速接入

添加站长进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例