前面Fayson有很多篇文章介绍CDH各个版本的安装部署，在安装部署的前置条件中说明需要在统一的操作系统版本进行部署。部分用户早期在RedHat7以下版本部署CDH集群，在后续集群扩容时使用了RedHat7版本的操作系统，对于这种跨操作系统安装部署或扩容CDH集群如何解决？本篇文章Fayson主要介绍如何跨操作系统扩容CDH集群。
在前面的文章《0520-如何使用非root用户启动CM的Server和Agent服务》中，Fayson介绍过在CDH5中，无论是Cloudera Manager Server还是Agent服务都无法配置为其他用户来启停，只能通过root用户来管理。这里假设我们有root用户或者有sudo(ALL)权限的普通用户，但我们依旧不想通过系统自带的system或者systemctl来操作这2个服务，而是直接操作CM Server和Agent的脚本文件。本篇文章Fayson主要说明CDH5和CDH6版本中cloudera-scm-server和cloudera-scm-agent服务停止脚本的变化。
首先来描述一下我遇到的问题：如下图所示在我们产品中，服务脚本放置在目录/etc/init.d中，在用命令 "service xxx start" 后，脚本中启动应用程序ice_main，ice_main进程中使用命令 "locale" 来获取当前所使用的语言。但是获取的LANG的值为空......
Docker 是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器或Windows 机器上,也可以实现虚拟化,容器是完全使用沙箱机制,相互之间不会有任何接口。 docker的定义看的似懂非懂，百闻不如一见，试用了一下（仅下载运行镜像，不建仓库，不打包镜像）用完觉得功能像是yum外加微型vmware。 我们想安装某个软件，直接yum install 软件，如果yum源服务器有安装包，自动就安装上了，然后启动软件开始工作。 docker方式类似的，我们想使用某个软件并且要求它以docker方式运行，那么先要docker search命令看docker仓库（官方仓库有大量软件镜像可以直接使用）是否有该软件的镜像，
Docker 是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中,然后发布到任何流行的Linux机器或Windows 机器上,也可以实现虚拟化,容器是完全使用沙箱机制,相互之间不会有任何接口。
在CDH集群中默认使用的MySQL版本是操作系统自带的版本，一般操作系统自带的MySQL版本都会比较低，对于企业已有应用可能会用较新的MySQL版本，使用集群中安装的MySQL时可能会出现SQL不兼容的问题，那么解决方法一是在集群中安装新版本的MySQL，二是升级集群中老版本的MySQL。本文主要选择第一种方法在集群中安装新版本的MySQL，在RedHat6安装时会遇到mysql-community-libs包冲突的问题，卸载冲突包时会将cloudera-manager-agent包也卸载导致Agent异常，在RedHat7安装时会自动更新mysql-community-libs依赖包，本文档主要讲述基于RedHat7.2系统的CDH集群中的非元数据库节点安装MySQL5.7.12。
通过系统调用stat可以获取stat结构，其中包括：atime(accesstime), ctime(create time) 以及mtime(modify time)的信息，man stat后的信息：
(1) 为了部署一个最基础的电子邮件系统，我们可以使用Postfix服务程序提供SMTP发件服务，Dovecot服务程序提供POP3/IMAP收件服务，使用telnet在本机服务器上发信和收信，在Windows操作系统上用Foxmail软件检验收发信功能。
本篇文章Fayson主要介绍如何将CDH集群中的KDC服务从RedHat7迁移到RedHat6。
ip hostname 10.7.1.1 master.coke 10.7.1.2 dn1.coke 10.7.1.3 dn2.coke 10.7.1.4 dn3.coke 10.7.1.5 dn4.coke
之所以写这篇文章也是因为前几天出的一个问题，当时业务感觉到卡顿，并且伴随着锁超时的报错。最后通过分析发现是由于磁盘I/Q繁忙导致SQL耗时增加，部分锁竞争激烈的热数据出现了锁等待和锁超时。由此可见，系统的硬件环境对数据库整体性能的影响也是非常大的，MySQL在运行环境中并不是孤立存在的，它的整体性能往往受限于系统最薄弱的环节，今天想和大家分享下，都有哪些系统指标会对数据库的整体性能产生影响，我们又如何进行分析。
条件语句 when 根据不同的系统,安装不同的Apache版本 [student@workstation ansible]$ cat one.yml - hosts: all remote_user: root tasks: - name: 0.clean yum shell: rm -rf /etc/yum.repos.d/* when: ansible_os_family == "RedHat" - name: 1.install ali source get_
温馨提示：如果使用电脑查看图片不清晰，可以使用手机打开文章单击文中的图片放大查看高清原图。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- Cloudera在2018年1月26日发布了CDH5.14版本，5.14的新功能可以参考前一篇文章《CDH5.14和CM5.14的新功能》，在CDH5.13版本以后支持CDSW的Parcel安装，本篇文章就主要讲述如何通过CM5.14.3使用Parce
Cloudera在2019年1月29日发布CDSW1.5，CDSW1.5的一个最大的更新就是支持CDH6和HDP，在1.5之前，CDSW是不能安装到CDH6.x的。CDH5.13版本以后支持CDSW的Parcel安装，本篇文章Fayson就主要讲述如何通过CM6.2使用Parcel包安装CDSW1.5。
RAM<=4G,swap=2G;RAM>4G,<16G,swap=4G;RAM>16G,<64G,swap=8G;RAM>64G,<256G,swap=16G
在使用CDH集群过程中由于角色划分不合理或Zookeeper服务所在节点压力大等问题，需要对Zookeeper服务做迁移等操作。本篇文章Fayson主要介绍如何通过CM来迁移Zookeeper服务。
温馨提示：如果使用电脑查看图片不清晰，可以使用手机打开文章单击文中的图片放大查看高清原图。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- Cloudera在2018年6月12日发布了CDH5.15版本，5.15的新功能可以参考前一篇文章《CDH5.15和CM5.15的新功能》，随着CDH5.15发布的同时还有CDSW1.4。在CDH5.13版本以后支持CDSW的Parcel安装，本篇文章
Cloudera在2019年1月29日发布CDSW1.5，CDSW1.5的一个最大的更新就是支持CDH6和HDP，在1.5之前，CDSW是不能安装到CDH6.x的。CDH5.13版本以后支持CDSW的Parcel安装，本篇文章Fayson就主要讲述如何通过CM6.1使用Parcel包安装CDSW1.5。
centos修改root密码的方法有：1、当用户具有sudo权限时就可以直接修改密码；2、当不具有权限时，可以长按Shift键进入GRUB导图模式里的Ubuntu高级选项，进行配置，本篇文章重点为大家讲解一下第二种方法。
1.整理机器上面运行的服务，编些成sh脚本，文件为：/home/rc/exec.sh
在使用CDH集群的过程中，有时会在Cloudera Manager的控制台上看到关于Entropy的告警如下显示：
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 前两天Fayson介绍过《CDH5.15和CM5.15的新功能》，与CDH5.15同时发布的还有CDSW1.4，以下我们具体看看CDSW1.4的新功能。 1.CDSW1.4的新功能 ---- 1.模型和实验 - CDSW1.4优化了模型开发到投产的过程。现在，你可以使用CDSW在统一的工作流里创建，训练和部
Cloudera在2018年11月29日发布了CDH5.16.1版本，5.16.1的新功能可以参考前一篇文章《0466-CDH5.16.1和CM5.16.1的新功能》，2019年1月29日发布CDSW1.5。CDH5.13版本以后支持CDSW的Parcel安装，本篇文章Fayson就主要讲述如何通过CM5.16.1使用Parcel包安装CDSW1.5。
对于mysql的数据库的安装，我们有很多种选择来完成。而最为常用的为二进制安装以及源码安装。二进制安装方式中，包括rpm版本以及glibc版本。rpm版本就是在特定linux版本下编译的，如果你的linux版本匹配，就可以安装，如针对RedHat6或者RedHat7编译好的rpm包，下载对应的安装即可。还有另外一种二进制安装包为基于特定的glibc版本编译的，本文主要描述基于glibc方式安装mysql。 一、准备安装环境 ###准备安装介质 下载地址：http://mirrors.sohu.com/
Cloudera在2018年11月29日发布了CDH5.16.1版本，5.16.1的新功能可以参考前一篇文章《0466-CDH5.16.1和CM5.16.1的新功能》，这一次随着CDH5.16的同时没有发布新的CDSW，比如CDSW1.5，但前一段时间就已经发布了CDSW1.4.2。CDH5.13版本以后支持CDSW的Parcel安装，本篇文章Fayson就主要讲述如何通过CM5.16使用Parcel包安装CDSW1.4.2。
Cloudera在2018年11月29日发布了CDH5.16.1，新功能介绍可以参考Fayson之前的文章《0466-CDH5.16.1和CM5.16.1的新功能》。本文档主要描述如何在Redhat7.4安装CDH5.16.1。Cloudera大数据平台的安装主要分为4个步骤：
本篇文章主要介绍如何在CDH6.2.0上通过parcel包的方式安装CDSW1.6。
Cloudera在前天8月30日，对外宣布正式发布Cloudera Enterprise 6，相关介绍可以参考Fayson昨天的文章《Cloudera Enterprise 6正式发布》。本文档Fayson主要描述如何在Redhat7.4安装CDH6.0。CDH6与CDH5的安装步骤一致，主要包括以下四部分：
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github：https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- Cloudera在北京时间5月16日，对外宣布发布Cloudera Enterprise 6 Beta，相关介绍可以参考Fayson昨天的文章《Cloudera Enterprise 6 Beta发布》。本文档Fayson主要描述如何在Redhat7.4安装CDH6.0.0-bet
温馨提示：如果使用电脑查看图片不清晰，可以使用手机打开文章单击文中的图片放大查看高清原图。 Fayson的github： https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- Cloudera在2018年6月12日发布了CDH5.15，新功能介绍可以参考Fayson之前的文章《CDH5.15和CM5.15的新功能》。本文档主要描述如何在Redhat7.4安装CDH5.15。Cloudera企业级数据中心的安装主要分为5个步骤
Mongod 进程启动后，除了跟普通进程一样，加载 binary、依赖的各种library 到内存，其作为一个DBMS，还需要负责客户端连接管理，请求处理，数据库元数据、存储引擎等很多工作，这些工作都涉及内存的分配与释放，默认情况下，MongoDB 使用 Google tcmalloc 作为内存分配器，内存占用的大头主要是「存储引擎」与 「客户端连接及请求的处理」。
Cloudera在2018年1月26日发布了CDH5.14，新功能介绍可以参考Fayson之前的文章《CDH5.14和CM5.14的新功能》。本文档主要描述如何在Redhat7.3安装CDH。Cloudera企业级数据中心的安装主要分为5个步骤：
从年前到现在断断续续读这本书，两个多月终于把这本书读完了。本来可以很快看完，不过中间又看2本 cloud native 和 istio 相关的书，所以拖到现在才看完。非常感谢建盛大哥的推荐，很不错的书，值得一看。这本书成书于2005年，然后那个时候我正在上大学，就是那个年代来说，这本书的一些思路和思想非常靠谱，书中提到的不少场景在之几年到现在都很得到了很大的发展。
实际在这个shell脚本执行过程中，碰到几个问题，是目标服务器的网络服务相关的配置问题。有四种不同的错误，整理如下，以备后用。脚本的本质就是将目的IP信息写入到网卡文件ifcfg-eth2文件中。（eth2是测试机器上的通讯网卡名称），作为参数需要传递给脚本的。
关于Linux Multipath配置，网上还是很多的，自己再来梳理一下，当前环境为RedHat6，HP P2000存储
最近在需诶Hadoop的，尝试着将环境搭起来，真是不搭不知道，一搭下一跳啊，几乎步步都出错啊。网上不少人的回答也是灰常的坑人啊比（如最典型的就是命令的大小写问题，如hadoop命令是小写的，很多人写出Hadoop,所以大家在遇到Command not found这类错误时，先看看是不是大小写的问题），总之过程很痛苦，好在终于搭建起来了。
在linux服务器上安装 VNC (Virtual Network Console)，即虚拟网络控制台，它是一款基于 UNIX 和 Linux 操作系统的优秀远程控制工具软件，由著名的 AT&T 的欧洲研究实验室开发，远程控制能力强大，高效实用，并且免费开源。
在前面的文章中，Fayson介绍了《如何在Redhat7.3安装CDH5.14》，这里我们基于这个环境开始安装MIT Kerberos。前面Fayson也介绍过《如何在CDH集群启用Kerberos》，当时的环境是Redhat6的，大家也可以看看Redhat6和7安装Kerberos有什么区别。
其原理及特点详细介绍请看LVS的NAT模式LVS负载均衡之LVS-NAT搭建Web群集
对于在Linux系统中安装web服务其实都是差不多的，只是软件的选择不一样，不过在php-5.2.17和以前的版本LNMP环境和以后安装有一点区别，就是启用--enable-fastcgi这个模块。现在我用php-5.3.27来搭建LNMP环境，对于搭建不成功的网友们希望给我留言，大家一起解决问题，一起进步。
在Linux中用源代码安装是一件很麻烦的事情，但也是对服务最好的安装模式之一，自己可以自定义安装哪些功能和模块。但是功能模块一但多了以后就会忽略某个选项，这样会导至以后服务中的某些功能不完善和运行不稳定，这将会给以后的测试维护带来十分不方便。现在我将写出自己在服务器上搭建的过程，希望对大家有帮助，但如果比我有更好的方法我希望大家指出来，避免以后出现同一问题。
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 Fayson的github：https://github.com/fayson/cdhproject 提示：代码块部分可以左右滑动查看噢 1.文档编写目的 ---- 前面Fayson文章讲《1.如何在RedHat7上安装OpenLDA并配置客户端》以及《2.如何在RedHat7中实现OpenLDAP集成SSH登录并使用sssd同步用户》，那么如何确保OpenLDAP服务的高可用？本篇文章主要介绍如何通过OpenLDAP的MorrorMode实现
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
