上周记录和分享了Linux下实现自定义命令行工具小技巧、实现批量解压压缩包的操作实践。A服务器上完成该命令工具后，我在其他服务器也想要使用这个命令。因为其他服务器都在同一内网下，因此想要使用此命令，有两种方案：
这里的hosts是批处理代码从需要读取的hosts，想批处理哪台服务器就写哪个host
日常工作中，我们常需要同时在多台服务器上执行同样的命令，如对比日志、检查服务等。这就需要我们有服务器批量操作的能力。
1 、trzsz (trz /tsz) 类似 rz /sz 的用法，比 scp 的操作更简单，更易用。
Linux中，如果意外误操作将/目录权限批量设置，比如chmod -R 777 / ，系统中的大部分服务以及命令将无法使用，这时候可以通过系统自带的getfacl命令来拷贝和还原系统权限。
在运维中，尤其是linux运维，都知道脚本的重要性，脚本会让我们的 运维事半功倍，所以学会写脚本是我们每个linux运维必须学会的一门功课，这里收藏linux运维常用的脚本。如何学好脚本，最关键的是就是大量的练习 和实践。根据以下脚本我们可以拓展，这样我们提高的很快！举一反三！
之前介绍过ansible的使用，通过ssh授权批量控制服务器集群 但是生成密钥和分发公钥的时候都是需要确认密码的，这一步也是可以自动化的，利用ssh + expect + scp就可以实现，其实只用这几个命令结合也可以实现类似ansible的功能了 为了远程操作服务器进行环境初始化，总结我们都需要以下几步操作 1.ssh-keygen生成密钥对 2.将生成的公钥发送到node服务器 3.scp拷贝安装包到node服务器 4.ssh远程执行拷贝过去的安装包
在生产运维变更时，有时需要通过免密方式下载远程主机的文件或目录，这时可以使用expect和内部命令 spawn实现该需求。本文模拟通过scp免密获取远程主机指定路径下相关文件和目录至本地服务器。
一、前言 之前去现场，大佬说客户要跑主机检查脚本，就是服务器有点多，有几百台，问有没有办法一键下发，然后执行脚本去跑，跑完之后回收数据，我听这需求，这不是有手就行？然后就应了下来，说我试试，我本以为就是简单的写个py脚本的事情，确认好需求之后就直接开整，刚开始我写的是使用ssh服务去批量搞。 二、python实现 先确定下流程，大概的流程就是这四个： 连接服务器 上传脚本 执行脚本 回收数据 最重要的是先连接上去，不然想得再好都没用，连接的话我用是py的paramiko，功能挺强大的，Par
scp 是安全拷贝协议 Secure Copy Protocol的缩写，和众多 Linux/Unix 使用者所熟知的拷贝（cp）命令一样。
最近IDC上架了一批hadoop大数据业务服务器，由于集群环境需要在这些服务器之间实现ssh无密码登录的相互信任关系。具体的实现思路：在其中的任一台服务器上通过"ssh-keygen -t rsa"产生公私钥文件，然后将公钥文件拷贝成authorized_keys文件，最后将它的.ssh目录下的文件全部批量拷贝到其他服务器的/root/.ssh目录（即当前用户家目录的.ssh）下即可。这批hadoop服务器的ssh端口默认都是22，密码默认都是kevin123456，ip列表如下: 192.168.10.2
–rsh=COMMAND 指定使用rsh、ssh方式进行数据同步, rsh为明文传输.
部门刚上线了一个新系统，发现一个 BUG，于是开发直接上机器调试，他认为是文件目录权限不够的问题，于是想用 chmod -R 777 先给这个程序目录全部权限试试。 结果，那家伙手一抖命令敲成了： chmod 777 -R /* 而且想都不想就回车了，然后弹出一堆 /proc/*** 没权限更改目录权限的错误提示，我一看就冷了一大截。。。里面让他 ctrl +C 终止命令。 不出所想，系统文件权限已经大部分都变成了"777"！下面是解决方法： ---- Linux 中，如果意外误操作将根目录目录权限批量设置
本篇主要接着上一篇文章继续就“测试常见linux命令集合六”进行展开讲解,主要包括“touch、vim、yum、whereis、rpm”命令。希望感兴趣的小伙伴可以坚持看下去同时欢迎提出宝贵的意见让我们一起进步！
ps命令查找与进程相关的PID号： ps a 显示现行终端机下的所有程序，包括其他用户的程序。 ps -A 显示所有程序。 ps c 列出程序时，显示每个程序真正的指令名称，而不包含路径，参数或常驻服务的标示。 ps -e 此参数的效果和指定"A"参数相同。 ps e 列出程序时，显示每个程序所使用的环境变量。 ps f 用ASCII字符显示树状结构，表达程序间的相互关系。 ps -H 显示树状结构，表示程序间的相互关系。 ps -N 显示所有的程序，除了执行ps指令终端机下的程序之外。 ps s 采用程序信号的格式显示程序状况。 ps S 列出程序时，包括已中断的子程序资料。 ps -t<终端机编号> 指定终端机编号，并列出属于该终端机的程序的状况。 ps u 以用户为主的格式来显示程序状况。 ps x 显示所有程序，不以终端机来区分。
首先明确的是建议优先使用Docker仓库，特别是对于Docker集群而言 Docker仓库非常重要，但是某些应用场景下比如单机环境下使用docker-compse编排应用，如果没有镜像仓库是不是就不能把docker镜像分发给其它的主机了呢？
Linux 常用指令 文章目录 简介 常用指令 虚拟机网络相关指令 虚拟机最简化安装开启网络服务 虚拟机指定ip 文件操作相关指令 文件提升权限 服务器之间传递文件 scp指令 rz/sz 指令 移动文件 删除文件 sed 相关指令 查看当前目录文件大小 rpm相关指令 查看是否安装服务 安装 卸载 ip相关指令 查看ip(三种方法) 防火墙 查看进程 查看资源 设置nfs 从机(slave) 主机(master) 打印不同颜色的字 文件从 dos 模式转成 unix 模式 批量将 wind
我们有时可能会批量去操作服务器，比如批量在服务器上上传某个文件，安装软件，执行某个命令和脚本，重启服务，重启服务器等，如果人工去一台台操作的话会特别繁琐，并浪费人力。
不知道大家用过哪几种ftp扫描工具，是不是感觉都是大同小异的呢？其实市面上的ftp扫描工具功能都是差不多的，当然也还是有一点差别的，那一点的差别可能就是我们选择那一种ftp扫描工具的原因。不论怎么说，也都是要选择自己喜欢的ftp扫描工具来使用。 第一款：IIS7服务器管理工具 这款工具里面的ftp扫描工具体验感是比较好的，除了一般ftp扫描工具里面都有的批量管理，它还有很多自己设计的功能。可以说这就是它成功的关键。它还能够进行定时上传下载、定时备份和多任务同时进行。哦对，它还有自动更新的功能。 IIS7服务器管理工具不是只有ftp扫描工具。它也可以适用在Windows和liunx操作系统。还支持Vnc和Ftp批量操作。同时它还具有同步操作、到期提醒、数据安全和定期执行的功能。这些个功能也是它取胜的原因。毕竟这些功能都是很有实用性的。使用感也是很棒的。可以说这是一款不可小看的管理工具。 下载地址：IIS7服务器管理工具 第二款：WinSCP WinSCP是一个Windows环境下使用SSH的开源图形化SFTP客户端。同时支持SCP协议。它的主要功能就是在本地与远程计算机间安全的复制文件。.winscp也可以链接其他系统，比如linux系统。WinSCP是一款Windows环境下使用的基于SSH的开源文件上传客户端，同时支持SFTP、SCP、FTP协议，你可非常方便地使用拖拽操作，同时也支持批处理脚本及命令行方式操作，WinSCP还内置了文本编辑器，方便你进行文本编辑，对于那些熟悉NC的人来讲用这种操作界面w会更为快速，抛开鼠标操作用传统键盘操作同样可以键指如飞。
随着业务增长需要管理的主机数量也随之增多，在很多情况下需要对批量的主机进行配置变更，然而一台台的修改主机的配置显然是不现实的，也不符合当下运维趋势。能用机器实现的就不要以人肉的方式做无用功，向自动化运维方向迈进。接下来介绍如何使用 expect 实现对批量 Linux 主机和网络设备的命令下发配置。
记录一些常用指令在博客上，以防哪天因太久不敲而忘却，还可以直接翻看博客记录，不用再一条条百度搜......
本文包括：语法介绍、使用示例、通过file命令确定文件的压缩格式、通过MD5检验比较两个tar包是否一致、批量压缩和解压缩。
1、其中一台安装docker-machine，并安装bash completion script
PS：秒杀系统不仅仅讲秒杀，主要是讲如何利用限流，缓存，异步分布式互联网大并发的场景。
本篇部署教程将讲述k8s集群的节点（master和工作节点）部署，请先按照上一篇教程完成节点的准备。本篇教程中的操作全部使用脚本完成，并且对于某些情况（比如镜像拉取问题）还提供了多种解决方案。不过基于部署环境和k8s的复杂性，我们需要对k8s集群部署过程中的一些步骤都有所了解，尤其是“kubeadm init”命令。
前言 原规划本篇文章总结docker多主机网络，但是总结多主机网络之前必须要先能够方便的搭建多主机环境，于是有了本文。 什么是Docker Machine？个人理解就是一个简单版的docker集群管理工具，用它能够直接在其它服务器上安装docker以及管理其上docker，而无需逐机操作。应该是有些类似docker swarm，其实对二者了解还都不深，不在这里做过多的妄测，以免贻笑大方。本文同样是在CloudMan相关教程的基础上，增加部分自己的理解，以便在下一篇总结docker多主机之前能够首先提供一个搭
本文记录Elasticsearch物理集群的安装步骤，在3台机器上部署一个集群。行文顺序为整个安装过程从头到尾，期间发现不少问题。因此，本文不适合一步步跟着做，建议您看完整篇文章，然后再开始搭建集群。
1.通过程序将动态页面抓取并保存为静态页面，这样的页面的实际存在于服务器的硬盘中2.通过WEB服务器的 URL Rewrite的方式，它的原理是通过web服务器内部模块按一定规则将外部的URL请求转化为内部的文件地址，一句话来说就是把外部请求的静态地址转化为实际的动态页面地址，而静态页面实际是不存在的。这两种方法都达到了实现URL静态化的效果，但是也各有各自的特点。3.还有一种是把页面划分成子数据块，每个数据块可能是一个inc文件，也可能多个数据块包含在一个inc文件中。具体的数据块划分根据页面的业务结构来处理。比如：网站头尾等公共数据块可以独立成一个文件。
不知道你是否也曾像我一样面对这样的问题：想要简单的在远程主机上上传下载数据文件、运行个命令，但要么需要通过ssh直接登录主机，要么需要频繁的输入ssh或scp等命令以及ip地址，密码。
作者高泽栋， 腾讯高级工程师， 全栈工程师， 做过嵌入式、CDN、金融、社交等业务系统， 目前做CV相关系统工程落地。 导语 | 云端管控、边缘计算、处于局域网内的微服务如何做Devops呢？腾讯优图业务是结合了腾讯云边缘容器TKE@edge来做服务Devops， 并对服务做了自定义定制， 以支持相应的业务场景。本篇文章接下来将详细展示实践落地细节，希望能够给大家带来灵感。 背景 所谓私有云， 其实就是在多个局域网玩服务，基本等同于开发运维全包。每个局域网都要需要一个跳板机、局域网环境（每个局域网环境不一
对于 PHP 来说，很少有用它来做运维相关管理系统的，不过，这并不代表我们 PHP 就不能远程管理服务器了。其实，也是有直接进行远程操作相关的扩展工具供我们使用的，就像我们今天要学习的这个 SSH 扩展。扩展的安装就是正常的 PHP 安装，使用的是 ssh2 这个扩展包，具体的安装过程就不详细说了，直接来看如何使用吧。
ConsensusTME DoubletFinder EPIC MCPcounter SCENIC SCEVAN SCopeLoomR VISION copykat cpbnplot depmap ggforestplot immunedeconv jjAnno mMCPcounter presto scMetabolism spatstat.core tgutil xCell yaGST
expect是交互性很强的脚本语言，可以帮助运维人员实现批量管理成千上百台服务器操作，是一款很实用的批量部署工具！ expect依赖于tcl，而linux系统里一般不自带安装tcl，所以需要手动安装 下载：expect-5.43.0.tar和tcl8.4.11-src.tar 下载地址：https://pan.baidu.com/s/1kVyeLt9 提取密码：af9p 将expect和tcl的软件包下载放到/usr/local/src目录下 （1）解压tcl，进入tcl解压目录，然后进入unix目录进
在执行 workflow 时, 允许在 GitHub Actions 页面输入参数，控制执行逻辑。我们可以将人工处理的逻辑，在 GitHub Actions 参数化执行，适用于持续部署场景。
SamGor：叉烧哥最近有篇关于linux的学习笔记，看完了觉得写得十分精辟，对于尚未使用linux的同学来说简直就是福音~推荐给大家学习学习。
一、下载alluxio250软件包 wget https://***/packages/29/alluxio-2.5.0-bin.tar.gz （请联系作者询问cos地址） # md5 [root@172 ~]# md5sum alluxio-2.5.0-bin.tar.gz 127b0ea8616ed14bb68a4be7a5ffd0a2 alluxio-2.5.0-bin.tar.gz 二、替换 # 备份181 mv /usr/local/service/alluxio{,.181} # 解压250
scp是secure copy.remote file copy program用于将文件或目录从一个linux系统复制到另一个linux系统,传输的协议是ssh协议,保证传输的安全
/root/.ssh目录原先不存在，使用ssh命令登录自身后就可以自动创建.ssh目录
当你有多台服务器，如果一台一台登录上去管理那就说不出的麻烦，所以批量管理工具就应运而生了。只要你设置了SSH无密码登录：
这里我使用到的是腾讯云的cos对象存储： https://console.cloud.tencent.com/cos
有幸我遇到这样一个数据迁移场景： 有很多小文件散落到在不同的文件夹，我需要将这些小文件按照一定的规则找出来，然后将他转移到另外的一个文件系统。如果看到这个可能还会说这个场景不算奇葩，但是事情往往就是万万想不到，这个场景之下有一个比较恶心的网络策略限制，本来数据要从a机器传到b机器，但是a机器只能联通b机器的80端口。
ClusterShell 轻量级集群管理工具，它是基于ssh和scp命令进行封装。ClusterShell 工具使用 clush命令管理节点。通过clush命令批量管理多台服务器执行相同的命令（例如安装软件，监测运行状况...），从而实现配置批量的配置下发。使用ClusterShell工具需要主机之间建立ssh免密。
作为一个运维工程师，经常可能会面对几十台、几百台甚至上千台服务器，除了批量操作外，环境同步、数据同步也是必不可少的技能。 说到“同步”，不得不提的利器就是rsync。rsync不但可以在本机进行文件同步，也可以作为远程同步工具。 前面提到了rsync+inotify实时同步方案部署，下面结合本人近几年运维工作中对这一工具使用的经验，简单在此梳理下： rsync同步命令中常用的几个参数说明： -a, --archive 归档模式，表示以递归方式传输文件，并保持所有文件属性，等于-rlptgoD -v, --
回忆起来也是有些年没亲自动手搭建ADG了，今天正好有个机会重温，客户环境是19.16，恍惚记得上一次搭ADG还是在11.2.0.4的时代，时光荏苒啊。 正好看下19c的ADG和11g的ADG在部署方面有啥不同？ 主备库都是RAC架构，数据库是CDB架构，包含有4个PDB，整个搭建过程还是遇到很多小问题，但基本也都知道原因并能快速解决，也有个别折腾了很久的，蛮有意思，所以记录下本次遇到的问题供日后参考，客户信息已脱敏。
SSH(远程连接工具)连接原理：ssh服务是一个守护进程(demon)，系统后台监听客户端的连接，ssh服务端的进程名为sshd,负责实时监听客户端的请求(IP22端口)，包括公共秘钥等交换等信息。
今天也算忙忙碌碌，处理了不少小问题，自己也总结几个问题，本来写点MySQL和mongoDB的东西，发现还是没有准备好，再补补分享给大家。 ### 批量处理防火墙权限开通 每天都会接到不少的请求，有一部分是关于权限开通的，一般的流程就是登陆到目标机器，然后赋予相应的协议和端口，如果检查发现已经开通了权限，就不需要了。 所以如果要开通某个客户端的权限，可能对应很多台服务器，这样一来，处理工作就是大批量的重复性劳动，而且还繁琐。 所以磨刀不误砍柴工，先写个简单脚本来做个半自动化。 #!/usr/bin/expec
****前言**** O(∩_∩)O一笑而过～～～ ---- ****ansible介绍**** ansible是最近两年比较热门的一款服务器自动化运维工具，基于python语言来研发的，目前来说还是有很多类似的工具，比如ansible、puppet、cfengine、chef、func、fabric，其中ansible以及fabric还是挺推荐的，ansible集合了许多其它运维工具的优点，比如：批量系统配置、批量程序部署、批量运行命令。它有许多模块组成，简单来说呢，ansib是依赖程序模块并驱动模块
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
