前言 使用过 Mysql mha 的都知道,为了确保在故障切换的时候,有尽量多的数据用于恢复,mha 是建议关闭 relay_log 自动清理功能的 这个功能默认是开启的,因为一般情况下已经被 SQL...| OFF | +-----------------+-------+ 但是关闭自动清理是有代价的,最主要的就是,太消耗磁盘空间了,需要定期清理 如果手动来清理,就很麻烦,幸好这里有一个很好用的工具...bin log 清理 bin log 相对简单,我之前有写过一篇专门介绍以各种姿势清 bin log 的博客,有兴趣的可以翻一翻 [root@h102 mysql]# mysql -u root -p...要清理了 ---- 清理 relay log [root@h102 data]# purge_relay_logs --user=root --password=xxxxxx --workdir=/data...mysql]# wc /usr/bin/purge_relay_logs 252 809 7401 /usr/bin/purge_relay_logs [root@h102 mysql]# ---- 命令汇总
log 文件并删除 find ./ -maxdepth 1 -name "*.log*" -mtime -3 -exec rm -rf {} \; 其他参数 -mindepth n: 限定搜索指定目录的最小深度...print SUM}' 找出已经删除但空间未释放的大文件并清空 找出已经删除但磁盘空间未释放的文件,如果文件已经删除,但实际的磁盘空间未释放,这个时候文件句柄 fd 相关信息还在内存中,可以通过 lsof 命令找出...253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted) java 20302 5988 ...hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted...hbase 3w REG 253,1 25778031203 43040 /var/log/hbase/gc.log-201812251535 (deleted
安装MHA中清理Relay log报错 [root@MHA3 ~]# /usr/bin/purge_relay_logs --user=root --password=123456 -disable_relay_log_purge...) failed: Can't locate DBD/mysql.pm in @INC (@INC contains: /usr/lib64/perl5/site_perl/5.8.8/x86_64-linux-thread-multi.../usr/lib/perl5/site_perl/5.8.8 /usr/lib/perl5/site_perl /usr/lib64/perl5/vendor_perl/5.8.8/x86_64-linux-thread-multi.../usr/lib/perl5/vendor_perl/5.8.8 /usr/lib/perl5/vendor_perl /usr/lib64/perl5/5.8.8/x86_64-linux-thread-multi
Linux运行一段时间之后,内存会越来越多,导致内存不够用,需要释放一下内存才行 echo "1" > /proc/sys/vm/drop_caches 说明,释放前最好sync一下,防止丢数据。...因为LINUX的内核机制,一般情况下不需要特意去释放已经使用的cache。这些cache起来的内容可以增加文件以及的读写速度。...再用free -m 命令查看一下,剩余的内存 如果没有什么效果,可以使用 echo "2" > /proc/sys/vm/drop_caches 或者 echo "3" > /proc/sys/vm/drop_caches
例如下面 kafka 命令创建了一个 topic 为 test 的主题、该主题下有 4 个分区、每个分区有两个副本保证高可用。 ....日志清理机制 由于 kafak 是把消息存储 在磁盘上,为了控制消息的不断增加我们就必须对消息做一定的清理和压缩。kakfa 中的每一个分区副本都对应的一个 log 日志文件。...而 Log 又分为多个 LogSegement 日志分段。这样也便于日志清理。kafka 内部提供了两种日志清理策略。 日志删除 按照一定的保留策略直接删除不符合条件的日志分段。...基于时间 我们可以通过 broker 端参数 log.cleanup.policy 来设置日志清理策略,此参数的默认值为“delete”,即采用日志删除的清理策略。...如果要采用日志压缩的清理策略,就需要将 log.cleanup.policy 设置为“compact”,并且还需要将 log.cleaner.enable(默认值为 true)设定为 true。
Docker 1.13.0+ 引入了清理命令。...官方文档:https://docs.docker.com/engine/admin/pruning/ 清理镜像 $ docker image prune 清理容器 $ docker container...prune 清理网络 $ docker network prune 清理 Volume $ docker volume prune 清理所有 $ docker system prune $ docker
对于清理过多过大的relay log需要注意引起的复制延迟资源开销等。MHA可通过purge_relay_logs脚本及配合cronjob来完成此项任务,具体描述如下。...,脚本会将relay_log_purge设置为0,当清理relay log之后,最后将参数设置为OFF(0) 3、定制清理relay log cronjob pureg_relay_logs脚本在不阻塞...SQL线程的情况下自动清理relay log。...对于不断产生的relay log直接将该脚本部署到crontab以实现按天或按小时定期清理。...>> /var/log/masterha/purge_relay_logs.log 2>&1 更正,移除多余字符app @20150515 4、手动清理示例 # purge_relay_logs
=/log/umsservice log_file2=/opt/AppServer/apache-tomcat-6.0.35/webapps/ums400/data/log log_file3=/log.../playagent log_file4=/opt/AppServer/apache-tomcat-6.0.35/webapps/aesconnector/data/log log_file5=/log.../umseval log_file6=/log/umssmsvalidate log_file7=/opt/AppServer/apache-tomcat-6.0.35/logs find $log_file1...trace.log.*' -exec rm -rf {} \; find $log_file3 -type f -mtime +45 -name 'trace.log.*' -exec rm -rf...{} \; find $log_file4 -type f -mtime +35 -name 'trace.log.*' -exec rm -rf {} \; find $log_file5 -type
前言 ---- git log 命令主要用于查看提交记录 日常开发中,我们会经常使用 git log 查看提交记录,配合 git status 确认当前代码是不是最新的 git log 有很多的参数选项...,我们可以根据自己的需求使用不同的参数,使其输出我们想要的效果 2. git log ---- 基本用法 git log only one line,该参数用于简化 git log 的默认输出。...查看某个人的提交记录 (等号和空格都行) git log --author liang git log --author=liang 查看最近 n 次的提交记录 # 查看最近1次提交记录 git log...-1 # 查看最近2次提交记录 git log -2 查看文件的变动信息 # 查看所有提交记录的变动信息 git log -p # 查看某个 commit id 及其以前的记录 git log -p...'%Cred%h%Creset -%C(yellow)%d %s' 我使用的输出格式,我会定义个别名来使用这个命令 git log --graph --pretty=format:'%Cred%h%Creset
四、命令行(shell,壳) 了解:常见的shell。 Csh、tcsh、zsh、bash等 在Linux中如何打开命令行界面?...打开方式:在Linux中的任意一个空白的地方(不要点着图标),右键然后选择【在终端中打开】,会看到一个类似于下面界面的窗口: ? 命令行符号介绍: ?...关于用户身份标记说明: 在Linux中#表示超级管理员身份,$符号表示普通用户。
Linux 系统 top 命令快速入门 话说,在远离人间纷扰的计算机系统中,世界也并不太平,各进程奋力厮杀抢夺计算机资源,就是CPU。...看我祭出top命令,放大型的显微镜观察进程。 接下来进入主题,进程管理之top命令。 top命令有何用呢,它可以动态地显示进程状态信息。 top命令用法格式如下所示。...top 选项 参数 仅仅知道top命令语法格式是不够的的,你还得知道top命令常用选项,可以参考下面这个表。...使用top命令查看进程状态信息,显示结果如下图。 image.png 由于top命令的运行结果是动态显示的,信息是连续变化的,结果信息不容易复制,所以使用截图方式显示结果。...在top命令的运行界面,用户可以通过快捷键进行交互操作。top命令常用的交互快捷键如下。 image.png 在top命令的运行界面,使用快捷键i忽略闲置和僵死的进程,交互结果下图。
本文将介绍如何快速的清理 docker 占用的系统资源,具体点说就是删除那些无用的 镜像、容器、网络和数据卷。...查看 docker 占用的资源 在进行资源清理之前我们有必要搞清楚 docker 都占用了哪些系统的资源。这需要综合使用不同的命令来完成。...通过这些命令查看 docker 使用的资源情况后,相信你已经决定要清理 docker 占用的一些资源了!让我们先从那些未被使用的资源开始。...回想我们前面介绍的 docker system prune --all --force --volumns 命令,如果在执行这个命令前系统中所有的容器都已停止,那么这个命令就会移除所有的资源!...执行一次清理任务: 总结 经常清理系统资源不仅能够让系统运行的更流畅,也利于我们把精力集中在相关的重点资源上面。所以建议大家能够使用相关的资源清理命令,让 docker 保持清爽和高效。
定位 df -ah可以通过 User% 那一列哪看到个占用多。 进入根目录,查询大文件与目录 cd / du -sh * | sort -n # 查看大小1...
一、问题提出 之前写过一篇名为“快速安全删除MySQL大表”的博客,讲解如何在不影响线上数据库服务的前提下删除大表。实际上清理MySQL binlog也会遇到同样的问题。...这种情况下,即便是在业务低峰期,每次执行清理任务时也会卡库。...二、解决方案 解决这个问题的总体思路与删除大表类似,先在binlog文件上建立硬链接,以快速执行purge master logs操作。...然后使用truncate操作系统命令逐步缩减binlog文件,直到最后binlog文件变得很小时再将其删除。事实证明这种方案行之有效,能够不影响数据库服务同时清理binlog。...-e "purge master logs before date_sub( now( ), interval 10 day);" > /home/mysql/dbbat/purge_binlog.log
几乎没有人愿意花时间清理掉他们不再使用的文件和整理文件系统,结果,文件变得很混乱,很难找到有用的东西,要使它们运行良好、维护备份、易于管理,这将是一种持久的挑战。...当我们准备做 Unix 文件系统的总结报告时,几个有用的 Unix 命令能提供一些非常有用的统计信息。...在下面的命令,我们使用 find 命令在当前目录及递归目录再次查找文件,以文件时间排序并按年-月-日的格式显示,在列表顶部的显然是最老的。.../apche/log/ftp.log printf 命令输出 %T(文件日期和时间)和 %P(带路径的文件名)参数。...tail -n 1 要想层次分明,可以为一个文件系统或大目录创建一个总结报告,显示这些文件的日期范围、最大的文件、文件所有者们、最老的文件和最新访问时间,可以帮助文件拥有者判断当前有哪些文件夹是重要的哪些该清理了
crontab 命令 crontab 命令是 Linux 中用来设定重复执行命令或脚本的工具。它能够在指定的时间段内,按照需求以某一时间间隔执行命令或脚本。...crontab 的命令格式如下: ?...因此,find 命令的一般形式可以简化为 find path ......-exec command {} \; 执行一条 Shell 命令 -ok command {} \; 同 -exec 的作用,不过在执行每条命令前,都会提示用户确认 常用的参数 -name :...,就跟踪至链接所指向的文件 -delete : 删除查找到的文件或目录 定期清理 至此,定期清理无用的文件就变得很简单了。
Linux清理挖矿程序@bug Linux清理挖矿程序 最近服务器经常被挖矿,一些经验 1.
Linux下执行了一些命令之后,可能还想再次执行,有没有什么方法快速执行呢?...找出历史命令并执行 第一种方法比较传统,使用history命令或者fc -l命令列出历史命令: $ fc -l 1997 ablc 1998 exit 1999 find -name..."" 2000 exit 我们注意到,列出的历史命令前有一个数字,其实要想执行某个特定历史命令,只需要!...的更多用法可以参考《Linux中!的惊叹用法》 命令搜索 按下: ctrl + r 就可以搜索历史执行的命令啦。 总结 一张图说明: ?
针对大量log日志快速定位错误地方 tail/head简单命令使用: 附加 ---- 针对大量log日志快速定位错误地方 动态查看日志 tail -f catalina.ou 从头打开日志文件 cat...nanjiangtest.txt 输出某个新日志去查看 [root@yesky logs]# cat -n catalina.out |grep 717892466 >nanjiangtest.txt tail/head简单命令使用...我是这样做的,首先: cat -n test.log | grep “关键词” 得到关键日志的行号 [root@yesky logs]# cat -n catalina.out |grep 717892466...向前移动半屏 ctrl + U - 向后移动半屏 2.单行导航 j - 向前移动一行 k - 向后移动一行 3.其它导航 G - 移动到最后一行 g - 移动到第一行 q / ZZ - 退出 less 命令...这 10 几个高级开发用的 Git 命令,个个惊艳! MySQL 你没见过的字符串函数 【原创】怒肝3W字Java学习路线!
领取专属 10元无门槛券
手把手带您无忧上云