Oracle 开启归档模式后，会一直不停的产生归档日志，如果不定时删除，迟早会撑爆磁盘空间，所以就需要布置定时删除归档日志的脚本！
人工智能的热潮已经在逐渐冷却，炒新闻的越来越少，AI 已经逐渐侵入到实际的生活中，可能我的神经弧反射的比较长，到现在才后知后觉，所以以一个后知后觉的人的角度来说说我感知DBA 与 AI 之间的关系。
有一天上班的时候，收到一封报警邮件。 ZABBIX-监控系统: ------------------------------------ 报警内容: archive_area_usage ------------------------------------ 报警级别: PROBLEM ------------------------------------ 监控项目: archive_area_usage：ARCHIVED LOG-->70.25--> ---------------------
WAL目录下（pg_wal）存了大量WAL段文件，由于来不及删除，占用磁盘空间突然暴增。这种现象很常见。那么为什么PG不删除呢？最常见的原因：1）归档失败；2）slot持有老的WAL。
在开发环境及UAT环境经常碰到需要清除归档日志的情形，对于这个问题方法有很多。可以直接使用rm方式清除归档日志，也可以使用find命令来查找符合条件的记录来清除归档日志，或者直接写个shell脚本来搞定。这样在DEV或者UAT还可以，但是在Prod环境还是建议使用RMAN提供的命令来搞定比较妥当。因为rm，find方式删除了实际的归档日志也释放了空间，但对应的存储在控制文件中的归档信息并没有彻底清除。依旧占用着一些空间未能及时清除而需要控制文件通过age out方式来释放空间。本文描述了使用RMAN方式来清除归档日志，同时也可以将其部署到shell脚本中使用。
由于业务增长，频繁的备份还原对于磁盘空间有了更大的空间需求，基本每周500G的磁盘，空间使用率都会达到85%以上，故编写Oracle清理脚本结合crond自动清理Oracle归档日志。
今天早上收到一条报警短信，提示是dg的接收出了问题，从v$dataguard_status得到的最新记录如下： 2015-09-18 07:13:36.0 Fetch Archive LogErrorFAL[server, ARC1]: Error 270 creating remote archivelog file 'stest' 2015-09-18 07:13:36.0 Fetch Archive LogErrorFAL[server, ARC3]: Error 270 creating remot
系统中有这样一条报警信息，看似比较简单，但是引起了我的注意，主要原因是因为这是一个10gR2的备库，备库如果出现这样的问题，看起来似乎是在归档删除上存在一些问题。 [DB监控系统]_ora_test_s2_yangjr@10.127.2.133_报警 ZABBIX-监控系统: ------------------------------------ 报警内容: Free disk space is less than 20% on volume /opt -------------------------
查看当前归档日志路径，空间的使用率已经到了100%，于是在rman中，删除30天之前的归档日志文件，
原理：利用Google Apps Script 回复邮件来实现自动回复短信，以达到保号目的。当然你也可以发送“天王盖地虎”到+1 (413) 370-0333，我们会在两分钟内回复你。
环境：Windows + Oracle 单实例 数据量：小于20G 重点：需要规划好备份的路径，建议备份文件和数据库文件分别存在不同的存储上。
微信聊天记录中产生的文件，图片以及音视频都会缓存在本地磁盘，长时间不清理，就会占用很大存储空间。
我们不管在生产环境还是开发环境，看日志是必不可少的，日志中往往包含很多有用的信息，有时候被DDOS、上传非法文件等等，我们都需要通过日志分析。但是日志是跟访问量成正比的，你的访问量越大，你的各种级别日志就越多，日志文件大小会增长极快，服务器会很快消耗磁盘空间，这成个很严重的问题。不仅是这个，如果你是一个日志文件的话，你阅读、打开都要花费很大力气，那么怎么才能处理好这种情况？
日志分析平台对网络设备和服务器日志进行收集时发现索引数据按天归档单个索引的大小能控制在1G 以内，ELk集群产生的索引数量过多，于是决定将索引数据归档规则改为按周归档。
一般来说以上都默认包含LogMiner分析包，无需再安装 。如果不能确认，可以 DBA 身份登录系统，查看系统中是否存在运行 LogMiner 所需要的 dbms_logmnr、 dbms_logmnr_d 包，如果没有需要安装 LogMiner 工具，必须首先要运行下面这样两个脚本：ORACLE_HOME/rdbms/admin/dbmslm.sql ORACLE_HOME/rdbms/admin/dbmslmd.sql 。这两个脚本必须均以 DBA 用户身份运行。
其实帮助很多的朋友解决过Oracle数据库数据不同步的问题，看似简单的问题分析出来的原因也是五花八门。比如： Oracle数据库问题的一点总结 在查看一些没有专业DBA维护的数据库的时候，会发现很多的潜在问题，有些可能无伤大雅，看起来是不规范不标准的问题，倒不会直接造成问题，而有些问题会让人后背发凉，正如同歌词里唱的，一旦错过就不再，这里说的就是数据，所以也希望大家能够在一些案例中得到启发和参考，避免在自己的系统中重演。 先啰嗦一句，尽管在Oracle命令行下敲过命令了，但是完整的命令和思路还算清晰，所以大
熊军（老熊） 云和恩墨西区总经理 Oracle ACED，ACOUG核心会员 在11g里面，随着ASM、RAC、Data Guard（包括Active Data Guard）的成熟，使用RAC+ASM+Data Guard越来越成为一种可靠的、维护简单、稳定的高可用性和容灾保护方案。这篇文章谈谈如何管理Oracle 11g Data Guard环境中的归档日志。 归档日志是重要的，备份恢复需要它，而Data Guard也需要它。在早期版本的Data Guard环境中，常常面临着归档日志管理问题,，但11g做
为了解决某个bug，应用了近期发布的最新版psu，应用过程是一路坎坷，在此总结一下。
1 <概述> <大多数 WinCC 项目都需要显示历史归档数据，可以制作专门的趋势曲线画面来显示重要参数的归档数据，也可以通过点击工艺画面中实时参数显示的对象来弹出对应的变量的归档数据。本文档介绍如何实现点击画面中的输出输入域后弹出其所链接变量的归档数据。 > 1.1 <解决思路> <总体解决思路是通过 WinCC 的 GetLink 函数来获取指定的 WinCC 对象所链接的变量，同时弹出带有在线趋势的画面，接着在弹出画面的画面打开事件中加载已经获取的变量对应的历史归档数据到在线趋势。> 1.2 <GetLink 函数> < GetLink 函数可以获取指定的 WinCC 对象的属性下所链接的变量。 GetLink 函数的格式： BOOL GetLink(LPCTSTR lpszPictureName, LPCTSTR lpszObjectName, LPCTSTR lpszPropertyName, LPLINKINFO *pLink); 各个参数的含义如下： lpszPictureName：对象所在的画面名称。 lpszObjectName：对象名称。 lpszPropertyName：链接了变量的对象属性名称。 pLink：为数据结构变量，类型为 LPLINKINFO，包括以下内容： szLinkName：属性动态化所链接的变量。 LinkType：属性动态化的连接类型，如表 1 所示。 表 1
随着企业业务数据量的增大，现有服务器环境可能无法提供足够的磁盘空间存放数据处理的日志和文件，磁盘空间不足是影响EDI环境正常运行的一大原因，会导致数据无法正常处理，日志信息无法写入，影响业务正常进行。本文将为大家介绍出现磁盘空间不足，导致EDI系统运行异常的紧急处理方法。
对于 Oracle 数据库的备份与恢复，尽管存在热备，冷备以及逻辑备份之外，使用最多的莫过于使用RMAN进行备份与恢复。而制定RMAN备份策
存档是一个通常要压缩的文件，它包含了一组文件。tar应用程序是打包盒解包存档文件的。文件扩展名tar.bz2、tar.gz和.tgz可以确定文件是压缩的tar存档文件，它们往往是互联网上提供的软件包。 1.tar 命令 tar是标准的UNIX/Linux归档应用工具。早期它曾经是一个磁带归档程序，后来逐渐发展成为能够处理各种归档文件的通用归档包。tar接受很多带有选项的归档过滤器。 tar选项 -A:将tar文件附加到现有档案中。 -c:创建一个新的存档文件。 -d:将存档与指定的文件系统进行比较。 -j:
备份就是把数据库复制到转储设备的过程。其中，转储设备是指用于放置数据库副本的磁带或磁盘。通常也将存放于转储设备中的数据库的副本称为原数据库的备份或转储。备份是一份数据副本
版权声明：本文为博主原创文章，未经博主允许不得转载。 https://blog.csdn.net/wzy0623/article/details/53905885
1、在Oracle用户下，创建归档日志删除文件del_OCPLHR1_arch.sh
版权声明：本文为木偶人shaon原创文章，转载请注明原文地址，非常感谢。 https://blog.csdn.net/wh211212/article/details/53484028
“增删改查”都是查找问题，因为你都得先找到数据才能对数据做操作。那存储系统性能问题，其实就是查找快慢问题。
(2).py3：Python3脚本(Python3脚本通常以.py而不是.py3结尾，很少使用)。
logrotate是一个日志文件管理工具。用来把旧文件轮转、压缩、删除，并且创建新的日志文件。我们可以根据日志文件的大小、天数等来转储，便于对日志文件管理，一般都是通过cron计划任务来完成的
之前在《Win环境下Oracle小数据量数据库的物理备份》这篇文章中，介绍了在win平台下对于小数据量的数据库的物理备份设计。 文中重点提到，强烈建议备份文件有单独的存储,防止存储单点故障时备份文件亦不可用。 当我在实验环境实际去模拟这种使用单独存储的环境时，出现意料之外的问题：备份到映射的盘符无法成功，报错如下：
前面我们定义的task 都是DefaultTask 类型的,如果要完成某些具体的操作完全需要我们自己去编写gradle 脚本，势必有些麻烦，那有没有一些现成的任务类型可以使用呢？有的，Gradle 官网给出了一些现成的任务类型帮助我们快速完成想要的任务，我们只需要在创建任务的时候，指定当前任务的类型即可，然后即可使用这种类型中的属性和API 方法了。
当我还在布鲁克大学上学的时候， Macquarium 实验室中充满了苹果公司的 Macintosh Plus 电脑。一天，我在为第三年的操作系统课程准备一个程序。我的一个小程序报告没有错误，当我运行它时，黑白色的桌面上出现了竖条， 我的软盘被退出来了，计算机然后从新启动。经过更仔细的检查，我意识到我在 if 语句中使用了不正确的判断符号“ = ”，应该是“ == ”。这个小错误导致了不可以预见的结果，从那时起，我将 C 语言当做一个有精神病的室友，我们可以一起生活、一起工作，但是只要你一不注意它，他就会出来
编辑手记：对于资深的老DBA们，他们在漫长的职业生涯中养成了很多稀奇古怪的守则，以在复杂多变的环境中“幸存”，这源于无数血泪的教训，我曾经在《数据安全警示录》一书收录了大量现实案例，现在整理分享给大家，共为警示。 在数据库日常管理过程中，有些威胁来自数据库外部，而有些威胁则来自数据库内部，对于数据库外部，破坏性的操作有rm，而在数据库内部，同样有破坏性操作，如Truncate。 案例分享 ---- 误删除数据表 原来接手一个部门的所有数据库，结果漏了一个，也没人告诉我，所以我不知道这个数据库存在。一
在任何时间，PostgreSQL在数据集簇目录的pg_wal/子目录下都保持有一个预写式日志（WAL）。这个日志存在的目的是为了保证崩溃后的安全：如果系统崩溃，可以“重放”从最后一次检查点以来的日志项来恢复数据库的一致性。该日志的存在也使得第三种备份数据库的策略变得可能：我们可以把一个文件系统级别的备份和WAL文件的备份结合起来。当需要恢复时，我们先恢复文件系统备份，然后从备份的WAL文件中重放来把系统带到一个当前状态。这种方法比之前的方法管理起来要更复杂，但是有其显著的优点：
一、一个不经意的问题? 做例行检查的时候，我基本会看看大体的DB time情况，是否有较大的抖动，归档频率是否频繁，近期是否有监控报警等，当然很多细则不需要一个一个去确认，打开Zabbix里面的zat
今天在火车上接到一个电话说，数据库有个报警，让我看看是怎么回事。 看着报警信息一直重复出现，看来是有些问题了。 这是一个统计库，出现了DG相关的报警（自定义配置的），看起来是备库端接收归档的时候出现了问题。 Error 270 creating remote archivelog file 'sgstatdb3' 我们知道备库端其实是有一个80%的阈值控制闪回区的，当时限于在火车上，网络，信号不顺畅，所以让同事帮忙看了下，大体是说闪回区满了，但是系统层面设置了crontab定期去删除归档，每
Oracle RMAN 在生产环境使用一般都是热备的方式，冷备需要关掉数据库才可以进行，生产环境一般是没有停机时间给你做备份的，所以冷备不太适合生产备份。热备的方式需要打开归档模式！
本手册描述Oracle数据库的备份还原机制，帮助应用Oracle数据库，为了保证数据库的安全，避免外界因素造成数据库中数据丢失，有效的备份可以更好的重建数据库，在修改删除表或者表空间以前或者以后执行适当的备份是相当必要的，备份时建议使用直接登录服务器或者利用ssh工具登录服务器利用相关的系统命令进行操作，避免使用PLSQL工具进行操作，影响备份的结果，本文档适合有一定Oracle经验人员进行阅读，以OracleLinux 6.5为环境基础，oracle 版本为11.2.0.4，其他的版本请自行测试，避免出现其他的问题。
pg_probackup是管理PG数据库集群备份和恢复的工具。用于执行周期性备份PG实例。兼容PG9.5，,96,10,11,12,13。和其他备份解决方案相比，提供下面优势，帮助部署不同备份策略和处理大量数据：
在生产环境中，做数据迁移需要考虑很多的可能性和场景，尽量排除可能发生的问题。我自己总结了下，大体有如下需要注意的地方。 1）充分的测试，评估时间，总结经验，提升性能 在生产中进行数据的大批量迁移时，充分的测试时必须的。一方面可以根据这些测试积累一些必要的数据作为生产中使用参考，另外一方面可以基于之前的测试，总结经验，总结不足之处，加入改进，在生产中每一分钟的改进都是很重要的。 2）完整的备份策略 热备甚至冷备 在数据迁移之前进行完整的备份，一定要是全量的。甚至在允许的情况下做冷备都可以。数据的备份
今天在梳理服务器的信息的时候，发现有一台服务器没有设置crontab作业,一般的服务器中可能会需要一些定时的任务来触发一些备份，清理等等工作。 因为这是一台备库机器，上面有11gR2的备库,所以首要工作就是查看是否在正常应用日志。 从日志来看，归档已经正常应用。不过似乎有一些相对陌生的操作在日志里面。 Archived Log entry 68735 added for thread 1 sequence 95373 ID 0x70141a28 dest 1: Tue Aug 04 16:00:29 201
日志切割 当网站访问量大后,日志数据就会很多,如果全部写到一个日志文件中去,文件会变得越来越大,文件大速度就会慢下来,比如一个文件几百兆,写入日志的时候,就会影响操作速度. 手动切割 --进入日志目录 cd /usr/local/nginx/logs/ --重命名日志文件 [root@host1 logs]# mv access{,.$(date +%F)}.log [root@host1 logs]# ls access.2020-09-18.log access.log error.log ng
51、ln：创建链接文件 ln SRC DEST：创建硬链接 -s：创建软连接 -i：显示文件的inode号 -v：显示执行结果 硬件连接： 1、只能对文件创建，不能应用于目录，文件的硬链接次数为2 2、不能夸文件系统 3、创建硬链接会增加文件被连接的次数 符号连接： 1、可应用于目录 2、可以跨文件系统 3、不会增加被连接文件的连接次数 4、其大小为指定的路径所包含的字符个数 52、du du：显示目录下的所有文件的大小 -s：显示目录大小 -sh：单位换算后显示 53、df df：显示整个磁盘分区的使用情况 -h：显示空间大小 54、fdisk fdisk：磁盘分区 fdisk /dev/sda p：显示当前磁盘上的分区 n：创建一个新的分区 e：扩展分区 p：主分区 d：删除一个分区 w：保存退出 q：不保存退出 t：修改分区类型 l：显示所有支出的分区类型 55、partprobe 把新的分区同步到内核上去。 56、mkfs mmkfs：创建文件系统 mkfs -t FSTYPE 指定分区 -t可以实现多种系统的格式化 如mkfs -t ext2 /dev/sda5 57、mke2fs mke2fs：专门管理ext系列的文件的命令，不跟任何参数，指的是创建ext2 -j：指的是创建ext3类型文件系统 -b BLOCK_SIZE：指定块大小，默认为4096；可用取值为1024,2048或 4096 -L LABEL： 指定分区卷标；例如 mke2fs -L MYYY /etc/sda5 -m #:明确指定预留给超级管理员用的快熟百分比 mke2fs -m 3 /dev/sda5 -i #:指定为多少个字节的空间创建一个inode ， 默认为8192；这里给出的数值应该为块大小的2^n被 mke2fs -i 4096 表示4096个字节创建一个inode -F:强行创建文件系统； -E：用于指定额外的文件系统属性； -N#：指定inode个数； 58、blkid blikd：查询或查看块设备的属性，其中有包含文件系统的信息 59、e2lable e2lable：专门用于查看或定义卷标 查看卷标 e2label /dev/sda5 设定卷标 e2label 设备文件 卷标 ：即实现设定卷标 e2label /dev/sad6 YYY （这里的设备文件即/dev/sda5) 60、tune2fs tune2fs：调整文件系统的相关属性 -j：不损坏原有数据，将ext2升级为ext3，但是不能降级 -L LABLE：设定或修改卷标 -m #：调整预留百分比 -r #：预留块数 -o：设置默认挂载选项，其中有一个是acl，acl是一个功能，但需要挂载才能 使用，否则是不能用的 -c #：指定挂在次数达到#次之后进行自检，指定0或-1表示关闭此功能，不自检； -i #：可以指定每挂载使用多少天后进行自检：0或-1表示关闭此功能； -l：显示超级块内容 61、dumpe2fs dumpe2fs：以显示文件系统中超级块信息或文件的属性信息，同上面的tun2fs -l 选项类似，都是很重要的命令，其中也显示超级块的信息，FREE是空闲的意思 -h：表示只显示超级块中的信息 62、fsck fsck：检查并修复Linux文件系统 -t TYPE：指定文件系统类型 -a：自动修复 63、e2fsck e2fsck：专门用来检查修复ext2或ext3的命令 -a或-p：自动修复； -f ：强行修复； 64、mount mount：挂载文件系统 mount 设备 挂载点 设备 设备文件：/dev/** 卷标：LABLE="" UUID：UUID="" 挂载点：挂载点就是个目录 1，此目录没有被
Oracle的备份与恢复有三种标准的模式，大致分为两大类，备份恢复(物理上的)以及导入导出(逻辑上的)，而备份恢复又可以根据数据库的工作模式分为非归档模式(Nonarchivelog-style)和归档模式(Archivelog-style),通常，我们把非归档模式称为冷备份，而相应的把归档模式称为热备份，他们的关系如下所示
python文件的后缀名有：“.py”、“.py3”、“.pyc”、“.pyo”、“.pyd”、“.pyi”、“.pyx”、“.pyz”、“.pywz”、“.rpy”、“.pyde”、“.pyp”、“.pyt”。
每次手动备份太麻烦了，工作上需要，决定使用自动备份，所以写个博客来记录一次，本次备份功能是无密码通过批处理来执行定时备份的，如果是windows server r2服务器的话大家可以搭配任务计划程序来做定时执行，如果是linux内核的系统可以用crontab插件，crontab 插件大家可以自行百度，从而形成定时备份数据。
最近在做基于openresty的waf，在测试openresty的过程中用openresty替代了原nginx，结果第二天又自动切换回了原nginx，通过ps -ef 看到nginx在凌晨3点多自动重启。连续几天在多个机器上都发现同样的情况。
最近在做MySQL分布式环境的统筹管理，目前碰到的痛点是对于集群的配置管理目前是松散的，几套环境还能忍受，如果环境多了之后还是很容易凌乱，所以我们需要一套机制来保证。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
