今天数据迁移的小组找到我,希望我能够重新构建一些测试环境,其中测试环境中的一些分区表都需要去掉分区,转换成普通表的形式,因为他们在做一些工作的时候碰到了问题,而且希望必要的约束等都保留,这个需求听起来倒不复杂,很清晰,我看了下需要转换的表,一看有将近100多个,而且重构好几套环境,想想都头疼。 这个需求是很特别,至少从数据库层面是不支持的。 一种类似就是通过exp/imp 做数据结构的同步,生成对应的ddl语句,然后解析ddl语句,把分区的部分剔除。 因为exp生成的ddl语句含有很多的存储细节,stor
在深入研究Linux和UNIX操作系统的过程中,我们经常会遇到各种各样的Shell环境。Shell是用户与操作系统交互的界面,它既是一个命令语言,也是一个程序设计语言。今天,我们将一起探索三种流行的Shell:Korn Shell (ksh)、C Shell (csh)以及Bourne-Again Shell (bash),它们各自的特点、优劣,以及它们之间的区别。
前段时间没事做,回去看nmap的官方文档,在主机探测的页面里我发现了一个叫做sctp的协议,nmap通过-PY参数可以使用这个协议去探测主机存活。那么重点来了,sctp协议是什么东西?我第一次听说。后来百度了一下,这个协议居然是独立于tcp/udp之外的另一个ip层面的协议,而且这个协议本身类似于tcp存在多次握手并且是一种可靠的数据传输协议。这就比较有意思了,如果这个协议可以用起来像tcp但是却不是tcp,那想象空间就很多了。
今天在无意中看到了java字符串的一些东西,发现和oracle比较起来还是有一定的意义的,但是发现知识点准备好了,比较的时候,每一处java的变更都得重编译运行还是不够直观,其实代码中变化的部分很固定,所以尝试写了一个简单的shell脚本来实现动态编译运行,使得演示也更加直观,使用Runtime.exec还是有一些限制。 比如我们使用一个test1.sh的脚本,这个脚本会根据输入参数动态生成java代码然后自动编译运行。 echo "public class Test{ ">Test.java echo "
如果把 Linux 比作一个蛋,那么 Shell 就是蛋壳,我们需要通过 Shell 来使用系统。
接着上一篇的内容:半自动化运维之动态添加数据文件(一) (r5笔记第55天) 我们可以通过监控表空间的情况,然后映射匹配文件系统中的挂载点情况,通过随机函数在各个分区中进行筛选,基本保证数据文件的创建能够分散到各个分区中。 接下来我们需要根据计算得到的挂载点,匹配创建数据文件的语句,比如数据文件为pool_data_45.dbf 这个时候我们就需要把数据文件自增,显示为pool_data_46.dbf. 为了统一管理我们可以定义一些基本的统一规则,这样在处理的时候就很方便了。 实现代码如下: 一个表空间对
之前的一篇博客中提到,物化视图的全量刷新也是一种高可用性的体现,但是性能如何呢,下面来简单的测试一下。 首先需要创建一个函数,这个函数会计算当前session下的一些指标信息。比如redo的生成量。 CREATE OR REPLACE FUNCTION "GET_STAT_VAL" (p_name in varchar2) return number as l_val number; begin select b.value into l_val from v$statname a,v$
Bash编程中,我们一般不需要把字符串格式化为十六进制。因为,十进制是给人类看的,而16进制则用于存储到计算机。
今天性能测试部门的同事问我一个问题,说他跑一个shell脚本调用sqlplus 结果报错 Error 6 initializing SQL*Plus SP2-0667: Message file sp1<lang>.msb not found SP2-0750: You may need to set ORACLE_HOME to your Oracle software directory 我记得自己之前碰到过类似的问题,也是sqlplus启动不了。 参见日志http://blog.itpub.net/
今天下午的时候客户发邮件反馈说,对于某个环境中的文件系统监控和表空间使用情况的邮件收到的比较频繁,感觉是1个小时发送一次,完全可以3个小时发送一次,接到这个问题后,最直接的联想就是使用crontab。 结果登录到服务器端之后查看,得到的结果如下: > crontab -l # Minute Hour Month Day Month Weekday Command ##########################################################
shell介绍 shell是一个命令解释器,提供用户和机器之间的交互 支持特定语法,比如逻辑判断、循环 每个用户都可以有自己特定的shell CentOS7默认shell为bash (Bourne Agin Shell) 还有zsh、ksh等——>用法和bash相似,但是细节还是有一定差异 查询zsh包——>yum list |grep zsh 查询ksh包——>yum list |grep ksh
现在有一个需求,输入一串数,输入的数个数还不固定,需要得到最小的那个数和对应的下标 如果说传入的数的个数固定,直接用for循环来得到最值 其实也不难。使用编程语言java,c等都可以实现。 使用动态变量可以很方便的初始化多个变量,对传入的数进行统计和比较。 动态变量的初始化有如下几种形式: param_no=$# #初始化环境变量,如果传入5个数,则会初始化5个变量。 for i in {1..$param_no} do export par${i}_=`eval echo \\${${i}}` don
Java中的封装是指一个类把自己内部的实现细节进行隐藏,只暴露对外的接口(setter和getter方法)。封装又分为属性的封装和方法的封装。把属性定义为私有的,它们通过setter和getter方法来对属性的值进行设定和获取。下面我举一个简单的封装例子
定义: 1.shell是一个用C语言编写的程序,它是用户使用Linux的桥梁。shell既是一种命令语言,又是一种程序设计语言。 2.shell是指一种应用程序,这个程序提供一个界面,用户可以通过这个界面访问操作系统。 脚本: shell脚本是一种为shell编写的脚本程序。我们通常所说的shell都是指shell脚本,但是shell和shell script是两个不同的概念。 不同的shell具备不同的功能,shell还决定了Linux中默认的shell是**/bin/bash**,流行的shell有*
最近项目有一个需求,需要在多个数据库的schema上跑一些脚本。希望dba能够提供一个脚本,能够根据需求在环境中执行指定的脚本。 乍一听,没什么技术难点,为了更明白的说明问题,我举个例子。 有4个DB Instance: DB1,DB2,DB3,DB4 有6个DB Schemas, 5个table,分布如下: db schemas tables user1@DB1 table1
该文介绍了shell脚本编程的一些基本概念和区别,包括shell脚本的书写规范、shell的类型以及不同shell的区别。
在生产环境中的数据迁移还是很惊心动魄的,毕竟生产的数据不容许有任何潜在的问题,很小的问题也可能导致业务的终端,这个时候dba的角色是很重要的,如果dba犯了一个很细小的问题,在海量数据迁移中可能会导致灾难性的结果,所以今天和大家讨论一下关于由vi误操作导致的问题及总结。 结合今天早上的例子来说明。 目前生产环境已经有大量的用户数据了,需要从老系统迁移一批用户数据过来,一切都在安装好计划进行准备和操作。我是采用了外部表的方式,把一个很大的表分为了几十上百个外部表,采用insert方式加载的。 数据的准备工作很
在数据迁移的过程中,会产生大量的dump文件,需要对dump的文件情况进行一个简单清晰的管理,比如目录下的文件特别多,而且某些表比较大,对应的dump文件比较多,就想得到一个很简洁的报告,能够统计出来每个表有多少个dump文件。 比如有1000个dump文件,都是基于 表TEST1,TEST2,TEST3,TEST4的。那么就想得到一个简单的统计报告,类似下面的形式 TEST1 100 TEST2 450 TEST3 300 TEST4 150 简单模拟一下这个问题。 使用如下的脚本a.sh来生成DUMP文
颜色值设置: PS1中设置字符颜色的格式为:[\e[F;Bm],其中“F“为字体颜色,编号为30-37,“B”为背景颜色,编号为40-47。
浏览了一下Wiki,把shell的历史简要摘抄了一下,整个发展过程还是很有趣,csh贡献了很多的想法和特性,但是最后却没有流行起来。sh虽然刚开始功能比较简单,但是后续也一直在完善。bash我觉得目前对于使用linux的朋友来说是最常见的,但是这位Fox兄弟在Wiki上的评价只是Computer Programmer,远远不及Bourne老爷子呢。
scn是数据库对自身变化的一个标记。通过一个序列号能够反映出数据库在那个时间点正在进行的操作,scn没有选用时间来作为基准单位,可能也是因为时间的不确定性,比如当前时间为2014年3月14号晚上八点整,如果修改了系统时间,改为晚上七点钟,name重启数据库以后,那个时间段的操作就都乱套了。这个scn在一般的库上都看似比较大,根据数据库的设计角度来说,这个scn能够使用很长很长的时间。 scn的变化也基本分为四类,实例级别scn,数据文件scn,数据文件头scn,结束scn,为了测试scn的变化情况,准备了下
今天查看数据库负载没有发现问题,但是当我使用top命令的时候,发现有一个进程占用了大量的cpu资源而且已经执行很长时间了。这一下子引起了我的注意。 PID USER PR NI VIRT RES SHR S %CPU %MEM TIME+ COMMAND 25807 oraccbs1 25 0 8728 732 564 R 100.0 0.0 2021:19 /bin/sh -c /opt/app/oracle/xxxxxx/Script/DailyChk
shell是Unix或GNU/Linux等操作系统中的命令解释器,它是执行其他程序的程序。它为计算机用户提供了 Unix/GNU Linux 系统的接口,以便用户可以使用一些输入数据运行不同的命令或实用程序/工具。
零零星星的接触到写一些shell也有一些日子了,发现自己已经犯了不少的错误,自我总结下。 选择合适的shell shell本身有很多种,大体有如下的几种。 /bin/sh (已经被 /bin/bash 所取代) /bin/bash (就是 Linux 预设的 shell) /bin/ksh (Kornshell 由 AT&T Bell lab. 发展出來的,相融于 bash) /bin/tcsh (整合 C Shell ,提供更多的功能) /bin/csh (已经被 /bin/tcsh 所取代
在一个schema中,可能含有大量的procedure, 有时候想查看具体的信息,一般得通过toad,plsql dev等工具来查看,有时候在尽可能摆脱图形工具的前提下,想能够尽快的查找一些信息,还是使用shell脚本更快,更准,更直接。 可以使用如下的shell脚本来查找procedure的信息。 以下的脚本可以查找是否有需要的prcedure信息。 PROC_OWNER=`sqlplus -silent $DB_CONN_STR@$SH_DB_SID <<END set pagesize 40
Telesquare TLR-2005KSH是韩国Telesquare公司的一款SK电讯Lte路由器。
在平时的工作中,需要管理的数据库还是很多的,因为远程和权限的关系,访问不了一些图形工具,有时候做检查的时候感觉都是一个串行的过程,这样检查针对性就不够强了,比如我们不知道在检查的这个时间范围内,数据库的负载是在什么范围内,如果有些库的负载极高,就需要格外注意,进行更有针对性的分析和检查,要不假设有20个库需要同时管理,没有重点,眉毛胡子一把抓还是很头疼的。查看数据库的负载还是一个不错的指标,我们可以根据这个基准来同时监控多个数据库,基本能够在一个大屏幕内显示就可以了。 自己专门写了脚本,发现效果还是不错的。
目前大部分shell(如bash)都提供了正则表达式判断操作符=~,如下就可以对一个字符符判断是否匹配正则表达式:
在上周巡检系统的时候发现session列表中显示有一个session的状态为“KILLED",当时没有太在意,等到周一回来做检查的时候,发现那个session的状态还是为KILLED. 这肯定是个问题,我们来看看这个session的情况。从v$session里可以看出这个session最早是在7月8日初始化的。 SQL> select sid,serial#,status,logon_time ,paddr from v$session where status='KILLED'; SID
Shell 简介 Shell 是一个用 C 语言编写的程序,它是用户使用 Linux 的桥梁。Shell 既是一种命令语言,又是一种程序设计语言。 Shell 是指一种应用程序,这个应用程序提供了一个界面,用户通过这个界面访问操作系统内核的服务。 Ken Thompson 的 sh 是第一种 Unix Shell,Windows Explorer 是一个典型的图形界面 Shell。 ---- Shell 脚本 Shell 脚本(shell script),是一种为 shell 编写的脚本程序。 业界所说的
1 安装MQ 1) MB的先决条件是安装正确的MQ, 目前最新的8.0.0.0版本的MB如果想在安装时正确的检测出MQ版本,需要安装MQ 7.0.1版本,最新版本无法检测出,当然还是可以安装完成MB 8.0.0.0并且运行良好,如果你在安装完MB后无法使用,不需要找MQ版本的问题,当然不管哪个版本,你得确保MQ安装正确。 注意:Fedora 17是64位版本,32位版本有些地方不一样,请自行修改. 2) 修改系统共享段大小shmmax 修改 /etc/sysctl.con
就像不同地区有不同方言一样,不同的Linux/Unix系统使用着不同类型的shell
相信很多同学都不陌生这个脚本,尤其是运维的同学,少不了吧。公司的运维系统就靠你了。shell是一种解释型的语言,我们写好了代码后,不需要编译,直接运行即可。平时我们会用它来写一些脚本,比如备份,或者启动脚本,切割日志等。当然shell也是linux的解释器,本篇我们先来了解下这个解释器。
1.安装前准备 版本: oracle12c-12.1.0.2 下载链接: http://www.oracle.com/technetwork/database/enterprise-edition/d
首先,可以帮助你提前发现并修复简单的语法错误,节约时间。每次都需要运行才发现写错了一个小地方,确实非常浪费时间。 其次,可以针对你当前不够完善不够健壮的写法,提供建议,帮助你提前绕开一些坑,避免等问题真的发生了才去调试处理。
1、关闭防火墙 Linux防火墙(FirewallD)配置 2、关闭selinux 关闭selinux 3、设置swap分区 可以根据实际情况修改,文章中为默认最小配置 dd if=/dev/zero of=/swap bs=1024 count=2048000 mkswap /swap chmod 600 /swap swapon /swap #设置成自动挂载 echo "/swap swap swap default 0 0">>/etc/fstab 📷 4、将Oracle安装包上传至服务器目录 目录可
在测试环境中,服务器和数据库实例真是多得数不胜数,自己也没有下意识去记住那个数据库实例在哪个服务器上,都是出了问题直接连过去解决。 这么多的数据库实例需要管理,表空间的监控是极为重要的,一般来说都会在给表空间设定一个阀值,比如说表空间剩余10%,20%等等,超出了阀值就会自动发送邮件,提醒DBA去做相应的处理,表空间监控如此,文件系统监控也是类似的思路。 最近处理了一些紧急的问题,看似是很小的问题,但是比较折腾人,比如说表空间超出了阀值,就会发送警告邮件,这个时候DBA就会连过去,处理问题的思路就是添加数据
ShellCheck是一个开源的静态分析工具,专门用于分析Shell脚本。它能够自动检测出脚本中的多种问题,包括但不限于语法错误、逻辑漏洞、代码风格问题,以及可能的安全风险。ShellCheck不仅能够识别问题,还能提供改进建议,帮助SRE快速定位并修复这些问题。
可能有些朋友还不知道,Oracle 推出了完全免费的 Express 版本,虽然存在一些功能限制,但是这个版本是完全免费的,只要你需要,可以随意适用。
该文讲述了如何修复Linux/Unix/OS X/BSD系统控制台上的显示乱码问题。首先,可以尝试使用clear命令或reset命令来清理屏幕。如果这些方法不起作用,可以尝试使用ANSI转义序列来真正地清空bash终端。这些方法有助于解决控制台显示乱码的问题。
有时我的探索会在屏幕上输出一些奇怪的东西。比如,有一次我不小心用 cat 命令查看了一下二进制文件的内容 —— cat /sbin/*。这种情况下你将无法再访问终端里的 bash/ksh/zsh 了。 -- Vivek Gite 本文导航 ◈ clear 命令 22% ◈ 使用 reset 命令修复显示 45% ◈ 使用 ANSI 转义序列来真正地清空 bash 终端 65% 编译自 | https://www.cyberciti.biz/tips/bash-fix-the-display.html 作
注意 == 不是 POSIX 兼容的,在 sh(Bourne Shell) 或其兼容的 POSIX shell 中,== 用于字符串比较的操作符不是正式支持的。POSIX 规范和原始的 Bourne Shell 使用单个等号 = 作为字符串比较的操作符。在 Bourne Again Shell(bash) 、ksh 中,则两者都可以使用。
下载一个“Bat To Exe Converter”的程序即可将.bat的文件转换为.exe的执行文件Bat To Exe Converter下载地址如下: pageid: 224
hadoop+spark分布式集群部署 1.环境准备 环境的准备基于我写的初始化脚本,自用7.x系列的CentOS,老版本的就支持CentOS/Redhat6,7,8但是有点不完善,需要可以邮箱或者博客留言。 os\ip hostname block centos7.9 192.168.222.226 master rsmanager,datanode,namenode.snamenode,nmanager centos7.9 192.168.222.227 node1 snamenode,nmnag
本文是《centos7下静默安装oracle11G图解配置》中第一篇。因linux下安装Oracle太过繁琐,如果写在一篇文章中,太长了。本文主要讲解安装前环境配置。
在实际的项目中可能要访问生产环境是需要各种安全验证和设置的,毕竟客户的数据是最宝贵的资源。一般来说,客户会把一部分访问的权限开放出来。这样在系统出现问题的时候,能够更快更高效的处理问题。 下面是一个简单的图表,能够说明一下其中一个项目的网络访问情况。 右边的绿色区域是公司内部的环境,其中生产问题复现环境的权限较高,这个权限只会分配给部分的人,而开发测试环境是公开环境,开发测试人员都可以访问。 左边的区域是现场环境,生产环境包括现网环境和容灾切换环境,这个是根据需求可以切换的。同时现场测试环境是客户开发给我
1.重建主机的Oracle用户 组 统一规范 uid gid 以保证共享存储挂接或其他需求的权限规范
在之前的两篇【数据刷新中的并行改进(二) (r5笔记第76天)、数据刷新中的并行改进(r5笔记第72天)】中分享了数据刷新的并行改进,其实在对很多的数据表做了切分之后,数据刷新的总体负载就基本是平均的
--[ 1 - 简介 “我们在生活中所做的事情会在永恒中回响。” ——马克西姆斯·德西姆斯·梅里迪乌斯,https://patchfriday.com/22/ 是的,我知道我们生活在 2021 年,但传真机仍然存在 索拉里斯也是如此。即使这篇文章的标题看起来有点 不合时宜,我向你保证仍然可以找到格式字符串错误 在生产代码中。特别是如果你看看这可怕的烂摊子 即通用桌面环境 (CDE),这是一个所有 UNIX 90 年代的黑客会深情地记得 [0]。事实证明 CDE 仍然是 与最新的 Solaris 10
原文https://jiangyuan.gitbooks.io/mac/content/shell_chu_tan.html
领取专属 10元无门槛券
手把手带您无忧上云