摘要 MySQL 由于性能高、成本低、可靠性好，已经成为最流行的开源数据库，因此被广泛地应用在 Internet 上的中小型网站中。...随着 MySQL 的不断成熟，它也逐渐用于更多大规模网站和应用，比如维基百科、Google 和 Facebook 等网站。非常流行的开源软件组合 LAMP 中的“M”指的就是 MySQL。...Multi-Version Concurrency Control)，实现无阻塞读操作 Multi-Version Concurrency Control 多版本并发控制，MVCC 是一种并发控制的方法，一般在数据库管理系统中...，实现对数据库的并发访问；在编程语言中实现事务内存。
一、MySQL 优点： 软件体积小、速度快、免费开源； 跨平台； 因为是开源数据库，提供的接口支持多种语言连接操作 ； MySQL的核心程序是采用完全的多线程编程。...连接MySql服务器， 使得应用被扩展； 支持大型的数据库， 可以方便地支持上千万条记录的数据库。...作为一个开放源代码的数据库，可以针对不同的应用进行相应的修改； 拥有一个非常快速而且稳定的基于线程的内存分配系统，可以持续使用，不必担心其稳定性； MySQL同时提供高度多样性，能够提供很多不同的使用者介面...)语言，这是对习惯于企业级数据库的程序员的最大限制； MySQL的价格随平台和安装方式变化。...unix样久经考验尤其处理大数据库。
脚本DB_PG_HC_lhr_v7.0.0.sql是PG数据库脚本，执行后会产生PostgreSQL数据库的健康检查html报告。...）、mysql（MySQL、TiDB、OceanBase）、MSSQL客户端（SSMS、Navicat皆可）、psql（PG、Greenplum、openGauss）、gisql（国产达梦）、gsql（...2、MySQL数据库 其它不再列举。 3、SQL Server数据库 其它不再列举。 4、PG数据库 其它不再列举。 5、达梦数据库 其它不再列举。...数据库 只要有mysql客户端即可，使用MariaDB的客户端也可以，如下： mysql -uroot -plhr -P3306 -s -f MySQL_HC_lhr_v7.0.0.sql...4、PG数据库 需要有psql客户端，运行方式如下： psql -U postgres -h 192.168.66.35 -p 54324 -d postgres -W -H -f D:\DB_PG_HC_lhr_v7.0.0
脚本DB_PG_HC_lhr_v7.0.0.sql是PG数据库脚本，执行后会产生PostgreSQL数据库的健康检查html报告。...脚本DB_PolarDB_for_PG_HC_lhr_v7.0.0.sql是PolarDB_for_PG数据库脚本，执行后会产生PolarDB_for_PG数据库的健康检查html报告。...、TDSQL_for_PG（原 TBase）、MogDB、OushuDB、PolarDB_for_PG、神通等17个数据库，也可以巡检Linux操作系统（后续会免费逐步增加MongoDB、PolarDB...2、MySQL数据库 其它不再列举。 3、SQL Server数据库 其它不再列举。 4、PG数据库 其它不再列举。 5、达梦数据库 其它不再列举。...数据库 只要有mysql客户端即可，使用MariaDB的客户端也可以，如下： mysql -uroot -plhr -P3306 -s -f MySQL_HC_lhr_v7.0.0.sql
MySQL主从数据不一致是比较常见的情况，如何对比，如何修复是DBA必知必会的一项熟练的技能。...1、工具安装 使用percona-Toolkit进行数据对比，因此先进行此工具的安装 官方地址： https://www.percona.com/downloads/percona-toolkit 安装依赖包...yum install -y perl-DBI perl-DBD-MySQL perl-Time-HiRes perl-IO-Socket-SSL perl-TermReadKey 安装工具...数据对比 数据对比工具使用pt-table-checksum 进行主从数据对比，可以参考如下命令 pt-table-checksum --host=127.0.0.1--port 3306 --databases...=test1 -uroot -ppass --no-check-binlog-format 对比过程如下： [root@mysql1 ~]# pt-table-checksum --host=127.0.0.1
PG主从数据库搭建 环境 操作系统1：Windows Server 2012（X64） 操作系统2：CentOS 7 数据库：PostgreSQL 10.9 CentOS 7 安装 Postgresql...2、安装客户端 yum install postgresql10 3、安装服务端 yum install postgresql10-server 4、初始化pg /usr/pgsql-10/bin/postgresql...1、使用postgres用户登录（PostgresSQL安装后会自动创建postgres用户，无密码） su - postgres 2、登录postgresql数据库 psql 3、创建用户和数据库并授权...image 2、修改/var/lib/pgsql/10/data/pg_hba.conf文件，增加下图红框部分内容 ?...2、修改pg_hba.conf 3、修改postgresql.conf 4、重启数据库 配置从库 1、拷贝数据 2、配置recovery.conf 3、配置postgresql.conf 4、配置完启动数据库
PG 数据库和 oracle 数据库的查看数据库版本的 sql 语句还不一样。 PG 数据库版本查看方法如下： select version() 演示效果图： ?
3、容灾对比 3.1 MySQL 单节点： 现在的数据库普遍采用write ahead log策略来避免数据丢失，wal机制简单的解释就是：在提交CUD操作，数据写入内存的同时，也要写一份到log文件中...上如展示了ES和传统数据库的概念对比。下面的介绍中，统一使用index对应DB中table，doc对应table中的记录，field对应row中的一列。...另外提一点,数据存入ES后并不是立马就能检索到，这点跟MySQL和HBase，或者说跟数据库系统是完全不一样的。...5、使用场景 ---- 说了这么多，其实还是希望对MySQL，HBase，ES各自的实现做下对比，方便我们根据业务特点选择最合适的存储、检索方案。...而且ES也可以作为MySQL或HBase的索引来使用，虽然Mysql也有索引功能，但是过多的索引往往会拖累MySQL的性能，并且线上MySQL数据库一般也不允许执行统计类的sql，这时可以用ES辅助实现统计
01. recovery_max_workers=1 停止备库，启动压测程序，待xlog达到1000时关闭压测程序 [omm@db01 gaussdata]$ ll pg_xlog/ |wc -l 1000...[omm@db02 pg_xlog]$ gs_ctl start -M standby [omm@db02 pg_xlog]$ date Wed Sep 16 15:26:53 CST 2020 可以看到处于...测试过程中大致看了下日志产生速度：70M/s，插入的数据每秒6万条，而pg中在插入每秒6万条的时候，日志产生速度只有35M/s左右，是openGauss的一半，这块也需要优化。...在极限测试情况下，在150并发时，pg的日志产生速度大概70M/s，tps大概是每秒13万行的插入，此时replay_lag确实在逐渐增大，说明在这个大小的日志产生速度下，pg已经回放不过来这么大量的日志...而在于openGauss在插入同样的数据时产生的日志量是pg的两倍，这样造成它的回放跟不上。
参数列表 Pg14.2 Pg13.2 force_parallel_mode 取消 默认值为off default_toast_compression 新增，默认值为pglz，参考值为pglz和lz4
mysql分布式数据库中间件对比 目前数据库中间件有很多，基本这些中间件在下都有了解和使用，各种中间件优缺点及使用场景也都有些心的。所以总结一个关于中间件比较的系列，希望可以对大家有帮助。...中间件与读写分离 很多人都会把中间件认为是读写分离，其实读写分离只是中间件可以提供的一种功能，最主要的功能还是在于他可以 分库分表 ，下面是一个读写分离的示意图： 分布式数据库中间件对比总结 ?...分布式数据库中间件对比总结 ?...image.png 分布式数据库中间件对比总结 Cobar: 阿里巴巴B2B开发的关系型分布式系统，管理将近3000个MySQL实例。...总体来说支持度比 较高，也会一直维护下去， OneProxy: 数据库界大牛，前支付宝数据库团队领导楼总开发，基于mysql官方 的proxy思想利用c进行开发的，OneProxy是一款商业收费的中间件
脚本DB_PG_HC_lhr_v7.0.0.sql是PG脚本，执行后会产生PostgreSQL数据库的健康检查html报告。...二、巡检脚本特点 1、可以巡检Oracle、MySQL、SQL Server和PG数据库，也可以巡检Linux操作系统 2、脚本为绿色版、免安装、纯SQL文本 3、跨平台，只要有SQL*Plus、mysql...4、PG数据库 [image-20210130153433186.png] 5、OS信息 [wps16.jpg] 四、脚本运行方式 1、Oracle数据库 只要有sqlplus的客户端即可。...数据库 首先将DB_MySQL_HC_lhr_v7.0.0.sql和pt-summary这2个脚本拷贝到有mysql客户端的Linux环境中，然后执行如下命令： mysql -h192.168.1.63...[image-20210130150314553.png] 4、PG数据库 需要有psql客户端，运行方式如下： psql -U postgres -h 192.168.66.35 -p 54324 -
数据库“断页”是个很有意思的话题，目前任何数据库应该都绕不过去。...既然对于断页问题数据库都可能遇到，那么再来看看主流数据库是如何避免发生断页的。...mysql为了解决这个问题，引入了“双写”double write，也就是说在将数据页写入磁盘之前先写入一个共享的空间，然后再写入数据文件中。...最后看看pg的处理，pg通过开启full_page_writes参数（默认开启）来避免断页问题。...这种方式对性能也有一定影响，但是相比mysql的方式我觉得要好一些，mysql相当于任何一个脏页刷盘前都需要写两份，pg只是在数据块第一次发生变更的时候写入xlog中。
无可执行文件：不需要在数据库主机上部署任何可执行文件，在安全环境中使用可执行文件会在许多高度安全的环境中带来不可接受的风险。pg_gather只需要psql而不需要其他库或可执行文件。3....，客户端工具（如pgAdmin）包括psql，可用于pg_gather针对本地或远程数据库运行。...AWS Aurora提供“与 PostgreSQL 兼容”的数据库。但是，它并不是真正的 PostgreSQL 数据库，尽管它看起来像一个。...pg_gather有一个用于连续数据收集的特殊轻量级模式，当它连接到“template1”数据库时会自动启用。...这会在public数据库架构中创建所需的架构对象。 注意：避免将数据导入关键环境/数据库。最好使用临时 PostgreSQL 实例。
本文主要用来记述pg数据库的相关操作和异常排查指南，继上一篇博客之后，异常的频繁更新，导致死亡元组指数级增长之后，空间占用也成倍增长，逻辑问题导致了数据库问题，但细想之下也发现,当pg在面对海量数据的更新删除之后...并不会影响到连接数，如果数据库的数量超过了autovacuum_max_workers那么当一个数据库清理完成之后，会立马清理未清理的数据库，这有点像线程池哈哈。...threshold + analyze scale factor * number of tuples 小插曲count(*)和count(1) 很多时候我都认为count(*)就是统计一行不展开数据直到我看到mysql...select proname, pronargs, prosrc from pg_proc where proname='count'; 如上参考的是pg的数据库count函数，意思类似，这查看函数的功能太友好了...总结 知道的越多不知道的越多，即使各种数据库直接都有相通的思想和不同的实现，关于pg数据库元祖分析和事务xid冻结，请持续关注我后续博客 引用 MySQL 中 count() 和 count(1) 有什么区别
目录 1 mysql 2 pg 1 mysql ifnull(字段，0) 2 pg coalesce (字段，0)
上周一篇关于MySQL 拜托加个索引能和PG一样简单吗？...只能gh-ost了 烦人，的帖子引起争议，主要因为我提到 POSTGRESQL 在线添加索引是非常方便的，MySQL 在这方面不咋地，首先说结果，我对MYSQL的知识需要更新，针对高版本得MYSQL是支持...先说结论，高版本的MySQL可以进行online ddl index是在8.023版本以上的MySQL 而在MySQL 8.023 版本以下的MySQL没有默认使用 online ddl index 的功能或根本没有...下面是证实在MYSQL8.030 在线加索引是否可以，答案是可以 mysql> mysql> CREATE PROCEDURE generate_data() -> BEGIN ->...> mysql> DELIMITER ; mysql> mysql> CALL generate_data(); 我们先建立一个存储过程，并且往里面添加1000万的数据。
脚本DB_PG_HC_lhr_v1.0.0.sql是PG脚本，目前结果比较简单，还在持续更新优化，执行后会产生PostgreSQL的健康检查html报告。...小麦苗数据库巡检脚本特点 1、可以巡检Oracle、MySQL、SQL Server、PG数据库（后期考虑增加MongoDB） 2、脚本为绿色版、免安装、纯SQL文本 3、跨平台，只要有SQL*Plus...MySQL数据库 ? ? ? ? SQL Server数据库 ? ? ? OS基本信息 ? PG数据库 ? 脚本运行方式 Oracle数据库 只要有sqlplus的客户端即可。...数据库 mysql -h192.168.1.63 -uroot -plhr -P3306 --html -t -f --silent MySQL_HC_lhr_v6.0.8.sql...对于Windows下的MySQL数据库，可以使用Linux平台的客户端连接到windows的服务器下进行生成报告（后期可能进行优化）。
什么是中间件 传统的架构模式就是 应用连接数据库直接对数据进行访问，这种架构特点就是简单方便。...直接增加机器，把数据库放到不同服务器上，在应用到数据库之间加一个proxy进行路由，这样就可以解决上面的问题了。 2....总体来说支持度比 较高，也会一直维护下去， OneProxy: 数据库界大牛，前支付宝数据库团队领导楼总开发，基于mysql官方 的proxy思想利用c进行开发的，OneProxy是一款商业收费的中间件...MaxScale与MySQL Route: 这两个中间件都算是官方的吧，MaxScale是mariadb (MySQL原作者维护的一个版本)研发的，目前版本不支持分库分表。...MySQL Route是现在MySQL 官方Oracle公司发布出来的一个中间件。 这两个中间件后面也会跟进测试下，看下效果如何。 4.
下面会用到一个perl脚本来做数据格式的转换： https://github.com/ahammond/mysql2pgsql 1 导出mysql的数据 # 导出结构 mysqldump bx_cmdb...格式的，命令类似如下 下载 到 /root/目录下 chmod +x /root/mysql2pgsql.perl cd /tmp/ /root/mysql2pgsql.perl struct.sql... struct_pg.sql /root/mysql2pgsql.perl data.sql data_pg.sql sed -i.bak 's# int # bigint #g' struct_pg.sql...sed -i.bak 's# smallint # int #g' struct_pg.sql sed -i.bak 's# datetime(6) # timestamp #g' struct_pg.sql... /tmp/bbb.sql psql --port 5434 -d testdb -f /tmp/bbb.sql 即可导入到PG的testdb库中 4 后续的增量数据同步，可以使用 go-mysql-postgresql
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
腾讯会议
云直播
