首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

故障分析 | cassandra 集群数据故障转移

---一、前情提要:我们知道 cassandra 具有分区容错性和强一致性,但是当数据所在主机发生故障时,该主机对应的数据副本该何去何从呢?是否跟宿主机一样变得不可用呢?...测试并查看集群中出现故障节点后的数据分布情况:94机器关闭服务:systemctl stop cassandra[cassandra@data01 ~]$ nodetool statusDatacenter...,因此可以看到,在 dc1 数据中心中,数据随机仍只分布在其中三个节点上,而 dc2 数据中心的数据将分布在了仅有的三个节点上,发生了数据转移;如果此时 dc2 数据中心还有节点继续故障,那么故障节点上的数据不可能再移动到其他节点上了...,dc1 是不变的,owns 还是300% ,但是 dc2 的 owns都是100% ,没办法故障转移了,只能存在自身的数据了;此时重启所有主机,所有主机 Cassandra 服务都会开启,包括之前故障模拟的节点也会自启...,那么此时就会达到了另一种效果:故障模拟节点后的状态,再添加到了集群中,那么此时数据又会进行了自动的分发。

1.3K20
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    数据库服务器主机重启故障诊断分析

    墨墨导读:某客户RAC数据库服务器主机轮流发生集群与主机重启,数据库连接不上问题,如下为故障诊断思路。...一、故障现象 告警日志: Sun Feb 09 14:18:42 2020 Auto-tuning: Shutting down background process GTX2 Sun Feb 09 15...IO系统响应缓慢,导致越来越多的请求堆积,最终IO 耗尽,系统内存全部被占用,导致系统失去响应,发生故障。...三、故障解决 建议一: 可以调整 操作系统参数, vm.dirty_ratio=20 vm.dirty_background_ratio=3 目前操作系统配置文件/etc/sysctl.conf 中 没有这两个参数...建议二: 另外在检查中,发现该主机未配置大页,建议配置大页,可以极大提升数据库性能 后期调整后至今没有发现主机重启,故障解决。

    2K10

    数据库服务器主机重启故障诊断分析

    摘要:某客户RAC数据库服务器主机轮流发生集群与主机重启,数据库连接不上问题,如下为故障诊断思路....一、故障现象: 告警日志: Sun Feb 09 14:18:42 2020 Auto-tuning: Shutting down background process GTX2 Sun Feb 09...IO系统响应缓慢,导致越来越多的请求堆积,最终IO 耗尽,系统内存全部被占用,导致系统失去响应,发生故障。...三、故障解决 建议一: 可以调整 操作系统参数, vm.dirty_ratio=20 vm.dirty_background_ratio=3 目前操作系统配置文件/etc/sysctl.conf 中 没有这两个参数...建议二: 另外在检查中,发现该主机未配置大页,建议配置大页,可以极大提升数据库性能 后期调整后至今没有发现主机重启,故障解决。

    1.8K00

    故障分析 | MySQL OOM 故障应如何下手

    在数据库服务器上,MySQL 被分配的内存一般不会小,因此容易成为 oom-killer 选择的对象。 “既然发生了 OOM,那必然是内存不足,内存不足这个问题产生原因很多。...另一个可以想到的原因就是一般部署 MySQL 的服务器,都会部署很多的监控和定时任务脚本,而这些脚本往往缺少必要的内存限制,导致在高峰期的时候占用大量的内存,导致触发 Linux 的 oom-killer...意思是在专用数据库服务器上,可以将 innodb_buffer_pool_size 设置为计算机物理内存大小的 80%。...Callgrind 是一个生成调用图的缓存分析器。 Helgrind 是线程错误检测器。 DRD 还是线程错误检测器。 Massif 是堆分析器。 DHAT 是另一种堆分析器。...运行的程序结束后,会生成这个进程的内存分析报告。 搞个测试找找感觉 1.

    1.6K20

    故障分析 | MySQL死锁案例分析

    作者:杨奇龙网名“北在南方”,资深 DBA,主要负责数据库架构设计和运维平台开发工作,擅长数据库性能调优、故障诊断。...二 案例分析2.1 业务逻辑业务逻辑: 业务需要并发不同数据(insert+update),首先是更新记录,如果发现更新的 affect rows 为0,然后就执行插入,如果插入失败,再执行更新。...no 4 PHYSICAL RECORD: n_fields 2; compact format; info bits 0*** WE ROLL BACK TRANSACTION (2)2.5 死锁分析...大家在分析死锁的时候能基于该原则去分析理清业务的sql 逻辑和执行顺序,基本上都能解决大部分的问题场景。...另外文章的最后我们再次复习一下 MySQL 的加几个基本原则,方便大家后面遇到死锁案例进行分析:原则 1:加锁的基本单位是 next-key lock。原则 2:查找过程中访问到的对象才会加锁。

    78240

    故障分析 | MySQL死锁案例分析

    作者:杨奇龙网名“北在南方”,资深 DBA,主要负责数据库架构设计和运维平台开发工作,擅长数据库性能调优、故障诊断。...二 案例分析2.1 业务逻辑select for update 表记录并加上 x 锁,查询数据,做业务逻辑处理,然后删除该记录。还有其他业务逻辑要更新记录,导致死锁。...no 8 PHYSICAL RECORD: n_fields 2; compact format; info bits 0*** WE ROLL BACK TRANSACTION (2)2.5 死锁分析...大家在分析死锁的时候能基于该原则去分析理清业务的sql 逻辑,基本上都能解决大部分的问题场景。...另外文章的最后我们再次复习一下 MySQL 的加几个基本原则,方便大家后面遇到死锁案例进行分析:原则 1:加锁的基本单位是 next-key lock。原则 2:查找过程中访问到的对象才会加锁。

    86430

    故障分析 | MySQL 无监听端口故障排查

    擅长数据库故障处理。对数据库技术和 python 有着浓厚的兴趣。本文来源:原创投稿*爱可生开源社区出品,原创内容未经授权不得随意使用,转载请联系小编并注明来源。...---前言最近解决了一个比较基础的问题故障,由于排查过程挺有意思,于是就以此为素材写出了本篇文章。故障现场防火墙什么的均正常但是无法被远程访问到。简单的使用客户端登录了一下。...ERROR 2003 (HY000): Can't connect to MySQL server on '127.0.0.1' (111)根据以往经验大脑中浮现了几个常见的排查此类故障手法1.排查进程存在...解决方案因为配置 skip-grants-tables 引起无法远程连接 mysql 服务端的故障,解决方法也是非常的简单注释重启。

    87220

    故障分析 | MySQL 无监听端口故障排查

    擅长数据库故障处理。对数据库技术和 python 有着浓厚的兴趣。 本文来源:原创投稿 *爱可生开源社区出品,原创内容未经授权不得随意使用,转载请联系小编并注明来源。...---- 前言 最近解决了一个比较基础的问题故障,由于排查过程挺有意思,于是就以此为素材写出了本篇文章。 故障现场 防火墙什么的均正常但是无法被远程访问到。简单的使用客户端登录了一下。...ERROR 2003 (HY000): Can't connect to MySQL server on '127.0.0.1' (111) 根据以往经验大脑中浮现了几个常见的排查此类故障手法 1....解决方案 因为配置 skip-grants-tables 引起无法远程连接 mysql 服务端的故障,解决方法也是非常的简单注释重启。...分析 技术分享 | MySQL 安全 delete 巨大量数据行 ---- 关于SQLE 爱可生开源社区的 SQLE 是一款面向数据库使用者和管理者,支持多场景审核,支持标准化上线流程,原生支持 MySQL

    2.3K30

    服务器故障邮件报警

    说到服务器硬件监测,用得最多的自然是Zabbix和prometheus,可是对于一般用户来说,部署要求比较高,而且也没有必要。...只是监测服务器硬件故障,并且发生问题的时候,以邮件形式告警,那么服务器自带的功能就足以。 比如戴尔服务器的idrac,配置硬件故障的邮件告警就非常简单。...如上图所示,首先填写邮件发送服务器的地址,其次就是填写发件人邮件地址,然后就是SMTP端口号,采用SSL协议的话,端口号就填写465;最后填写用户名和密码,就是发件人的邮件账号和密码。...收件人邮件地址,当然也需要填写,不然故障报给谁呢?然后可以“发送”测试邮件,一般都是秒收,如果没收到,就检查SMTP配置。...我比较关注系统运行状况和存储,尤其是存储,重要的数据都在硬盘里面呢,其他硬件故障,相对来说,没那么重要,电源坏了,可以换,内存坏个一两条,也无伤大雅。硬盘要是坏了,那就损失大了。

    24430

    故障模式与影响分析(FMEA)和故障分析(FTA)

    什么是fmea失效分析和FTA故障分析方法?六西格玛管理工具中的FMEA和FTA有什么作用,故障的类型和fmea的适用范围是什么?FMEA失效模式与效应分析课程内容?...本文为大家详细介绍:图片FMEA和FTA分析失效模式与效应分析(FMEA)和故障分析(FTA)在可靠性工程中应用广泛,这些技术在国外已成功应用于解决各种质量问题。...在ISO 9004:2000,FMEA和FTA分析已被用作设计和开发、产品和过程确认和变更的风险评估方法。目前我国基本上只应用FMEA和FTA技术进行可靠性设计分析。...根据国外文献和一些中国企业技术人员的实践,FMEA和FTA可以应用于工艺(过程)分析和质量问题分析。质量是一个内涵很广的概念,可靠性是其中一个方面。...通过对FMEA和FTA的分析,发现各种潜在的质量问题、失效模式及其原因(包括设计缺陷、工艺问题、环境因素、老化、磨损和加工误差等。)

    1.1K30

    故障分析 | 数据库故障 MHA 未切换

    这里暂且不说 hang 住的原因,仅分析数据库 hang 住,但是 MHA 未触发切换。...支持3个 value : select:使用长连接连接到 MySQL 执行select 1 as Value,这个长连接被重复使用,但检查过于简单,无法发现更多故障。...connect:在每次执行select 1 as Value前后创建和断开连接,可以发现更多 TCP 连接级别的故障。...模拟服务器 CPU 满负载,数据库无法建立新连接 编写一个简单的 c 程序,如下: # include int main() { while(1); return 0; } 编译...PS:MHA 监控进程启动过程中,会读取配置文件,对配置文件中的服务器进行一系列检查,包括存活状态、版本信息、从库配置(read_only,relay_log_purge,log-bin,复制过滤等),

    1.1K10
    领券