首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

故障分析 | 数据库服务器内存不足一例分析

/run/systemd/users和/run/log/journal目录,占用内存分别为7126M、1624M,较为异常的是/run/systemd/users占用内存过高,继续分析这个目录下有哪些文件...0,18 0t0 621086290 /run/systemd/sessions/243335.ref [root@MySQL-slaver ~]# 解决 个人觉得可选解决方案如下: 1、服务器上主要服务为...MySQL和Redis,MySQL作为从库使用,未承载业务读流量,Redis近期将会迁移,/run/systemd/users目录占用内存虽然在增长,5年了也只占用8G,增量很缓慢,故可以在线收缩MySQL...innodb_buffer_pool_size使用内存,释放一部分内存给操作系统,等Redis迁移了再做机器重启处理。...2、假设主机不可以重启,通过lsof可知这些隐藏文件当前未被使用,故可以迁移到其他磁盘目录,看看是否能达到释放内存目的,且这些session都是crond 2018年产生的,并未分配相关进程,故通过loginctl

2.9K30

腾讯云数据库内存使用 100%原因分析

背景 腾讯云数据库内存 100% 确实是常年以来的热点咨询问题,以下是针对此问题的介绍说明。...一、现象分析 当遇到数据库内存长期过满,以下两种现象情况请注意和把握: 1、如果从监控中看到内存并没有持续增长,是有做回收的,说明没有持续泄露的问题 ,如果是内存持续上涨一直无法降下来 ,这明显是有问题的是需要特别关注的...二、原因分析 由于各家云厂商对内存使用和统计并不完全一样,这里监控内存的显示是会有区别的,但这并不完全意味着性能或能力上存在差异。...三、原理分析 通常内存使用分为两大类:公共和私有 。...另一部分是私有内存,私有部分是为每个数据库连接分配使用的 ,这部分内存会随着连接数增多而增多,但连接断开后并不一定会立即释放给操作系统,mysql 的内存分配器会继续保留一部分 ,当下次新连接进来的时候就不用单独再去问操作系统申请内存

1.9K10
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    linux服务器内存——分析

    早上到单位 发现服务器 mysql 服务器停了 然后起来了 查询日志 显示 内存满了 把mysql服务给杀了 linux 服务器如果 内存满了 会自动清理进程 防止服务器挂掉 选择的话 谁占的的内存大...就先杀谁 我的服务器里面 mysql服务占的内存是最大的 所以就把mysql就给杀了 image.png 然后 重启mysql 查询内存 image.png 在这说一下 怎么看linux的内存 举个例子...如下显示free是显示的当前内存使用,-m的意思是M字节来显示内容.我们来一起看看. $ free -m total  used  free  shared  buffers  cached Mem...= used-buffers-cached = 286M ----------------- 第一部分Mem行: total 内存总数: 1002M used 已经使用内存数: 769M free...对应用程序来讲是(-/+ buffers/cach).buffers/cached 是等同可用的,因为buffer/cached是为了提高程序执行的性能,当程序使用内存时,buffer/cached会很快地被使用

    23.9K10

    MAT内存分析工具使用

    摘要:Eclipse Memory Analysis Tools (MAT) 是一个分析 Java堆数据的专业工具,用它可以定位内存泄漏的原因。...第一个选项是内存泄漏报表(自动检查可能存在内存泄露的对象,通过报表展示存活的对象以及为什么他们没有被垃圾收集); 第二个是对象报表(对可疑对象进行分析,如字符串是否定义重了,空的collection、finalizer...Memory Analyzer主界面介绍 下面的Histogram(列出内存中的对象,对象的个数以及大小)这里我们可以使用正则去进行匹配 ?...要说一下的是,这种从图到树的转换确实方便了内存分析,但有时候会让人有些疑惑。本来对象B是对象A的一个成员,但因为B还被C引用,所以B在树中并不在A下面,而很可能是平级,如下图所示。 ?...所以GC Roots是分析对象为何还存活于内存中的利器。

    1.9K60

    MONGODB 内存使用分析与判断内存是否缺少

    内存主要被wiredTiger 数据库引擎以及客户端连接请求使用。...MOGNODB 如何使用内存,如何判断数据库内存在正常的状态范围,是我们需要掌握的。...除此之外, mongodb 在除了以上内存使用以外,还有一些内存使用 1 在数据库操作commit 的操作时,数据并不是立即刷到磁盘中,而是有对应的缓冲来在脏页刷新到磁盘前,进行数据的缓冲...,来分析每个时间段流入到mongodb的内存的数据和刷出的数据,可以做一个比值,通过查看工作繁忙期间的比值来判断是否有数据刚刚写入到内存后,就被刷出的可能,来判断是否缺少内存。...而系统并未回收到相关内存 我们通过db.serverStatus().tcmalloc 可以分析当前有多少内存作为CACHE 在tcmalloc 中存在,其中包括 pageheap_free_bytes

    1.9K20

    MONGODB 内存使用分析与判断内存是否缺少

    内存主要被wiredTiger 数据库引擎以及客户端连接请求使用。...MOGNODB 如何使用内存,如何判断数据库内存在正常的状态范围,是我们需要掌握的。...除此之外, mongodb 在除了以上内存使用以外,还有一些内存使用 1 在数据库操作commit 的操作时,数据并不是立即刷到磁盘中,而是有对应的缓冲来在脏页刷新到磁盘前,进行数据的缓冲...,来分析每个时间段流入到mongodb的内存的数据和刷出的数据,可以做一个比值,通过查看工作繁忙期间的比值来判断是否有数据刚刚写入到内存后,就被刷出的可能,来判断是否缺少内存。...而系统并未回收到相关内存 我们通过db.serverStatus().tcmalloc 可以分析当前有多少内存作为CACHE 在tcmalloc 中存在,其中包括 pageheap_free_bytes

    1.7K30

    服务器内存使用飙升的排查

    这几天自己线上的乞丐服务器遇到一个问题,io会瞬间飙升到很高很高,造成内存使用飙升。但是实际上并发量并不大(网络连接数)。知道是哪个进程造成的,但是确实排查代码中没有是么地方会有这么大的读写。...也不知道对方到底发的什么数据导致这么大的内存占用。 之前也处理过类似的问题。麻烦之处在于很好的定位问题,重现实际的操作。没办法,只能针对socket服务特定的端口进行抓包。...服务器问题,无非就是资源不合理的使用,造成服务器内存,cpu,io,流量等相关资源出现非常不正常的波动,资源使用率飙升。对于服务器性能问题的排查,没有其他比较好的办法,只能是通过重现复盘去改进。...特别是如果服务器上跑的东西比较多,一个个的排查相当痛苦。 出现问题,首先看日志。如果是线上的,先想办法恢复服务再排查。 看看登录日志,访问日志是否有异常,确定是否有人扫机器。...看性能监控图表,分析机器的状况,以及问题发生的规律。 看是否有服务被系统kill。一般系统日志都会记录kill之前的进程列表,可以很好的分析哪些进程资源占用多。

    22.3K20

    如何使用Eclipse内存分析工具定位内存泄露

    本文以我司生产环境Java应用内存泄露为案例进行分析,讲解如何使用Eclipse的MAT分析定位问题 一....-XX:+HeapDumpOnOutOfMemoryError 参数,该配置会把dump文件的快照保存下来供后续分析排查问题,也可以使用jmap或jcmd等jvm命令进行dump: jmap -dump...分析内存泄露 内存泄露和内存溢出的区别:内存泄露从老年代的增长情况看是缓慢上升的, 最终达到老年代上限才会导致溢出,有些内存泄露可能需要很长的时间发生, 所以说内存泄露更隐蔽, 不像内存溢出那样容易暴露...比如我们要分析这3个dump文件(当然你也可以分析更多个, 这样会更精准), 打开后, 使用compare basket功能找出内存泄露的差异点: 1....使用 compare basket 功能分析内存泄露 1> 菜单栏 window → compare basket ,打开比较窗口(如果最下面一栏已经有compare basket则这步不需要),如下图

    2.1K10

    使用procrank分析内存利用及分析源代码

    前言: procrank是一个统计内存使用的神器,包括VSS,PSS,PSS和USS的详细参数。作为一个内存使用分析工具,简直厉害的不要不要的。...关于maps,后面会在使用maps解决进程crash的时候详细说明。 ? 5,进入正题,开始分析procrank。...a,既然要分析所有的进程的内存使用情况,那么就需要遍历/proc目录下所有的数字目录,数字就是系统的所有的进程的pid(top,ps等命令,都如此)。...e,分析过后,很容易得出结论,一般情况下,都是:VSS >= RSS >= PSS >= USS。分析到此结束。 后记: 一朋友是数据库高手,redis,sql,mongodb都玩的溜。...和作者小小抱怨了一下:数据库一般占用内存偏多,但是只要系统内存偏高,哪怕不是db引起的,依然会被找麻烦。于是作者告诉他了这个利器,“怼”回去!!!! 效果图~ ?

    4K70

    在测试中使用内存数据库

    在初始化数据库和导入数据一文中,我们探索了在Spring Boot项目中如何创建数据库的表结构,以及如何往数据库中填充初始数据。...在程序开发过程中常常会在环境配置上浪费很多时间,例如在一个存在数据库组件的应用程序中,测试用例运行之前必须保证数据库中的表结构正确,并且已经填入初始数据。...BookPubApplicationTest @Test public void contextLoads() { assertEquals(3, bookRepository.count()); } 至此我们还都是使用外部数据库...——MySQL,现在尝试使用内存数据库H2,因此在src/test/resources目录下添加application.properties文件,内容是: spring.datasource.url=\...分析 我们通过Spring的ResourceDatabasePopulator和DatabasePopulatorUtils类加载test-data.sql文件,在test-data.sql文件中的数据仅仅对当前所在的

    1.5K20

    Java内存溢出OOM使用Mat分析

    20m,程序不停的创建对象,而对象又是在堆上分配内存,一直不停的向List中添加对象,没有垃圾回收,导致堆内存溢出(OutOfMemoryError)....Mat工具分析堆 1.下载Mat分析软件:https://www.eclipse.org/mat/downloads.php 2.VM参数加上: -XX:+HeapDumpOnOutOfMemoryError...开启堆内存溢出导出堆内存到文件,默认在项目的根目录下.如果需要指定其它路径用-XX:HeapDumpPath=/tmp,会生成一个名字类似的java_pid28790.hprof文件. 3.使用Mat打开...List res=new ArrayList(); res是局部变量,在栈上分配内存,res中存放的是UserTest实例对象的堆内存地址(引用),JDK1.8中打开指针压缩(-...Retained Heap=112424+224848=337296和Mat分析的结果一致. 相关文章 JVM,JRE,JDK之间的区别和联系

    57910

    Java内存溢出OOM使用Mat分析

    20m,程序不停的创建对象,而对象又是在堆上分配内存,一直不停的向List中添加对象,没有垃圾回收,导致堆内存溢出(OutOfMemoryError)....Mat工具分析堆 1.下载Mat分析软件:https://www.eclipse.org/mat/downloads.php 2.VM参数加上: -XX:+HeapDumpOnOutOfMemoryError...开启堆内存溢出导出堆内存到文件,默认在项目的根目录下.如果需要指定其它路径用-XX:HeapDumpPath=/tmp,会生成一个名字类似的java_pid28790.hprof文件. 3.使用Mat打开...当前案例未打开指针压缩: 14053个引用地址占用内存大小: 14053*8=112424,Shallow Heap占用112448字节,还有24字节明显就是res容器本身占用的内存大小....Retained Heap=112424+224848=337296和Mat分析的结果一致.

    18110

    内存分析工具MAT的使用入门

    MAT工具介绍 工欲善其事必先利其器,学会使用工具也是一种本领。本篇文章就把自己之前工作中用到的一个内存分析工具给大家介绍下。...内存分析工具MAT(Memory Analyzer Tool)是一款 JVM 的内存分析工具,在实际的工作中可以帮助我们解决生成上内存占用过高等问题。...然后我们使用启动下面这个启动参数运行代码, -Xms200m -Xmx200m -XX:+HeapDumpOnOutOfMemoryError 参数指定了堆内存大小是200m,这个大小我们的测试代码很快就会用完...内存分析 我们现在根据 MAT 的分析,从几个维度来分析下代码中的问题。 MAT 工具打开前面的 dump 文件,会先看到下面这种图, ?...从预览图,可以看到有个应用占用了总的堆内存的大部分,高达184M(程序运行分配的堆内存是200M)。说明这个应用肯定有问题,值得我们继续往下分析

    7.6K20

    golang 内存分析内存泄漏

    heap 堆上内存使用情况的采样信息 profile CPU占用情况的采样信息 threadcreate 系统线程创建情况的采样信息 trace 程序运行跟踪信息 以内存分析为例: 推荐直接使用命令进入命令行交互模式...: go tool pprof -alloc_space http://localhost:6061/debug/pprof/heap 可以使用参数指明分析的类型: inuse_space — amount...内存泄露 内存泄露指的是程序运行过程中已不再使用内存,没有被释放掉,导致这些内存无法被使用,直到程序结束这些内存才被释放的问题。...基于抽样和它跟踪的是已分配的内存,而不是使用中的内存,(比如有些内存已经分配,看似使用,但实际以及不使用内存,比如内存泄露的那部分),所以不能使用内存profiling衡量程序总体的内存使用情况。...分析goroutine本身的栈所占用的空间造成内存泄露,可以通过pprof来查找,方法与heap类似,都是取两次采样做比较。

    9.1K21

    数据库内存使用比较高的原因

    数据库内存使用比较高是正常的, 数据库会将磁盘中的数据缓存到内存里 ,这样在访问数据的时候如果可以直接在内存里操作数据就会很快。长期运行的数据库服务内存里会持续缓存热数据的。...这部分内存如果空闲不用就等于浪费,数据库会尽可能的占满这部分空间 ,所以一般运行一段时间的数据库内存都会占用比较高,并且占用会稳定到一个值 。...还有一部分是session的占用的 , 即每个数据库连接会分配一部分内存 ,这部分内存占用可以通过show full processlist 命令查看每个链接的内存占用 930.png 关于mysql...内存使用:https://cloud.tencent.com/document/product/236/32534

    5.1K50
    领券