文档建议反馈控制台
首页
学习
活动
专区
圈层
工具
MCP广场
文章/答案/技术大牛
发布

浪费内存？多大个事？

遥想盖子当年，MS 红火了，谈笑间，640k 内存足矣。 - 程序君 现在已经不是从指缝中扣内存的时代了。...每 Gb 内存，也就是 711 一份好炖的价格，咱不差钱，32G 不够，上 128G，还不够，只要系统支持，咱可以照着 Tb 往上撸，多大个事！...好吧，其实这也不是多大点事，原本 150ms 完成的事情，现在即便最坏的情况，500ms 完成，也没啥大不了哈。 好，咱么再换个角度，谈谈 capacity。...假设你的系统要能支持到 40M 的这种结构的热数据，那么，对于前者，一主两备的 cluster，三台组个 full mesh 网路足矣；对于后者，你需要至少 3 x 7 台，可能稍稍得花些心思：full...浪费内存，还是挺大一个事儿的。现在你知道贵司为啥没鼓励师了吧 :0

2.6K80
    • 您找到你想要的搜索结果了吗？
    是的
    没有找到

    一条SQL能占多大内存？

    初学计算机时，我经常琢磨的一个问题是：一个进程到底能吃多大内存，能把系统内存吃完？ 学了数据库后，我又开始问自己类似的问题，一条 SQL 能把数据库内存全部吃完？...假设数据库系统内存 有128GB，全盘扫描一遍 200GB的表，是不是就把数据库内存撑爆了，别人的 SQL 就不能运行了？ 一开始，这个问题我始终没找到答案。...虚拟机服务器总共有8G内存，从数据库导出一张2GB的表，监测服务器内存的使用量。 1- 用 SQL Server 自带的“导出”功能，将一张2GB的表，导出到一个文本文件。...再启动 2个抽取数据的任务, 可得系统内存的比率图： 如果内存全部耗完，整个操作系统变得不稳定，SQL Server 的稳定性即即将崩溃。...回到主问题，一条 SQL 能占多大内存？

    3K20

    一个Java对象到底占用多大内存？

    一个Java对象到底占用多大内存？...有关 32位系统占4字节 64位系统，开启 UseCompressedOops时，占用4字节，否则是8字节 对齐填充 在Hotspot中，为了更加容易的管理内存，一般会使用8字节进行对齐。...意思是每次分配的内存大小一定是8的倍数，如果对象头+实例数据的值不是8的倍数，那么会重新计算一个较大值，进行分配。...结果 有了对象各部分的内存占用大小，可以很轻松的计算出ABCD各对象在64位系统，且开启 UseCompressedOops参数时的大小。...可以得出，VisualVM的显示结果有点问题，主要因为以下两点： 首先，没有考虑是否开启 UseCompressedOops 其次，没有考虑内存对齐填充的情况 感兴趣的同学，可以动手实践一下，这样可以加深对象内存布局的理解

    2.1K10

    一个Java对象到底占用多大内存

    之所以比普通对象占用内存多是因为需要额外的空间存储数组的长度。 先考虑下new Integer[0]占用的内存大小，长度为0，即是对象头的大小： 未开启压缩：24bytes ?...开启压缩后：32 复合对象 计算复合对象占用内存的大小其实就是运用上面几条规则，只是麻烦点。...递归计算复合对象占用的内存的时候需要注意的是：对齐填充是以每个对象为单位进行的，看下面这个图就很容易明白。 ?...实际工作中真正需要手动计算对象大小的场景应该很少，但是个人觉得做为基础知识每个Java开发人员都应该了解，另外：对自己写的代码大概占用多少内存，内存中是怎么布局的应该有一个直觉性的认识。...码农笔记网 » 一个Java对象到底占用多大内存

    1.6K10

    一个Java对象到底占用多大内存

    之所以比普通对象占用内存多是因为需要额外的空间存储数组的长度。 先考虑下new Integer[0]占用的内存大小，长度为0，即是对象头的大小： 未开启压缩：24bytes ?...开启压缩后：32 复合对象 计算复合对象占用内存的大小其实就是运用上面几条规则，只是麻烦点。...递归计算复合对象占用的内存的时候需要注意的是：对齐填充是以每个对象为单位进行的，看下面这个图就很容易明白。 ?...实际工作中真正需要手动计算对象大小的场景应该很少，但是个人觉得做为基础知识每个Java开发人员都应该了解，另外：对自己写的代码大概占用多少内存，内存中是怎么布局的应该有一个直觉性的认识。...码农笔记网 » 一个Java对象到底占用多大内存

    2.1K10

    一条SQL到底能占多大内存？

    SQL145题系列 初学计算机时，我经常琢磨的一个问题是：一个进程到底能吃多大内存，能把系统内存吃完？ 学了数据库后，我又开始问自己类似的问题，一条 SQL 能把数据库内存全部吃完？...假设数据库系统内存 有128GB，全盘扫描一遍 200GB的表，是不是就把数据库内存撑爆了，别人的 SQL 就不能运行了？ 一开始，这个问题我始终没找到答案。...虚拟机服务器总共有8G内存，从数据库导出一张2GB的表，监测服务器内存的使用量。 1- 用 SQL Server 自带的“导出”功能，将一张2GB的表，导出到一个文本文件。...再启动 2个抽取数据的任务, 可得系统内存的比率图： 如果内存全部耗完，整个操作系统变得不稳定，SQL Server 的稳定性即即将崩溃。...回到主问题，一条 SQL 能占多大内存？

    69810

    Linux内存描述之高端内存--Linux内存管理(五)

    但是，当Linux物理内存超过1G时，线性访问机制就不够用了，因为只能有1G的内存可以被映射，剩余的物理内存无法被内核管理，所以，为了解决这一问题，Linux把内核地址分为线性区和非线性区两部分，线性区规定最大为...因此，Linux 规定“内核直接映射空间” 最多映射 896M 物理内存。...1G) 2.3 Linux内核高端内存的理解 前 面我们解释了高端内存的由来。...目前现实中，64位Linux内核不存在高端内存，因为64位内核可以支持超过512GB内存。若机器安装的物理内存超过内核地址空间范围，就会存在高端内存。 5.3 用户进程能访问多少物理内存？...若把所有地址空间都给内存，那么用户进程怎么使用内存？怎么保证内核使用内存和用户进程不起冲突？ 让我们忽略Linux对段式内存映射的支持。

    14.4K24

    Linux - Linux内存管理

    移除交换空间 ---- 概念 内存管理是Linux系统重要的组成部分。...为了解决内存紧缺的问题，Linux引入了虚拟内存的概念。为了解决快速存取，引入了缓存机制、交换机制等。...当需要用到原始内容时，这些信息会被重新从交换空间读入物理内存。 Linux的内存管理采取的是分页存取机制。...要深入了解Linux内存运行机制，需要知道下面提到的几个方面。 首先，Linux系统会不时地进行页面交换操作，以保持尽可能多的空闲物理内存。...其次，Linux进行页面交换是有条件的，不是所有页面在不用时都交换到虚拟内存中，Linux内核根据“最近最经常使用”算法，仅仅将一些不经常使用的页面文件交换到虚拟内存中。

    57.6K42

    Linux内存描述之内存节点node--Linux内存管理(二)

    CPU访问本地内存的速度比访问远程内存的速度要快 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大....因此linux内核需要用一种体系结构无关的方式来表示内存....因此linux内核把物理内存按照CPU节点划分为不同的node, 每个node作为某个cpu结点的本地内存, 而作为其他CPU节点的远程内存, 而UMA结构下, 则任务系统中只存在一个内存node, 这样对于...* * Nests above zone->lock and zone->span_seqlock * 当系统支持内存热插拨时，用于保护本结构中的与节点大小相关的字段。...如果内核编译只支持当个结点(即使用平坦内存模型), 则没有结点位图, 上述操作该位图的函数则变成空操作, 其定义形式如下, 参见include/linux/nodemask.h?

    9.2K21

    Linux内存描述之概述--Linux内存管理(一)

    NUMA总是多处理器计算机,系统的哪个CPU都有本地内存, 可支持快速的访问, 各个处理器之前通过总线链接起来, 以支持堆其他CPU的本地内存的访问, 当然访问要比本地内存慢....2 (N)UMA模型中linux内存的机构 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大. 因此linux内核需要用一种体系结构无关的方式来表示内存...., 用于表示不同范围的内存, 内核可以使用不同的映射方式映射物理内存 页面(Page) 内存被细分为多个页面帧, 页面是最基本的页面分配的单位 为了支持NUMA模型，也即CPU对不同内存单元的访问时间可能不同...ZONE_HIGHEM : 这个区包”高端内存”，其中的页能不永久地映射到内核地址空间 而为了兼容一些设备的热插拔支持以及内存碎片化的处理, 内核也引入一些逻辑上的内存区....2.6 高端内存 由于能够被Linux内核直接访问的ZONE_NORMAL区域的内存空间也是有限的，所以LINUX提出了高端内存（High memory）的概念，并且允许对高端内存的访问

    8K30

    Linux内存描述之内存区域zone--Linux内存管理(三)

    1 内存管理域zone 为了支持NUMA模型，也即CPU对不同内存单元的访问时间可能不同，此时系统的物理内存被划分为几个节点(node), 一个node对应一个内存簇bank，即每个内存簇被认为是一个节点...Linux使用enum zone_type来标记内核所支持的所有内存区域 3.1 内存区域类型zone_type zone_type结构定义在include/linux/mmzone.h, 其基本信息如下所示...如在64位系统中, 并不需要高端内存, 因为AM64的linux采用4级页表，支持的最大物理内存为64TB, 对于虚拟地址空间的划分，将0x0000,0000,0000,0000 – 0x0000,7fff...由于其中维护的大部分信息曲面没有多大意义 // http://lxr.free-electrons.com/source/include/linux/mmzone.h#L522 struct zone...ZONE_HIGHEM : 这个区包”高端内存”，其中的页能不永久地映射到内核地址空间 而为了兼容一些设备的热插拔支持以及内存碎片化的处理, 内核也引入一些逻辑上的内存区.

    10.7K31

    Linux内存描述之内存页面page--Linux内存管理(四)

    1 Linux如何描述物理内存 Linux把物理内存划分为三个层次来管理 层次 描述 存储节点(Node) CPU被划分为多个节点(node), 内存则被分簇, 每个CPU对应一个本地物理内存, 即一个...内存中的每个节点都是由pg_data_t描述,而pg_data_t由struct pglist_data定义而来, 该数据结构定义在include/linux/mmzone.h, line 615, 每个结点关联到系统中的一个处理器...简单来说, 页是一个数据块, 可以存放在任何页框(内存中)或者磁盘(被交换至交换分区)中 我们今天就来详细讲解一下linux下物理页帧的描述 2 页帧 内核把物理页作为内存管理的基本单位....因此在后来linux-2.4.x的更新中, 删除了这个字段, 取而代之的是page->flags的最高ZONE_SHIFT位和NODE_SHIFT位, 存储了其所在zone和node在内存区域表zone_table...3.2 内存页标识pageflags 其中最后一个flag用于标识page的状态, 这些状态由枚举常量enum pageflags定义, 定义在include/linux/page-flags.h?

    9.8K11

    Linux 内存管理

    操作系统内存管理包括物理内存管理和虚拟内存管理：       我们这篇主要介绍Linux的虚拟内存管理。...再比如32位机器可以直接寻址4G空间，意思是每个应用程序都有4G内存空间可用。但是显然机器内存罕有如此之大，可以支持每个程序使用4G内存的。...为 Linux虚拟内存管理机制提供了支持 。        80386 的虚拟地址模式使用了如下分段和分页两级地址  转换机制来实现虚拟地址向物理地址的转换 。...把页装入物理内存。   ·   五.swap对换空间 ----      32位Linux系统的每个进程可以有4 GB的虚拟 内存空间 ．...例如：32位Linux的每个用户进程都可以访问4GB的线性地址空间， 而实际的物理内存可能远远少于4GB． 采用分页机制 ，Linux仅把可执行映像的一小部分装入物理内存．

    8.6K10

    Linux内存管理

    本篇介绍 本篇介绍下Linux的内存管理，用系统角度看内存的寻址和分配机制。 内容介绍 内存管理应该是系统中最难的模块之一了，而且历史也悠久，就先来简单回顾下。...分页机制可以完全避免内存碎片问题么？ 公布下答案： 的确有分页机制就可以完全不需要分段机制，目前linux是在分段的基础上实现了分页，这个也有考虑到是兼容性问题。...; /* for /proc/PID/auxv */ struct percpu_counter rss_stat[NR_MM_COUNTERS]; struct linux_binfmt...mmap流程如下： image.png 缺页异常 linux 是在不得不使用物理内存的时候才会分配物理内存。这句话该怎么理解呢？...因此看到物理可用内存不足并不表示需要换物理内存条了。

    14.9K51

    Linux内存修改

    虚拟内存是为了满足物理内存不足采用的策略，利用磁盘空间虚拟出一块逻辑内存，用作虚拟内存的空间也就是交换分区。...作为物理内存的扩展，Linux会在物理内存不足时，使用交换分区的逻辑内存，内核会把暂时不用的内存块信息写到交换空间，这样物理内存就得到了释放，这块儿内存就可以用于其他目的，而需要用到这些内容的时候，这些信息就会被重新从交换分区读入物理内存...Linux的内存管理采用的是分页存取机制，为了保证物理内存得到充分的利用，内核会在适当的时间把物理内存中不经常使用的数据块儿自动交换到虚拟内存中，而将充分使用的信息保留到物理内存中。...例如通过阿里云安装的系统，不会自动给我们分配Swap虚拟内存空间；Swap分区或虚拟内存文件，是在系统物理内存不够用的时候，由系统内存管理程序将那些很长时间没有操作内存数据，临时保存到Swap分区虚拟内存文件中...当那些程序要再次重新运行时，会再从Swap分区或虚拟内存文件中恢复之前保存的数据到内存中。

    15.3K41

    认识 Linux 内存构成：Linux 内存调优之虚拟内存与物理内存认知

    写在前面 博文内容涉及 Linux 内存构成基本认知 包括虚拟内存和物理内存映射，多级页表和MMU简单认知 理解不足小伙伴帮忙指正 对每个人而言，真正的职责只有一个：找到自我。...所有其它的路都是不完整的，是人的逃避方式，是对大众理想的懦弱回归，是随波逐流，是对内心的恐惧 ——赫尔曼·黑塞《德米安》 认识 Linux 内存构成：虚拟内存与物理内存 计算机中的进程小伙伴一定不陌生，...但实际实现中受硬件架构和操作系统设计的限制，仅部分地址位被有效利用，硬件层面通过符号扩展机制仅支持 48 位虚拟地址（低 48 位），高 16 位（48-63）需填充为第 47 位的值，形成规范地址（Canonical...,决定了 CPU 能直接访问的最大物理内存, 2^45 字节，CPU 理论上最多支持 32 TiB 的物理内存 48 bits virtual：表示 CPU 的虚拟地址空间大小。...其次进程在通过虚拟地址空间访问物理内存时 通过多级页表实现虚拟→物理地址转换,通过内存管理单元（MMU）执行实时地址转换与访问权限校验,同时支持按需分页（Demand Paging）机制延迟物理页帧分配

    66100

    Linux 系统内存监控：Linux 内存调优之系统内存全面监控

    即使应用程序需要的内存容量大于可用的物理内存，Linux内核仍然允许这些程序运行。Linux内核使用硬盘作为临时存储器，这个硬盘空间被称为交换分区(swap space)。...高速缓存和缓冲区的使用使得系统内空闲的内存很少，默认情况下，Linux试图尽可能多的使用你的内存。这是好事。 如果Linux侦测到有空闲内存，它就会将应用程序和数据缓存到这些内存以加速未来的访问。...需要时，Linux找出进程最近最少使用的内存页面，并将它们从活跃列表移动到不活跃列表。当要选择把哪个内存页交换到硬盘时，内核就从不活跃内存列表中进行选择。...它显示了这些分片的被占用情况，以及它们使用了多少内存。 slabtop可以一窥Linux内核的数据结构。每一种分片类型都与Linux内核紧密相关。...Writeback:正在主动写回磁盘的内存 AnonPages:映射到用户空间页表的非文件支持页 Mapped:已映射的文件，例如库 Slab:内核数据结构缓存 PageTables:专用于最低级别页表的内存量

    1.1K10
    点击加载更多

    相关资讯

    热门标签

    更多标签

    活动推荐

      运营活动

      活动名称
      广告关闭

      腾讯云开发者

      扫码关注腾讯云开发者

      扫码关注腾讯云开发者

      领取腾讯云代金券

      热门产品

      热门推荐

      更多推荐

      Copyright © 2013 - 2025 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有

      深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 深公网安备号 44030502008569

      腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号 | 京公网安备号11010802020287

      领券