首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

浪费内存多大个事?

遥想盖子当年,MS 红火了,谈笑间,640k 内存足矣。 - 程序君 现在已经不是从指缝中扣内存的时代了。...每 Gb 内存,也就是 711 一份好炖的价格,咱不差钱,32G 不够,上 128G,还不够,只要系统支持,咱可以照着 Tb 往上撸,多大个事!...我们接着看: 公允期间,咱们都不做 gzip(你要非跟我较真这个,那么咱就把前提变成 1k 和 8k),由于 2k > 标准的 MTU(1514),这个数据一个报文发送不了,于是乎,发送端需要分片,接收端需要重组...好吧,其实这也不是多大点事,原本 150ms 完成的事情,现在即便最坏的情况,500ms 完成,也没啥大不了哈。 好,咱么再换个角度,谈谈 capacity。...浪费空间不说,随处透露出的「我还没想好需要些什么,先放点东西上来,以后慢慢补」让程序员无所顾忌 —— 前后端叼着雪糕抽着烟,一个「数据接口」就被「碰撞」出来。

2K80
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    一条SQL能占多大内存

    初学计算机时,我经常琢磨的一个问题是:一个进程到底能吃多大内存,能把系统内存吃完? 学了数据库后,我又开始问自己类似的问题,一条 SQL 能把数据库内存全部吃完?...假设数据库系统内存 有128GB,全盘扫描一遍 200GB的表,是不是就把数据库内存撑爆了,别人的 SQL 就不能运行了? 一开始,这个问题我始终没找到答案。...再启动 2个抽取数据的任务, 可得系统内存的比率图: 如果内存全部耗完,整个操作系统变得不稳定,SQL Server 的稳定性即即将崩溃。...回到主问题,一条 SQL 能占多大内存?...普通货船吨位在1万吨,如果要把马来西亚10万吨的香蕉运到上海,需要10个来回。 数据库在导数据时,也一样。

    2.2K20

    计算pxc集群中 gcache.size 需要设置多大

    Joiner节点需要要求捐助方发送在停机期间发生的更改。 施主将首先尝试传输增量(IST),即在节点关闭时接收群集的写入集。施主检查加入程序接收到的最后一个写集,然后检查本地gcache文件。...如果所有需要的写集都在该高速缓存上,则捐助者将它们发送给联接器。联接程序将应用它们,仅此而已,它是最新的并准备加入集群。...另一方面,如果没有写集,则需要使用一种受支持的方法XtraBackup,Rsync或mysqldump 进行完全传输(SST)。 总之,IST和SST之间的区别是节点需要加入集群的时间。...在WAN连接和大型数据集的情况下,可能需要几天的时间。 这就是为什么正确的gcache很重要的原因。它以循环日志的形式工作,因此当它充满时,它会从头开始重写写集。...我们需要检查每分钟写入多少字节。要检查的变量是: wsrep_replicated_bytes:发送到其他节点的写集的总大小(以字节为单位)。

    1.9K20

    一个Java对象到底占用多大内存

    开启指针压缩: 12+4=16已经是8的倍数了,不需要再padding。 ? 1) 对reference类型的影响 64位机器上reference类型占用8个字节,开启指针压缩后占用4个字节。...之所以比普通对象占用内存多是因为需要额外的空间存储数组的长度。 先考虑下new Integer[0]占用的内存大小,长度为0,即是对象头的大小: 未开启压缩:24bytes ?...递归计算复合对象占用的内存的时候需要注意的是:对齐填充是以每个对象为单位进行的,看下面这个图就很容易明白。 ?...实际工作中真正需要手动计算对象大小的场景应该很少,但是个人觉得做为基础知识每个Java开发人员都应该了解,另外:对自己写的代码大概占用多少内存内存中是怎么布局的应该有一个直觉性的认识。...码农笔记网 » 一个Java对象到底占用多大内存

    1.7K10

    一个Java对象到底占用多大内存

    开启指针压缩: 12+4=16已经是8的倍数了,不需要再padding。 ? 1) 对reference类型的影响 64位机器上reference类型占用8个字节,开启指针压缩后占用4个字节。...之所以比普通对象占用内存多是因为需要额外的空间存储数组的长度。 先考虑下new Integer[0]占用的内存大小,长度为0,即是对象头的大小: 未开启压缩:24bytes ?...递归计算复合对象占用的内存的时候需要注意的是:对齐填充是以每个对象为单位进行的,看下面这个图就很容易明白。 ?...实际工作中真正需要手动计算对象大小的场景应该很少,但是个人觉得做为基础知识每个Java开发人员都应该了解,另外:对自己写的代码大概占用多少内存内存中是怎么布局的应该有一个直觉性的认识。...码农笔记网 » 一个Java对象到底占用多大内存

    1.2K10

    一个Java对象到底占用多大内存

    一个Java对象到底占用多大内存?...意思是每次分配的内存大小一定是8的倍数,如果对象头+实例数据的值不是8的倍数,那么会重新计算一个较大值,进行分配。...A对象只包含一个对象头,大小占12字节,不是8的倍数,需要4字节进行填充,一共占16字节 B对象包含一个对象头和int类型,12+4=16,正好是8的倍数,不需要填充。...C对象包含一个对象头和long类型,12+8=20,不是8的倍数,需要4个字节进行填充,占24字节 D对象包含一个对象头和引用类型,12+4=16,正好是8的倍数,不需要填充。...可以得出,VisualVM的显示结果有点问题,主要因为以下两点: 首先,没有考虑是否开启 UseCompressedOops 其次,没有考虑内存对齐填充的情况 感兴趣的同学,可以动手实践一下,这样可以加深对象内存布局的理解

    1.6K10

    一条SQL到底能占多大内存

    SQL145题系列 初学计算机时,我经常琢磨的一个问题是:一个进程到底能吃多大内存,能把系统内存吃完? 学了数据库后,我又开始问自己类似的问题,一条 SQL 能把数据库内存全部吃完?...假设数据库系统内存 有128GB,全盘扫描一遍 200GB的表,是不是就把数据库内存撑爆了,别人的 SQL 就不能运行了? 一开始,这个问题我始终没找到答案。...再启动 2个抽取数据的任务, 可得系统内存的比率图: 如果内存全部耗完,整个操作系统变得不稳定,SQL Server 的稳定性即即将崩溃。...回到主问题,一条 SQL 能占多大内存?...普通货船吨位在1万吨,如果要把马来西亚10万吨的香蕉运到上海,需要10个来回。 数据库在导数据时,也一样。

    9410

    Linux内存描述之高端内存--Linux内存管理(五)

    低896M的内存做直接映射,剩下的128M 根据需要动态的映射到剩下的物理内存。 64位的内核就可以很好的解决这个问题,但是64位系统不是意味着就有64根地址线。因为没必要,实际不需要那么大内存。...假设你有38位地址线,可以寻址到2048G的内存,也按照3:1划分,那么内核态就有512G范围,你的512G物理内存可以一次性的全部映射到内核空间,根本不需要高端内存 Linux物理内存空间分为DMA内存区...Linux内核高端内存的由来 2.1 为什么需要高端内存? 高端内存是指物理地址大于 896M 的内存。对于这样的内存,无法在“内核直接映射空间”进行映射。...想想 MMU 是如何访问物理内存的),也就是说,我们需要为高端内存对应的 page 找一个线性空间,这个过程称为高端内存映射。...想想 MMU 是如何访问物理内存的),也就是说,我们需要为高端内存对应的 page 找一个线性空间,这个过程称为高端内存映射。 ?

    12.5K23

    Linux - Linux内存管理

    需要用到原始内容时,这些信息会被重新从交换空间读入物理内存Linux内存管理采取的是分页存取机制。...要深入了解Linux内存运行机制,需要知道下面提到的几个方面。 首先,Linux系统会不时地进行页面交换操作,以保持尽可能多的空闲物理内存。...即使并没有什么事情需要内存Linux也会交换出暂时不用的内存页面,这可以避免等待交换所需的时间。...实际上,内核完全控制着内存的使用情况,Linux会在需要内存的时候,或在系统运行逐步推进时,将缓冲区和缓存状态的内存变为可用状态的内存,以供系统使用。...---- 缓冲区(buffer)与缓存(cache)的异同 在Linux操作系统中,当应用程序需要读取文件中的数据时,操作系统先分配一些内存,将数据从磁盘读入这些内存中,然后再将数据分发给应用程序;当需要往文件中写入数据时

    52.4K41

    Linux内存描述之内存节点node--Linux内存管理(二)

    CPU访问本地内存的速度比访问远程内存的速度要快 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大....因此linux内核需要用一种体系结构无关的方式来表示内存....因此linux内核把物理内存按照CPU节点划分为不同的node, 每个node作为某个cpu结点的本地内存, 而作为其他CPU节点的远程内存, 而UMA结构下, 则任务系统中只存在一个内存node, 这样对于..., 内核页需要使用内存(另外,还需要保留部分内存用于初始化内存管理子系统) 为解决这个问题,内核使用了自举内存分配器 此结构用于这个阶段的内存管理 */...,它包含了该页面所有的内存页,被放置在全局mem_map数组中 bdata 这个仅用于引导程序boot 的内存分配,内存在启动时,也需要使用内存,在这里内存使用了自举内存分配器,这里bdata是指向内存自举分配器的数据结构的实例

    7.9K21

    Linux内存描述之内存页面page--Linux内存管理(四)

    1 Linux如何描述物理内存 Linux把物理内存划分为三个层次来管理 层次 描述 存储节点(Node) CPU被划分为多个节点(node), 内存则被分簇, 每个CPU对应一个本地物理内存, 即一个...(ISA)设备需要用到它, 然后是可直接映射到内核的普通内存域ZONE_NORMAL,最后是超出了内核段的物理地址域ZONE_HIGHMEM, 被称为高端内存. ...简单来说, 页是一个数据块, 可以存放在任何页框(内存中)或者磁盘(被交换至交换分区)中 我们今天就来详细讲解一下linux下物理页帧的描述 2 页帧 内核把物理页作为内存管理的基本单位..../page-flags.h中 virtual 对于如果物理内存可以直接映射内核的系统, 我们可以之间映射出虚拟地址与物理地址的管理, 但是对于需要使用高端内存区域的页, 即无法直接映射到内核的虚拟地址空间...3.2 内存页标识pageflags 其中最后一个flag用于标识page的状态, 这些状态由枚举常量enum pageflags定义, 定义在include/linux/page-flags.h?

    8.4K11

    Linux内存描述之概述--Linux内存管理(一)

    2 (N)UMA模型中linux内存的机构 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大. 因此linux内核需要用一种体系结构无关的方式来表示内存....所有节点中的处理器都可以访问全部的系统物理存储器,但是访问本节点内的存储器所需要的时间,比访问某些远程节点内的存储器所花的时间要少得多 内存被分割成多个区域(BANK,也叫”簇”),依据簇与处理器的”距离...(ISA)设备需要用到它, 然后是可直接映射到内核的普通内存域ZONE_NORMAL,最后是超出了内核段的物理地址域ZONE_HIGHMEM, 被称为高端内存. ..., 我们会在后面典型架构(x86)上内存区域划分详细讲解x86_32上的内存区域划分 因此Linux内核对不同区域的内存需要采用不同的管理方式和映射方式, 为了解决这些制约条件,Linux使用了三种区:...2.6 高端内存 由于能够被Linux内核直接访问的ZONE_NORMAL区域的内存空间也是有限的,所以LINUX提出了高端内存(High memory)的概念,并且允许对高端内存的访问

    6.9K30

    Linux内存管理

    本篇介绍 本篇介绍下Linux内存管理,用系统角度看内存的寻址和分配机制。 内容介绍 内存管理应该是系统中最难的模块之一了,而且历史也悠久,就先来简单回顾下。...公布下答案: 的确有分页机制就可以完全不需要分段机制,目前linux是在分段的基础上实现了分页,这个也有考虑到是兼容性问题。...mmap流程如下: image.png 缺页异常 linux 是在不得不使用物理内存的时候才会分配物理内存。这句话该怎么理解呢?...因此看到物理可用内存不足并不表示需要换物理内存条了。...如果页面回收是在解决不了内存不足问题,这时候就需要用OOM killer了,OOM killer 杀死一个内存占用比较高的进程,那这个进程怎么选呢?

    13.8K51

    Linux内存描述之内存区域zone--Linux内存管理(三)

    , 我们会在后面典型架构(x86)上内存区域划分详细讲解x86_32上的内存区域划分 因此Linux内核对不同区域的内存需要采用不同的管理方式和映射方式, 因此内核将物理地址或者成用zone_t表示的不同地址区域...如在64位系统中, 并不需要高端内存, 因为AM64的linux采用4级页表,支持的最大物理内存为64TB, 对于虚拟地址空间的划分,将0x0000,0000,0000,0000 – 0x0000,7fff...不需要高端内存的特殊映射....由于其中维护的大部分信息曲面没有多大意义 // http://lxr.free-electrons.com/source/include/linux/mmzone.h#L522 struct zone...linux把系统的内存结点划分区, 一个区包含了若干个内存页面, 形成不同的内存池,这样就可以根据用途进行分配了 需要说明的是,区的划分没有任何物理意义, 只不过是内核为了管理页而采取的一种逻辑上的分组

    9.5K31
    领券