发表于2018-11-022019-01-01 作者 wind 第一步：创建交换文件 mkdir /data fallocate -l 4G /data/swap 或 dd if=/dev/zero...of=/data/swap bs=1M count=4096 第二步：设置可访问权限 chmod 600 /data/swap 第三步：格式化文件 mkswap /data/swap 第四步：激活swap
Linux内存文件系统：可满足高IO的要求 ramdisk: 基于虚拟在内存中的其他文件系统(ex2fs)。...挂载方式：mount /dev/ram /mnt/ramdisk ramfs: 物理内存文件系统，只存在于物理内存中。其大小也不是固定的，而是随着所需要的空间动态得增减。...yaowen /mnt/ramfs -o maxsize=2000 ramfs 使用方式：mount yaoxu -t ramfs /mnt/ramfs/ -o maxsize=20M tmpfs: 虚拟内存文件系统...，不同于块设备形式实现的ramdisk， 也不同于真对物理内存实现的ramfs 文件系统。...：http://man7.org/linux/man-pages/man5/tmpfs.5.html
Nginx是一个非常出色的静态资源web服务器。如果你嫌它还不够快，可以把放在磁盘中的文件，映射到内存中，减少高并发下的磁盘IO。 先做几个假设。...nginx.conf中所配置站点的路径是/home/wwwroot/res，站点所对应文件原始存储路径：/opt/web/res shell脚本非常简单，思路就是拷贝资源文件到内存中，然后在把网站的静态文件链接指向到内存中即可...测试前提：将测试网站的首页全部内容包括html，图片，js，css等所有元素都拷贝到内存中,并且每次用户请求静态资源文件都不会缓存。使用LoadRunner按照200和100并发分别进行压力测试。...测试结果: 在高并发下全部使用磁盘文件200人并发 2分钟 平均每次事务响应时间为19.96秒 每秒处理事务数为9.26个 使用内存200人并发 2分钟 平均每次事务响应时间为11.3秒 每秒处理事务数为...15.8个 在低并发下全部使用磁盘文件100人并发 2分钟 平均每次事务响应时间为10.27秒 每秒处理事务数为9.32个 使用内存100人并发 2分钟 平均每次事务响应时间为5.84秒 每秒处理事务数为
但是，当Linux物理内存超过1G时，线性访问机制就不够用了，因为只能有1G的内存可以被映射，剩余的物理内存无法被内核管理，所以，为了解决这一问题，Linux把内核地址分为线性区和非线性区两部分，线性区规定最大为...DMA Zone通常很小，只有几十M，低端内存区与高端内存区的划分来源于Linux内核空间大小的限制。...Linux内核高端内存的由来 2.1 为什么需要高端内存？ 高端内存是指物理地址大于 896M 的内存。对于这样的内存，无法在“内核直接映射空间”进行映射。...1G) 2.3 Linux内核高端内存的理解 前 面我们解释了高端内存的由来。...4 页框管理 4.1 页框管理 Linux采用4KB页框大小作为标准的内存分配单元。
要深入了解Linux内存运行机制，需要知道下面提到的几个方面。 首先，Linux系统会不时地进行页面交换操作，以保持尽可能多的空闲物理内存。...其次，Linux进行页面交换是有条件的，不是所有页面在不用时都交换到虚拟内存中，Linux内核根据“最近最经常使用”算法，仅仅将一些不经常使用的页面文件交换到虚拟内存中。...---- 缓冲区（buffer）与缓存（cache）的异同 在Linux操作系统中，当应用程序需要读取文件中的数据时，操作系统先分配一些内存，将数据从磁盘读入这些内存中，然后再将数据分发给应用程序；当需要往文件中写入数据时...在这种情况下，Linux引入了缓冲区和缓存机制。 缓冲区与缓存都是内存操作，用来保存系统曾经打开过的文件以及文件属性信息。...Linux下可以使用文件系统中的一个常规文件或者一个独立分区作为交换空间。同时Linux允许使用多个交换分区或者交换文件。
saved_auxv[AT_VECTOR_SIZE]； struct linux_binfmt *binfmt; cpumask_t cpu_vm_mask; mm_counter_t...vm_area_struct 数据结构来管理，包括虚拟内存的起始和结束地址，以及内存的访问权限等，通常命名为vma；vm_area_struct 数据结构的定义如下： ?...区域的链接列表，按地址排序*/ struct vm_area_struct *vm_next, *vm_prev; struct rb_node vm_rb; /* 此VMA左侧最大的可用内存间隙...COW之后，文件的MAP_PRIVATE vma可以在i_mmap树和anon_vma列表中。...; /* 以PAGE_SIZE为单位的偏移量（在vm_file中），*不是* PAGE_CACHE_SIZE*/ struct file * vm_file; /* 我们映射到文件（可以为NULL
推荐两篇文章，讲Linux进程内存分布的。 1. 这篇比较简单，如果只是想大概了解下，可以只看这篇。 https://en.wikipedia.org/wiki/Data_segment ? 2....这篇相对复杂些，但写的是真好，推荐认真看看。 https://manybutfinite.com/post/anatomy-of-a-program-in-memory/ ? 完。
这正是Windows和Linux在内存管理上的区别，乍一看，Linux系统吃掉我们的内存（Linux ate my ram），但其实这也正是其内存管理的特点。 ?...free命令介绍 下面为使用free命令查看我们实验室文件服务器内存得到的结果，-m选项表示使用MB为单位： ?...buffers/cached好处 Linux 内存管理做了很多精心的设计，除了对dentry进行缓存（用于VFS，加速文件路径名到inode的转换），还采取了两种主要Cache方式：Buffer Cache...其实不然，Linux并没有吃掉你的内存，只要还未使用到交换分区，你的内存所剩无几时，你应该感到庆幸，因为Linux缓存了大量的数据，也许下一次你就从中受益！...实验证明 下面通过实验来验证上面的结论： 我们先后读入一个大文件，比较两次读入的实践： 1.首先生成一个1G的大文件 ? 2.清空缓存 ? 3.读入这个文件，测试消耗的时间 ?
有趣的是，尽管进程和内存的关系如此紧密，但进程并不能直接访问内存。在Linux下，进程不能直接读写内存中地址为0x1位置的数据。...因此，Linux采用了分页（paging）的方式来记录对应关系。所谓的分页，就是以更大尺寸的单位页（page）来管理内存。在Linux中，通常每页大小为4KB。...Linux把物理内存和进程空间都分割成页。 内存分页，可以极大地减少所要记录的内存对应关系。我们已经看到，以字节为单位的对应记录实在太多。...因此，Linux中的分页表，采用了多层的数据结构。多层的分页表能够减少所需的空间。 我们来看一个简化的分页设计，用以说明Linux的多层分页表。...最新Linux系统中的分页表多达3层，管理的内存地址也比本章介绍的长很多。不过，多层分页表的基本原理都是相同。 综上，我们了解了内存以页为单位的管理方式。
点击上方“小强的进阶之路”，选择“星标”公众号 优质文章，及时送达 预计阅读时间: 18分钟 写在前面 本文主要分析 Linux 系统内存统计的一些指标以及进程角度内存使用监控的一些方法。...Linux 的内存管理从物理内存管理到虚拟内存管理涉及的概念和统计项实在太多，本文从实用和系统运维的角度出发，只列举一些最实用的统计。...Linux 2.4.10 内核之前，磁盘的缓存有两种，即 Buffer Cache和 Page Cache。前者缓存管理磁盘文件系统时读取的块，后者存放访问具体文件内容时生成的页。...（File-backed Pages）, 比如程序文件、读取文件时数据对应的缓存页 与文件无关的匿名内存页（Anonymous Pages），比如进程的堆、栈等分配的内存 所有Page Cache里的页面都是...共享内存、可执行程序的文件、动态库、mmap的文件等都统计在这里 Shmem — 共享内存的大小，包括Shared Memory、tmpfs和devtmpfs 注意 Linux 的内存是真正使用时才分配的
; Buffers: 56496 kB 为 " 块设备 " 做缓存的内存空间大小 Cached: 824888 kB 分配给 " 文件缓冲区 " 的内存空间大小 SwapCached: 0 kB "...高速缓存 " 的 " 交换空间 " 大小 Active: 1021364 kB " 高速缓存 " 页面文件大小 Inactive: 352536 kB 不经常使用的 " 高速缓存 " 页面文件大小 Active...(anon): 493520 kB 活跃的 " 匿名内存 " Inactive(anon): 17780 kB 不活跃的 " 匿名内存 " Active(file): 527844 kB 活跃文件使用的内存...Inactive(file): 334756 kB 不活跃文件使用的内存 Unevictable: 48 kB 不可释放的内存页 Mlocked: 48 kB 允许程序在 " 物理内存 " 上 锁住...kB 正在被写的内存大小 AnonPages: 492572 kB " 未映射页 " 的内存 映射到 " 用户空间 " 后的 页表大小 Mapped: 191348 kB " 映射文件 " 内存大小 Shmem
CPU访问本地内存的速度比访问远程内存的速度要快 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大....因此linux内核需要用一种体系结构无关的方式来表示内存....因此linux内核把物理内存按照CPU节点划分为不同的node, 每个node作为某个cpu结点的本地内存, 而作为其他CPU节点的远程内存, 而UMA结构下, 则任务系统中只存在一个内存node, 这样对于...分配内存操作时的区域顺序，当调用free_area_init_core()时，由mm/page_alloc.c文件中的build_zonelists()函数设置 nr_zones 当前节点中不同内存域zone...-3.x~4.x的实现 node_data内存节点数组 在新的linux3.x~linux4.x的内核中，内核移除了pg_data_t的pgdat_next之指针域, 同时也删除了pgdat_list链表
在测试NAS性能，用fstest长时间写，分析性能变差的原因，发现server主机内存使用率很高。...发现内存基本用完，究竟是什么进程占用？top命令发现排名第一的%MEM才零点几。 2.通过 vmstat -m命令查看内核空间的内存使用。...猜测是nas/rbd 卷的文件系统缓存信息。xfs_inode看字面意思是xfs文件系统的inode信息。 搜了下xfs_ili，只搜到内核代码片段。...查资料说linux将用过的文件缓存到内存中。...不过以后在优化nfs-server端有一定的指导意义。卷越多，必然占用的内存越多。做机头的内存配置要高。
1 Linux如何描述物理内存 Linux把物理内存划分为三个层次来管理 层次 描述 存储节点(Node) CPU被划分为多个节点(node), 内存则被分簇, 每个CPU对应一个本地物理内存, 即一个...简单来说, 页是一个数据块, 可以存放在任何页框(内存中)或者磁盘(被交换至交换分区)中 我们今天就来详细讲解一下linux下物理页帧的描述 2 页帧 内核把物理页作为内存管理的基本单位....在映射的虚拟空间（vma_area）内的偏移； 一个文件可能只映射一部分，假设映射了1M的空间， index指的是在1M空间内的偏移，而不是在整个文件内的偏移...2.2 mapping & index mapping指定了页帧所在的地址空间, index是页帧在映射内部的偏移量. 地址空间是一个非常一般的概念. 例如, 可以用在向内存读取文件时....地址空间用于将文件的内容与装载数据的内存区关联起来. mapping不仅能够保存一个指针, 而且还能包含一些额外的信息, 用于判断页是否属于未关联到地址空间的某个匿名内存区.
2 (N)UMA模型中linux内存的机构 Linux适用于各种不同的体系结构, 而不同体系结构在内存管理方面的差别很大. 因此linux内核需要用一种体系结构无关的方式来表示内存....Linux内核通过插入一些兼容层, 使得不同体系结构的差异很好的被隐藏起来, 内核对一致和非一致内存访问使用相同的数据结构 2.1 (N)UMA模型中linux内存的机构 非一致存储器访问(NUMA)模式下...在LINUX中引入一个数据结构struct pglist_data ，来描述一个node，定义在include/linux/mmzone.h 文件中。..., 我们会在后面典型架构(x86)上内存区域划分详细讲解x86_32上的内存区域划分 因此Linux内核对不同区域的内存需要采用不同的管理方式和映射方式, 为了解决这些制约条件，Linux使用了三种区:...2.6 高端内存 由于能够被Linux内核直接访问的ZONE_NORMAL区域的内存空间也是有限的，所以LINUX提出了高端内存（High memory）的概念，并且允许对高端内存的访问
文章目录 一、Linux 内核 动态分配内存 系统接口函数 二、统计输出 vmalloc 分配的内存 一、Linux 内核 动态分配内存 系统接口函数 ---- Linux 内核 " 动态分配内存 "...是通过 " 系统接口 " 实现的 , 下面介绍几个重要的 接口函数 ; ① 以 " 页 " 为单位分配内存 : alloc_pages , __get_free_page ; ② 以 " 字节 " 为单位分配..." 虚拟地址连续的内存块 " : vmalloc ; ③ 以 " 字节 " 为单位分配 " 物理地址连续的内存块 " : kmalloc ; 注意 该 " 物理地址连续的内存块 " 是以 Slab 为中心的...; 二、统计输出 vmalloc 分配的内存 ---- 执行 grep vmalloc /proc/vmallocinfo 命令 , 可以统计输出 通过 vmalloc 函数分配的 " 虚拟地址连续的内存块
Linux使用enum zone_type来标记内核所支持的所有内存区域 3.1 内存区域类型zone_type zone_type结构定义在include/linux/mmzone.h, 其基本信息如下所示..., 这个变量的初始化完全依赖与硬件的体系结构. max_possible_pfn x86的系统中, find_max_pfn函数通过读取e820表获得最高的page frame的数值, 同样在文件mm...我理解为这段地址kernel可以直接访问，可以通过PAGE_OFFSET宏直接将kernel所用的虚拟地址转换成物理地址的区段。在文件mm/bootmem.c中对这个变量作初始化。...在arch/i386/mm/init.c文件中会对类似的highstart_pfn和highend_pfn变量作初始化。这些变量用于对高端内存页面的分配。后面将描述。...Linux必须处理如下两种硬件存在缺陷而引起的内存寻址问题： 一些硬件只能用某些特定的内存地址来执行DMA 一些体系结构其内存的物理寻址范围比虚拟寻址范围大的多。
在Linux内核，对于进程的内存使用与Cgroup的内存使用统计有一些相同和不同的地方。...进程的内存统计 一般来说，进程使用的内存主要有以下几种情况： （1）用户空间的匿名映射页（Anonymous pages in User Mode address spaces），比如调用malloc分配的内存...，以及使用MAP_ANONYMOUS的mmap；当系统内存不够时，内核可以将这部分内存交换出去； （2）用户空间的文件映射页（Mapped pages in User Mode address spaces...），包含map file和map tmpfs；前者比如指定文件的mmap，后者比如IPC共享内存；当系统内存不够时，内核可以回收这些页，但回收之前可能需要与文件同步数据； （3）文件缓存（page in...page cache of disk file）；发生在程序通过普通的read/write读写文件时，当系统内存不够时，内核可以回收这些页，但回收之前可能需要与文件同步数据； （4）buffer pages
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频
