首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Postgres 源码学习 2—Postgres 的 VFD 机制

操作系统中的文件 数据库的本质其实就是用来存储数据的,所以免不了和文件系统、存储进行交互,万丈高楼平地起,存储一般是一个数据库的最底层,Postgres 在存储的文件管理方面也有很多的设计与抽象。...在操作系统层面,提供了一些文件操作相关的系统调用(fopen、fclose、fsync 等),我们作为上层使用者,可以直接通过 C 语言库进行调用即可(Postgres 使用 C 语言编写)。...Postgres 的 VFD 作用 Postgres 数据库在运行的过程当中,可能会打开非常多的文件,比如数据表对应的文件,元数据表文件,以及一些在 SQL 运行时打开的临时文件,例如排序、哈希表所需的文件...VFD 的基本工作方式 Postgres 主要通过一个进程私有的数组来维护 VFD,名为 VfdCache。...通过这种方式,Postgres 可以打开远超过系统和进程限制的文件数量,是一个非常精妙的设计。

12710
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Postgres 源码学习 3—Postgres 存储管理器

    前面一节说到,在 Postgres 的 VFD 机制之上,我们可以避开打开文件数量的系统限制,通过 VFD 可以进行打开、读写、关闭、删除文件等操作,简单来说就是 VFD 为我们提供了一个抽象,屏蔽了操作系统文件描述符的接口...文件类型和文件块 要了解 Postgres 的存储管理,需要先对 Postgres 的表文件的组织方式、类型有一个简单的了解。...Postgres 中的表文件可能会非常大,在物理存储上会将表文件拆分为多个,每一个表文件通过 segno 来区分。...在 Postgres 的数据目录中,表文件的存储格式为 base//。...但是目前在操作系统层面,已经提供了文件系统的抽象,所以存储管理器其实已经没有存在的必要了,但是 Postgres 依然选择将其保留,主要是认为这层抽象并没有什么其他的影响。

    12210

    Stackoverflow Oom 死锁OOMStackOverFlow死锁

    这篇文章主要是记录自己做的一些小的测试.主要包括内存溢出,栈溢出,以及死锁问题. PS:文章中使用了Arthas工具,用来动态监控JVM的一些资源,非常好用,强烈安利一下....死锁 死锁是指两个或两个以上的进程在执行过程中,由于竞争资源或者由于彼此通信而造成的一种阻塞的现象,若无外力作用,它们都将无法推进下去。...此时称系统处于死锁状态或系统产生了死锁,这些永远在互相等待的进程称为死锁进程。 造成死锁的条件有四个: 互斥条件:指进程对所分配到的资源进行排它性使用,即在一段时间内某资源只由一个进程占用。...环路等待条件:指在发生死锁时,必然存在一个进程——资源的环形链,即进程集合{P0,P1,P2,···,Pn}中的P0正在等待一个P1占用的资源;P1正在等待P2占用的资源,……,Pn正在等待已被P0占用的资源

    1.1K31

    死锁死锁避免算法

    1.什么是死锁死锁(Deadlock)是在多任务环境中的一种资源竞争问题,其中两个或多个进程(线程)互相等待对方持有的资源,导致所有进程都无法继续执行。...死锁是一种非常棘手的问题,因为它会导致系统无法正常运行。 举个例子。比如买东西,如果商家要先拿钱才给东西,顾客要先拿到东西才给钱,那么会发生死锁。 另外,哲学家就餐问题是一个死锁的经典例子。...2.死锁的条件 死锁需要满足四个必要条件: 互斥(mutual exclusion):资源只能同时分配给一个进程,不能共享。...死锁只有在四个条件同时满足时发生,预防死锁必须至少破坏其中一项。 3.如何避免死锁? 只要破坏死锁的四个必要条件的任意一个,便可避免死锁。 破坏互斥条件:允许多个进程共享某些资源,从而避免互斥条件。...对于某些检测死锁并从死锁中恢复的算法来说,Livelock 是一种风险。如果有多个进程执行操作,则可以重复触发死锁检测算法。这可以通过确保只有一个进程(任意选择或按优先级选择)执行操作来避免。

    35210

    死锁

    死锁 在进程同步的时候,我们已经发现了死锁存在。有两个信号量S和Q。...在资源分配图中如果没有环,那么系统就一定不是死锁状态;如果有环,那么系统可能处于死锁状态,也可能不是死锁死锁处理的方法 从原理上来讲,死锁有三种方法可以来处理它。...分别是死锁避免,死锁检测和恢复,死锁忽略。 死锁忽略 OS不能保证死锁不会发生,并且也不提供死锁避免和死锁检测。那么就是说,当死锁发生的时候,操作系统是不知道的。...当系统既不采用死锁预防,也不采用死锁避免。因此就有了死锁检测。用来检查系统是否出现了死锁。一个用来从死锁状态恢复。...死锁恢复 当死锁检测算法检测到了死锁已经存在,那么可以采用的恢复办法是较多的。一是简单地终止一个进程或者多个进程以打破循环等待。另一个方法是从一个或多个死锁进程哪里抢夺资源。

    74330

    死锁

    维基百科的定义: 死锁(英语:Deadlock),又译为死结,计算机科学名词。当两个以上的运算单元,双方都在等待对方停止运行,以获取系统资源,但是没有一方提前退出时,就称为死锁。...这里指的是进程死锁,是个计算机技术名词。它是操作系统或软件运行的一种状态:在多任务系统下,当一个或多个进程等待系统资源,而资源又被进程本身或其他进程占用时,就形成了死锁。有个变种叫活锁。...因为p1必须等待p2发布列表机才能够完成工作并发布显示屏,同时p2也必须等待p1发布显示器才能完成工作并发布列表机,形成循环等待的死锁。 如果系统中只有一个进程,当然不会产生死锁。...如果每个进程仅需求一种系统资源,也不会产生死锁。不过这只是理想状态,在现实中是可遇不可求的。...我们能写一个死锁吗?

    60420

    死锁

    什么是死锁 简单的说:线程1持有A锁,线程2持有B锁;线程1尝试获取B锁,线程2尝试获取A锁。两个线程各持有了一把锁,同时想获取对方的锁,自身的又不释放。...死锁 如何定位 先写一个死锁的程序 public class DeadLock extends Thread { private String first; private String...start(); thread1.join(); thread2.join(); } } 执行结果: Thread-0:锁A Thread-1:锁B 几乎每次都会出现死锁的情况...所以当写程序的时候如何避免死锁显得重要的多。...从代码程序上 不要出现多个锁 设置锁的过期时间 工具上 使用静态代码扫描,例如“FindBugs” 其他方式 写之前把使用锁的逻辑画出流程图 类加载过程中发生的死锁 最后 自旋锁发生死锁如何排查,程序中经常遇到的

    58420

    扫码

    添加站长 进交流群

    领取专属 10元无门槛券

    手把手带您无忧上云

    扫码加入开发者社群

    相关资讯

    热门标签

    活动推荐

      运营活动

      活动名称
      广告关闭
      领券