开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

通过频繁创建临时表耗尽pg_class OID

问题：通过频繁创建临时表耗尽pg_class OID

答案：在PostgreSQL数据库中，pg_class是系统目录表之一，用于存储数据库中的所有表的元数据信息。每当在数据库中创建一个新表时，都会在pg_class中生成一个新的OID（对象标识符）来唯一标识该表。

频繁创建临时表可能会导致pg_class中的OID耗尽。这可能会导致以下问题：

表创建失败：当pg_class中的OID耗尽时，无法再为新创建的表分配唯一的OID，因此表创建操作将失败。
性能下降：频繁创建临时表会导致pg_class表的频繁更新，这可能会对数据库的性能产生负面影响。

为了解决这个问题，可以考虑以下方法：

优化临时表的使用：尽量避免频繁创建临时表，可以通过合并临时表或者使用临时表的持久化版本来减少对pg_class的频繁操作。
增加pg_class的OID范围：可以通过修改PostgreSQL配置文件中的参数max_fsm_relations和max_fsm_pages来增加pg_class的OID范围。这样可以提高系统能够创建的临时表的数量。
定期清理无用的临时表：定期清理无用的临时表可以释放pg_class中的OID，避免OID耗尽的问题。可以使用VACUUM命令或者手动删除不再需要的临时表。

腾讯云相关产品和产品介绍链接地址：

腾讯云数据库 PostgreSQL：https://cloud.tencent.com/product/postgresql

腾讯云云服务器（CVM）：https://cloud.tencent.com/product/cvm

腾讯云云原生应用引擎 TKE：https://cloud.tencent.com/product/tke

腾讯云对象存储 COS：https://cloud.tencent.com/product/cos

腾讯云区块链服务 TBC：https://cloud.tencent.com/product/tbc

请注意，以上链接仅供参考，具体产品选择应根据实际需求和情况进行评估和决策。

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

SQL Server通过创建临时表遍历更新数据

好像并没有for和foreach这种类型的功能呀，不过关于数据库遍历最常见的方法当然是大家经常会想到的游标啦，但是这次我并没有使用游标，而是通过创建临时表的方式来更新遍历数据的。...为什么不使用游标，而使用创建临时表？　　...通过临时表while遍历数据，更符合我们日常的编程思想操作集合原则，性能上虽不敢保证表使用游标要好多少，但是在把临时表使用恰当的前提是能减少大量的性能消耗，并且使用起来非常简单易懂。...通过创建临时表遍历更新数据：注意：这里只是一个简单的临时表更新实例。我的目的是把TalkingSkillType表中的Sort值更新成为与Id一样的值！未更新前的数据如下图所示： ?...临时表遍历更新SQL语句： ----SQL SERVER通过临时表遍历数据 -- 判断是否存在（object(‘objectname’,‘type’)） IF OBJECT_ID('tempdb.dbo

2.2K2 0

从零开始学PostgreSQL (十)：磁盘使用情况

pg_class WHERE relname = 'weather') AS ss WHERE oid = ss.reltoastrelid OR oid = (SELECT...c, pg_class c2, pg_index i WHERE c.relname = 'weather' AND c.oid = i.indrelid AND c2.oid...通过查询pg_class表可以查看表和索引的磁盘使用情况，使用relpages字段来估算每个对象占用的页数。...使用pg_relation_filepath函数可以获取表的磁盘文件路径，这对于直接检查文件有用。通过查询pg_class和pg_index表可以查看TOAST表和索引的磁盘使用情况。...清理临时文件：删除临时文件夹中的文件，如`/tmp`或`/var/tmp`。清理数据库缓存：如果数据库缓存过大，可以考虑重启PostgreSQL服务以清除缓存。

1271 0

PostgreSQL创建临时表性能下降分析

环境信息 PostgreSQL 11.5 问题客户反馈临时表创建耗时较长，平均耗时在5ms以上，相对于之前测试阶段的创建时间有明显变慢。...根本原因 postgresql在创建表时，会预估当前表是否存在超长记录的可能，如果使用了text，varchar(555)等超大字端，会在创建表同时创建toast表及toast索引表，同时多字段会写入系统表记录...，这将增大创建表的开销。...; count ------- 407 (1 row) postgres=# select oid from pg_class where relname='t2'; oid --...，而客户环境上还部署有逻辑复制槽，这会进一步加剧系统表的膨胀问题，导致插入速度的降低，影响创建临时表的创建解决方法建议尽量减少字端数量，尽可能精确描述字段最大长度，减少使用varchar超长字段，以及

2.5K0 0

Postgresql存储结构

系统初始化后，没有创建任何表但是base/13158/下已经生成了很多表文件，这些文件就是当前数据库系统表，例如pg_class，注意系统表的relfilenode为0，可以使用隐藏列oid 或者 pg_relation_filepath...postgres=# select oid,relname, relfilenode from pg_class where relname='pg_class'; oid | relname |...表空间提供了表存储的灵活控制方式：例如在当前磁盘快满时，可以在任意新挂载的文件系统上创建表空间，把表存储在新的目录中；一个频繁使用的表可以放在IO性能更好的磁盘上，比如SSD。...使用表空间有两种方式：创建表时指定表空间创建数据库时指定表空间创建表空间 CREATE TABLESPACE tablespace_name [ OWNER { new_owner |...postgres=# select oid,relfilenode from pg_class where relname='foo'; oid | relfilenode -------+

1.2K4 2

PostgreSQL体系架构介绍

和表的oid分别存放在pg_database,pg_class表中。...| postgres(1 row)段-segment一个段是分配给一个逻辑结构（一个表、一个索引或其他对象）的一组区，是数据库对象使用的空间的集合；段可以有表段、索引段、回滚段、临时段和高速缓存段等。...例如，数据库的OID存储在pg_database系统表中，可以通过下面的语句进行查询。...索引、序列等数据库对象的OID则存在了pg_class系统表中，例如可以通过下面的语句查询前面创建的testtable1表的OID。...文件名以OID命名，对于超出1G的表数据文件，PostgreSQL会自动将其拆分为多个文件来存储，而拆分的文件名将由pg_class中的relfilenode字段来决定。

2.2K6 0

Greenplum 列存表(AO表)的膨胀和垃圾检查与空间收缩

__gp_aovisimap_compaction_info(t1.oid)).* from pg_class t1, pg_namespace t2 where t1.relnamespace=t2....__gp_aovisimap_compaction_info(t1.oid)).* from pg_class t1, pg_namespace t2 where t1.relnamespace=t2....__gp_aovisimap_compaction_info(t1.oid)).* from pg_class t1, pg_namespace t2 where t1.relnamespace=t2....bin/bash # 1、把改脚本放到任意目录下 # 2、inspect-ao-sql文件夹存放的是查询AO表的SQL与查询膨胀率的SQL # 3、log文件夹则是存放临时生成的schema与table...inspect-ao-percent-hidden.sql" # 所产生的日志路径 inspect_ao_log=$bashpath"/log" #当前的日期 currentDate=`date +%Y%m%d` #创建生成结果的临时目录

2.5K2 0

Greenplum 集群性能测试

创建临时表可以消除倾斜，临时表可以随机分布，以强制进行两阶段聚合。...利用file协议的外部表 # 创建外部表模式 create schema ext; # 分隔符的16进制 select to_hex(ascii('|')); # 创建外部表 \c dw gpadmin...利用gpfdist协议的外部表 # 启动服务 nohup gpfdist -p 8080 -d /../ & # 创建外部表 \c dw gpadmin set search_path to ext...d.objid JOIN pg_class AS v ON v.oid = r.ev_class JOIN pg_namespace AS ns ON ns.oid =...JOIN pg_class AS class ON views.ref_object = class.oid JOIN pg_namespace AS ref_nspace

7191 0

PG中的oid和relfilenode之间的关系

通常情况下可以在Pg_class表找到这个值，然而也会查考一些表的relfilenode为0.本文介绍这些表relfilenode的内部处理流程。...普通表的relfilenode PG中创建一个表后，会在系统被pg_class存储它的relfilenode值。下面例子，表创建后，OID和relfilenode都时16808。...剩余的表是pg_global表空间的shared表。 Pg_class表中的relfilenode字段告诉我们磁盘上存储的文件名是什么。...------ 1259 (1 row) postgres=# 通过调用pg_relation_filenode()，oid可以转换成relfilenode；通过pg_filenode_relation...Shared和nail表的oid和relfilenode之间的关系没有存储在pg_class表，PG如何存储这个映射关系呢？

1.6K2 0

PostgreSql 怎么获取数据库中关键系统信息（一）

如何通过SQL 的方式获得数据库中的一些关键信息，是一个DB最正常的工作，如何通过一些SQL来获得PG的一些关键的参数和信息或者是数据库中的一些信息是需要知道的一件事情。...以下是部分 1 一般来说每种数据库中都有一个或几个系统的数据库，在PG中schemaname 以 pg_catalog开头都是系统表，通过系统表我们就可以了解的大部分数据库系统所做的事情 1 查看当前所有的表...（用户表） SELECT relname FROM pg_class WHERE relname !...= t.oid 5 查询表的索引 SELECT relname, indkey FROM pg_class, pg_index WHERE pg_class.oid = pg_index.indexrelid...t ON c.conrelid = t.oid LEFT JOIN pg_class t2 ON c.confrelid = t2.oid WHERE t.relname = '表名' AND

1.2K5 0

Postgresql源码（48）namespace计算逻辑分析（不显示指定namespace）

按"$user", public场景来说，搜索顺序： 1、临时表 2、系统表 3、普通表（原因见下面recomputeNamespacePath函数分析） postgres=# show search_path...; search_path ----------------- "$user", public -- 优先级1：临时表 -- create temp table pg_class(i...int); pg_temp_3.pg_class -- 优先级2：pg_catalog pg_catalog.pg_class -- 优先级3：普通表 -- create table pg_class...但是一般我们只创建用户，不会默认带一个同名namespace的，所以这里经常查出来oid=0，不会记录到结果集中当前【public】在pg_namespace中查询到OID2200记录到oidlist中...RangeVarGetCreationNamespace 例如我创建表的时候没有指定namespace，那么创建表时就会有这样的参数进入RangeVarGetCreationNamespace： (gdb

9123 0

PostgreSQL创建表分析

表创建过程概述服务进程接受SQL语句，解析SQL语句取出其中定义的表名称、列名称检查表的名称和列名、列的数据结构打开pg_class表，返回一个未被使用的oid作为创建表的oid 基于表的oid...来创建表的磁盘文件针对新创建的表创造对应的对象类型在pg_class中注册新表的信息在pg_attribute中注册新表的colume信息关闭表的对应relation,同时返回oid 物理文件的创建函数执行路径...9.DefineRelation:返回一个表的ObjectAddr,其中包括pg_class中的oid,这个表对象的oid,这个表中column中的sub oid 10.heap_create_with_catalog...:实际的执行标创建的函数 14.RelationCreateStorage:构建磁盘的表文件 // 如果是根据tablespace oid,database oid,table oid创建一个数据库表...); // 从pg_class表中针对当前表返回一个可用oid relid = GetNewRelFileNode(reltablespace, pg_class_desc,

1.7K3 0

PostgreSQL可拔插存储引擎表定义机制

2、如果创建表时没有指定使用表访问方法，那么会使用默认的表访问方法，即heap 3、调用get_table_am_oid根据表访问方法名获取对应的oid，即pg_am的oid字段： 1）先从SysCache...、向pg_class系统表插入一条元数据tuple： 5、需要先判断创建的表是否已存在：从SysCache[RELNAMESP]hash表检索，缓存pg_class_relname_nsp_index；...或者从pg_class顺序扫描：relname和relnamespace 6、调用heap_create函数进行初始化表访问方法和创建磁盘物理文件 7、调用AddNewRelationTuple向pg_class...1）申请Relation结构体空间并初始化 2）rel->rd_rel即pg_class的一个tuple信息申请空间并初始化 3）将pg_am的oid字段值保存到rel->rd_rel...打开smgr信息，即控制IO层 11、rel->rd_tableam->relation_set_new_filenode创建物理文件，通过rel->rd_tableam得到表访问方法api。

1.3K1 0

史上最全：PostgreSQL DBA常用SQL查询语句（建议收藏学习）

.oid; 按占空间大小，顺序查看所有表的大小 select relname, pg_size_pretty(pg_relation_size(relid)) from pg_stat_user_tables...;对于Schema来说，允许查找该Schema下的对象;对于序列来说，允许使用currval和nextval函数;对于外部封装器来说，允许使用外部封装器来创建外部服务器;对于外部服务器来说，允许创建外部表...查看表上存在哪些索引以及大小 select relname,n.amname as index_type from pg_class m,pg_am n where m.relam = n.oid and...m.oid in (select b.indexrelid from pg_class a,pg_index b where a.oid = b.indrelid and a.relname = '...b.indexrelid from pg_class a,pg_index b where a.oid = b.indrelid and a.relname = 'cc'; select pg_get_indexdef

10K1 2

【赵渝强老师】史上最详细的PostgreSQL体系架构介绍

和表的oid分别存放在pg_database,pg_class表中。...可以通过下面的方式来查看当前数据库的Schema\dn段-segment一个段是分配给一个逻辑结构（一个表、一个索引或其他对象）的一组区，是数据库对象使用的空间的集合；段可以有表段、索引段、回滚段、临时段和高速缓存段等...例如，数据库的OID存储在pg_database系统表中，可以通过下面的语句进行查询。...select oid,datname from pg_database;而数据库中的表、索引、序列等数据库对象的OID则存在了pg_class系统表中，例如可以通过下面的语句查询前面创建的testtable1...文件名以OID命名，对于超出1G的表数据文件，PostgreSQL会自动将其拆分为多个文件来存储，而拆分的文件名将由pg_class中的relfilenode字段来决定。

1771 0

Postgresql INDEX HOT 原理与更好的 “玩转” INDEX

下面是经典的两个图，1 如果没有 HOT 的情况下 2 使用HOT 的情况所以结论是POSTGRESQL 在频繁的UPDATE 当中，如果更新的字段是索引的情况下，将引发大量的索引更新，引起...= 'btree' and s.leaf_fragmentation > 0 and s.leaf_fragmentation 'NaN'; 通过上面的语句去查询你索引的碎片率，通过这个来决定你的是否要进行索引的重建的工作...除此以外，我们还可以针对索引做如下的一些工作 1 在Postgresql 中创建针对索引的表空间，数据和索引进行分离，而不要将索引和数据创建在一个数据文件内。...pg_index x ON c.oid = x.indrelid INNER JOIN pg_class i ON i.oid = x.indexrelid LEFT JOIN pg_namespace...2 通过 pg_stat_user_tables 表中的 seq_scan 和 idx_scan 两个字段的数值的对比来发现问题，如 seq_scan 疯狂的增加数字，而idx_scan 里面不增长或增长很慢

1.1K4 0

PostgreSQL 建立一张表到底会产生多少文件

,relname,relfilenode from pg_class where relname = 'testdata'; -[ RECORD 1 ]--------- oid | 16724...relname | testdata relfilenode | 16724 test=# select oid,relname,relfilenode from pg_class where...我们通过下面的例子来看一下，testdata ，由主数据文件 16724，主键文件 16730， toast 文件 16728 ,以及二级索引文件 16734 组成。...,relfilenode from pg_class where relname = 'testdata'; select oid,relname,relfilenode from pg_class...,relname,relfilenode from pg_class where relname = 'testdata'; select oid,relname,relfilenode from

2243 0

Greenplum数据库巡检报告

31 5.1.4.1 分布键说明 31 5.1.4.2 修改分布键 31 5.1.4.3 对表进行重新创建 31 5.2 检查膨胀率过高的表 32 5.2.1 查看schema下的AO表 32 5.2.2...此索引的表的OID indexrelid oid 该指数的OID schemaname name 此索引所在的架构的名称 relname name 此索引的表的名称 indexrelname name...此索引的表的OID indexrelid oid 该指数的OID schemaname name 此索引所在的架构的名称 relname name 此索引的表的名称 indexrelname name...，数据库会按照此参数指定大小进行分片排序，将中间结果存放在临时文件中，这些中间结果的临时文件最终会再次合并排序，所以增加此参数可以减少临时文件个数进而提升排序效率。...在默认情况下，一个SQL查询最多可以创建 100000 个溢出文件，这足以满足大多数查询。该参数决定了一个查询最多可以创建多少个溢出文件。0 意味着没有限制。

2.5K10 2

PG中的WAL：1 buffer cache

缓存中的哈希表用于快速找到您需要的页面。在cache中查询一个页当一个进程需要读取一个页面时，它首先试图通过哈希表在缓冲区缓存中找到它。文件OID和文件中的页号用作哈希键。...我们可以看到哪些表在我们的数据库中被缓存了，这些数据被使用得多频繁(通过“频繁使用”，在这个查询中使用计数大于3的缓冲区是指): => SELECT c.relname, count(*) blocks...(*) FILTER (WHERE b.usagecount > 3) / pg_table_size(c.oid) ) "% hot" FROM pg_buffercache b JOIN pg_class...临时表临时表是普通规则的例外。因为临时数据只对一个进程可见，所以在共享缓冲区缓存中不需要它们。此外，临时数据只存在于一个会话中，因此不需要针对故障的保护。...与共享缓冲区缓存不同，本地缓存的内存是根据需要分配的，因为临时表在许多会话中很少使用。单个会话中临时表的最大内存大小受temp_buffers参数。

9103 0

PostgreSQL 使用递归SQL 找出数据库对象之间的依赖关系 - 例如视图依赖

背景：在数据库中对象与对象之间存在一定的依赖关系，例如继承表之间的依赖，视图与基表的依赖，主外键的依赖，序列的依赖等等。...另外一方面，如果需要重建表，使用重命名的方式是有一定风险的，例如依赖关系没有迁移，仅仅迁移了表是不够的。...10; 创建一个解析函数，得到依赖的OID -- 注意下search_path，下面建的function都是只能在指定的search_path下访问到。...t2 where t1.relnamespace=t2.oid and t1.oid=tbl) as ori_oid from pg_class t1, pg_namespace t2 where t1..., c.nspname ori_nspname,b.relname ori_relname from a,pg_class b,pg_namespace c where a.ori_oid=b.oid

1.4K4 0

PostgreSQL技术大讲堂 - 第24讲：TOAST技术

建表时自动创建Toast表 --创建表 create table toast_t(id int,vname varchar(48),remark text); --其中remak数据类型是text，列值长度超过...--查看tost表的oid testdb=# select relname,relfilenode,reltoastrelid from pg_class where relname='toast_t1...属性：存储TOAST表的实际数据 --查看tost表oid testdb=# select relname,oid,rreltoastrelid from pg_class where relname...Toast表，两者的关联是通过pg_class里的OID去关联的 · Toast表的计算案例(一) testdb=# create table toast_t(id int,vname varchar(...数据没有被更新时，不用去更新Toast表 Toast表的缺点 1.对大字段的索引创建是一个问题，有可能会失败，通常不建议在大字段上创建，全文检索是一个解决方案 2.大字段的更新会有点慢，其它DB也存在相同问题

3052 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭