腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(1102)
视频
沙龙
1
回答
Dataframe
写入
Postgresql
性能
不佳
、
、
、
、
在
postgresql
中工作时,我有一个笛卡尔连接,产生了大约400万行。连接大约需要5秒,写回数据库大约需要1分钟45秒。在python中需要使用这些数据,特别是在pandas
dataframe
中,因此我正在尝试在python中复制相同的数据。我应该在这里说,所有这些测试都在一台机器上运行,所以没有任何东西通过网络。(再次使用sqlalchemy) (https://pandas.pydata.org/pandas-docs/stable/reference/api/pandas.<e
浏览 22
提问于2019-04-02
得票数 3
1
回答
PostgreSQL
PostGIS vs ElasticSearch空间搜索
、
、
、
我们有
PostgreSQL
和ElasticSearch作为我们基础设施的一部分,我正在评估使用这两个中的哪一个。我不是在问“哪个更好”,而是一个客观的利弊列表,在实现的简易性、
性能
、可伸缩性等方面都会有所帮助。
浏览 2
提问于2014-04-18
得票数 16
1
回答
PostgreSQL
查询的
性能
不佳
、
、
、
在这种情况下,问题不是
postgresql
/ ubuntu服务器配置,而是显示适配器的问题。 我是对的还是在错误的方向上寻找?数据库是一个
PostgreSQL
9.1 (带有PostGIS),该表包含大约60.000行。这显然是一个配置问题,但我有点困惑它是
PostgreSQL
还是Ubuntu的配置问题。我已经尝试过使用
PostgreSQL
的conf文件(kernel.shmmax、shared_buffers等),但是没有结果。
浏览 1
提问于2013-09-18
得票数 3
1
回答
PostgreSQL
针对多租户应用程序的模式
、
、
、
、
我正在学习应用程序,以及如何使用
PostgreSQL
的模式来实现这一点。似乎只有一个模式(在租户之间共享表)会比每个租户有一个单独的模式带来更好的
性能
。但这对我来说很奇怪。为什么将数据分隔在许多小表中(在多个模式中),而将数据分隔在几个大型表中(在单个模式中)时,
性能
会更差?
浏览 2
提问于2017-06-13
得票数 48
回答已采纳
3
回答
我应该使用UUID还是其他什么的?
、
、
、
、
通常,我有一个任务,需要收集一个对象,并且在保存到DB (
PostgreSQL
)之前,我需要知道它是ID。我可以用UUID来做这件事,但是它有很多缺点: ,所以问题是:如何预先为对象生成一个ID,并尽量减少UUID的负面后果?
浏览 5
提问于2017-02-07
得票数 3
回答已采纳
2
回答
Nodejs - SQL查询在单独的文件中?
、
我想从数据库中的JSON对象中
写入
数据。我想将SQL逻辑与业务逻辑分开。在您看来,哪种方法是最佳实践?你能提供一个小例子吗?
浏览 0
提问于2018-01-01
得票数 7
3
回答
MySQL &
PostgreSQL
中的聚类索引
性能
考虑
、
、
、
、
在MySQL/InnoDB中,聚集索引与主键同义,因此获取一个糟糕的主键会影响您的db
性能
,即使用UUID,因为PK是数据库
写入
的
性能
杀手。现在,在
PostgreSQL
中,没有像MySQL那样的集群限制。如果我选择UUID作为PK,会产生什么影响?数据库写
性能
杀手是否也存在于
PostgreSQL
中,就像在MySQL中一样?
浏览 0
提问于2015-01-13
得票数 4
1
回答
pyspark
dataframe
.write()中的批处理大小选项不起作用
、
、
我正在尝试将数据从pyspark
写入
postgresql
DB。我使用了batchsize 1000,pyspark
dataframe
中的总数据是10000。但是在
postgresql
中进行的插入并不是批处理的。它是一个接一个地插入数据。下面的代码用于
写入
DB df.write.此选项对
POSTGRESQL
Db有效吗?
浏览 4
提问于2019-11-11
得票数 0
2
回答
如何从Azure
PostGreSQL
-PaaS分析低
性能
我遇到Azure
PostGreSQL
-PaaS的
性能
不佳
问题,需要帮助了解如何继续。我们的应用程序在Azure-VM中运行,并且VM和数据库都位于西欧。虚拟机和数据库之间的网络似乎运行正常。(在数据库端口5432上使用psping (来自Sysinternals),我得到的延迟在2ms到4ms之间)
PostGreSQL
集成了一个名为pgbench的基准
浏览 3
提问于2019-02-13
得票数 7
1
回答
如何合并clickhouse和
postgresql
查询?
我正在使用Apache zeppelin,我可以分别从postgres和clickhouse获得结果。但是我需要合并这两个查询。
浏览 31
提问于2019-01-29
得票数 1
1
回答
将大量数据插入到
PostgreSQL
中
、
、
我有一个SpringBoot项目,它将从一个数据库中提取大量数据,对其进行某种转换,然后将其插入到
PostgreSQL
数据库中的一个表中。这个过程将持续数十亿条记录,因此
性能
是关键。关于批量插入到
PostgreSQL
中,我经常看到的一件事是COPY命令。 我很困惑,因为使用复制需要将数据
写入
文件中,而当我看到人们说要使用它时,我还没有遇到有人提到如何将数据
写入
文件的情况。如果
写入
文件的速度很慢,那么复制所带来的
性能
提升是否就像根本没有增益一样?
浏览 3
提问于2018-12-06
得票数 1
1
回答
PostgreSQL
数据库查询队列机制
、
、
我有一个PHP应用程序,它的Postgres数据库,它获得了很多查询第二(300-600)。数据库服务器效率不高,所以我会得到很多查询超时。在数据库上运行查询之前,是否有任何机制可以生成查询队列?我认为它是一个proccess/deamon,它从队列中获取50个查询,在数据库上运行它们,等待所有这些查询的完成,并得到接下来的50个查询,等等。
浏览 3
提问于2014-02-09
得票数 1
2
回答
嵌套SQL查询优化
、
有没有更好的方法来编写这个要优化的查询? SELECT * FROM data d FROM data d1 AND d1.version='2') 我不太擅长SQL。
浏览 23
提问于2021-01-11
得票数 0
4
回答
对于大数据,open的
性能
很差。
、
、
使用有24列的模板,在8分钟内将xml
写入
20k行到excel文件。我必须提高这种成绩,所以我必须找出错误的东西。模板文件会导致
性能
不佳
。但它没有任何宏观。导致
性能
不佳
的原因将是一个缺陷。如何使用Open来提高
性能
,或者您是否有任何建议:编写大型数据到excel的最佳库是什么?
浏览 4
提问于2013-12-29
得票数 0
2
回答
“组->摘要->意味着()”花费的时间比预期的长。
、
、
、
、
我的代码如下: group_by(user_id, date) %>% summarise(delay = mean
浏览 0
提问于2021-07-07
得票数 3
回答已采纳
2
回答
高效查询分组中的第一个结果(
postgresql
9)
、
、
、
我正在使用
PostgreSQL
9。
浏览 0
提问于2012-11-23
得票数 0
回答已采纳
2
回答
自动
PostgreSQL
从CSV或Pandas
DataFrame
创建表和插入
、
、
、
、
有人知道一些Python包或函数可以将Pandas
DataFrame
(或简单地说是.csv)上传到
PostgreSQL
表,,即使该表还不存在?(也就是说,它根据python数据类型与
PostgreSQL
中最接近的等价物之间的映射,运行一个具有适当列名和列类型的CREATE表) 在R中,我使用了ROracle包,它提供了一个dbWriteTable
浏览 1
提问于2014-01-08
得票数 3
回答已采纳
2
回答
按
postgresql
的顺序、偏移量和限制优化SELECT查询
5620 8x2.40GHz+HTSSD Intel X25-E Extreme 64GB 最后,我可以超过300万条消息,我必须按照通配符的建议优化
postgresql
浏览 2
提问于2012-11-24
得票数 3
回答已采纳
4
回答
向TimescaleDB
写入
verneMQ数据
、
有没有办法将所有收到的消息存储到VerneMQ中的TimescaleDB中?
浏览 35
提问于2020-03-09
得票数 0
1
回答
pandas to_sql不能改写类型'dict‘
、
、
、
我必须将pandas数据帧
写入
PostgreSQL
表。在这里你可以找到一段代码: values = [1, 1]df = pd.
DataFrame
(data=d) df.to_sql但是,随着记录数量的增加,
性能
会下降。 我该如何解决这个问题?谢谢!
浏览 105
提问于2021-04-08
得票数 0
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
让 Pandas DataFrame 性能飞升 40 倍
Firefox Snap 性能不佳,Ubuntu:在改了!
PostgreSQL 已包含对 LLVM JIT 支持的提交 性能将飙升
PostgreSQL 11 首个测试版发布:引入 JIT ,性能再提升
PostgreSQL 11 继续带来更多性能提升,正在为 JIT 发力
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
云直播
活动推荐
运营活动
广告
关闭
领券