1回答
我有一个mysql数据库，每年增长@ 45-50%。在过去的几年中，它的规模已经增加到了相当大的数量，现在在生产中造成了性能问题。
在测试环境中对其进行分析时，我发现有一个表，它有大约20列，4-5列类型为longtext。它有大约180万条记录，并且经常被应用程序访问。我已经浏览了许多mysql性能博客，并且感觉到垂直分区在本例中可能会有所帮助，因此我想尝试一下，用一个表中的所有logntext列和另一个表中的其他列，通过主键映射两个表中的所有logntext列来手动拆分表，并观察到相同查询的性能提高了80%，这导致了问题的出现。
现在，我不确定我是否能够在不手动破坏表的情况下实现数据库级别
浏览 8提问于2014-04-02得票数 1
回答已采纳
2回答
在mysql中对数据库表进行分区时，如何访问/查询各个分区？
编辑
回应@Crack的评论。
因此，当分区位于表中时，我仍然会使用普通的查询。在查询的数据库端，“剪枝”从何而来？那么，它几乎是一个应用于每个查询的复杂存储的Where子句吗？如果没有单独访问分区，为什么要命名这些分区？
浏览 2提问于2012-04-05得票数 3
回答已采纳
2回答
分别测量关键分区表和普通表的性能。但是我们找不到分区的任何性能改进。查询被修剪。
在RHEL4上使用MySQL 5.1.47。
表详细信息：
UserUsage -将有每个日期的用户手机号码和数据使用条目。手机号码和日期作为PRI密钥。
UserProfile -查询上一张表并存储每个移动号码的摘要。手机号码PRI密钥。
CREATE TABLE `UserUsage` (
`Msisdn` decimal(20,0) NOT NULL,
`Date` date NOT NULL,
.
.
PRIMARY KEY USING BTREE (`Msisdn`,`Date`)
) ENGINE=I
浏览 1提问于2010-05-26得票数 1
1回答
Presto如何使用关系数据库
、、、、
我正在努力学习PrestoDB，我有一个MySql数据库。这个数据库只是一个相对较小的数据库，我正在使用它来理解presto如何使用JDBC连接。
我已经使用presto连接到一个Hive亚稳态，我了解它如何与ORC文件一起工作，以及presto工作人员如何接收数据并根据我的需要运行查询。
这张照片对我来说真的很清晰：
非常清楚并行化将如何与此模型一起工作。
但是在MySql连接中，如何将数据与关系数据库并行化呢？prest是否将表加载到员工，然后运行查询？
或者仅在MySQL中运行查询并创建结果的接口？
浏览 2提问于2017-04-11得票数 3
回答已采纳
2回答
在生产数据库上创建分区
、、、
我有一个运行良好的生产MySQL 5.1数据库，但我希望提高查询性能。我从来没有使用过分区，只是浏览了一下手册。
我有两个表涉及列上的复合键：
Bill_Num Bill_Date
我想在Bill_Date上创建分区。该表包括四年的记录。我想知道一个新的分区表将如何容纳未来几年？我还想知道是否需要更改现有查询中的表名，并将表名替换为新分区表名称？
浏览 0提问于2011-07-26得票数 5
回答已采纳
1回答
我已经将访问数据库迁移到MySQL数据库。特别是，在这个DB中，我有一个包含近500万行的表。该表上的大部分操作是查询(筛选器用于选择数据子集)。
我对表演感兴趣。MySQL DB的分区可以提高性能吗？在这种情况下，使用哪种类型的分区比较好？
编辑
我认为，最常用的“数据过滤器”将是日期。但通常情况下会采用更多的标准。
浏览 2提问于2012-10-04得票数 0
回答已采纳
1回答
我有一个大约8TB大小的MySQL表。正如你所能想象的，查询是可怕的。
我在想：
创建一个带有分区的新表
循环一系列查询，将数据转储到这些分区中。
但是这个循环需要提交大量的查询&每个查询都会非常慢。
有更好的方法吗？在原地重新划分生产数据库是行不通的，这似乎是个不错的选择，但速度缓慢。
有什么工具能让生活更轻松吗？而不是Python作业循环&提交作业？
提前谢谢
浏览 7提问于2022-06-03得票数 2
回答已采纳
1回答
很抱歉这么长的邮筒！
我有一个包含30个表(InnoDB引擎)的数据库。其中只有两个表，即"transaction“和" shift”相当大(第一个表有150万行，shift有23k行)。现在一切正常，我对当前的数据库大小没有问题。
但是，我们将有一个类似的数据库(相同的数据类型、设计、.)但是要大得多，例如，" transaction“表将有大约10亿条记录(每天约有230万笔事务)，我们正在考虑如何处理MySQL中这样的数据量？(读和写都很密集)。我阅读了很多相关的文章，看看Mysql (更具体地说，是InnoDB引擎)能否在数十亿张记录下表现良好，但我还是有一些问
浏览 0提问于2016-09-26得票数 3
2回答
我有一个包含大约850万行的MySQL Innodb表。表结构基本上如下所示：
CREATE TABLE `mydatatable` (
`ext_data_id` int(10) unsigned NOT NULL,
`datetime_utc` date NOT NULL DEFAULT '0000-00-00',
`type` varchar(8) NOT NULL DEFAULT '',
`value` decimal(6,2) DEFAULT NULL,
PRIMARY KEY (`ext_data_id`,`datetime_ut
浏览 5提问于2013-09-24得票数 1
回答已采纳
通用上下文
当使用非平衡的RANGE-partitioned MySQL表插入AUTO INCREMENT主键时，我希望能够判断插入是否导致MySQL以任何方式与我指定的分区以外的分区通信。这对于预算未来大规模数据加载的能力是有用的；有了这种保证，我可以更准确地预测将数据加载到数据库中的性能和硬件资源成本。
我正在使用MySQL 5.6。
特定上下文
假设我在MySQL (5.6)中有下表：
CREATE TABLE foo (
`id` bigint(20) unsigned NOT NULL AUTO_INCREMENT,
`data` varchar(6) COLLATE utf
浏览 3提问于2018-06-15得票数 0
回答已采纳
1回答
我有一个表，它包含大约5000万行，每个分区有500万行进行了分区。我手动将其划分为Table_1、Table_2、Table_3等，没有使用MySql的内置分区特性(使用分区关键字)，因为在对表进行分区时我不知道这个特性。
很多时候，我必须检索价值1000万的行，这意味着我必须查询两个分区的数据。
从一个表中检索整个数据(500万行)可能需要2-10秒，这是相当慢的。虽然在最初的查询之后，相同的查询非常快(几百毫秒)。
在我的情况下，使用内置的MySql分区功能来划分我的表(S)是否有助于更快地查询？
浏览 0提问于2019-02-02得票数 0
1回答
我使用的是MariaDB 5.5.44。我想要创建跨挂载分区存储数据的InnoDB表。
假设我已经挂载了分区/var/log/storage，如下所示：
/dev/sda2 6.5G 3.6G 2.6G 59% /
/dev/sda1 395M 32M 338M 9% /boot
/dev/sda6 5.3G 22M 5.0G 1% /var/log/storage
要创建表，我使用以下查询：
create table InnoDB_Test(a INT) DATA DIRECTORY='/var/log/storage/M
浏览 10提问于2016-01-20得票数 1
2回答
我有一个客户设计的系统，该表最初被认为在几年内不会超过10 to (可能是1000万行)。嗯，他们导入的信息比他们想象的要多得多，在一个月内，这个表现在达到了208 is (9亿行)。
我几乎没有使用MySQL的经验，而使用Microsoft SQL的经验要多得多。MySQL中有没有什么东西允许客户机让数据库跨越多个文件，从而使运行的查询不必使用整个表和索引？表中有一个字段可以很容易地拆分，但我不确定该怎么做。
我试图解决的主要问题是从这个表中进行检索查询。插入并不是什么大问题，因为它都是由后端服务完成的。我有一个测试系统，其中表大约为2 my (600万行)，我的查询所用时间不到一秒。当在生
浏览 2提问于2012-12-12得票数 1
2回答
我正在运行MySQL 5.1，并将网络日志中的数据存储到一个表中。有一个datetime列，我想在日间对其进行分区。每天晚上，我都会将前一天的新数据添加到表中，这就是为什么我希望白天进行分区。通常是几百万行。我想每天进行分区，因为MySQL查询通常需要20秒才能完成。
简单地说，我希望每天进行分区，因为用户可以点击日历来获取由一天的数据组成的web日志信息。数据跨越数百万行(一天).
我在许多分区文章中看到的问题是，您必须明确指定要为哪些值进行分区？我不喜欢这种方式，因为这意味着我必须每天晚上改变桌子，以增加一个额外的分区。是否有内置的MySQL功能来自动完成此操作，还是需要编写bash脚本/
浏览 1提问于2012-08-30得票数 2
回答已采纳
8回答
MySQL:建议的行数
、、、
考虑一个包含7列的索引MySQL表，该表经常被查询和写入。在通过将数据拆分到其他表中来提高性能之前，应该允许这个表包含多少行？
浏览 2提问于2008-09-20得票数 1
回答已采纳
MySQL innodb表，在datetime列上分区，基本上只是一个日志表。
当我试图重组或删除一个分区时(这需要一个独占的元数据锁)，我希望查询在几秒钟后超时并抛出一个错误，然后我可以捕捉到这个错误，然后重试/警告负责服务器的人/等等。有没有一个好的/简单的方法来做到这一点，或者我是否需要启动另一个线程来监视分区线程，如果花的时间太长就终止查询？
(背景:我们遇到了一个问题，所有对表的查询都会挂起“等待表元数据锁”。这被追踪到一个从未关闭的事务，防止每小时分区代码锁定表，同时阻止任何其他访问。出错的代码被修改了，但我希望分区系统在这种情况下还能正常工作。)
浏览 0提问于2015-01-20得票数 0
2回答
我们正在构建一个系统，其中10个表中的数据与帐户相关联。典型的表如下所示：
create table Things(
accountId varchar(64) not null,
internalId varchar(64) not null,
externalId varchar(256) as (concat(accountId, '-', internalId)) stored,
...
primary key (accountId, sourcedId),
unique (externalId),
foreign
浏览 0提问于2020-09-10得票数 2
回答已采纳
1回答
我在mysql中有一个拥有800万条记录的表。我想保存最后一周的数据，然后删除其余的数据，我可以进行转储并在另一个模式中重新创建这个表。I很难把查询做好，请分享您的观点和最好的方法来做this.Best删除，这样它就不会影响到生产中的其他表。
谢谢。
浏览 7提问于2010-09-13得票数 0
2回答
对不起，如果这是一个愚蠢的问题，但这是新的，所以需要一些帮助，以了解一些事情。我目前正在将mysql升级到5.1，这样我就可以在mysql中使用分区。我的问题是，如果我对一个表进行分区，一个分区表(包括修剪过程)是否仍然可以使用联接进行查询，或者如果您只是查询有分区的表，那么分区是否是最佳的呢？
编辑
下面是一个示例查询：
SELECT event.*,site.* FROM event INNER JOIN site ON event.siteid = site.id
WHERE event.eventdate >= [somedate] AND event.eventdate <
浏览 6提问于2011-06-22得票数 3
回答已采纳
2回答
我有一个MYSQL表，在年份上有分区，在月份上有子分区。
CREATE TABLE ptable (
id INT NOT NULL AUTO_INCREMENT,
name varchar(100),
purchased DATETIME NOT NULL,
PRIMARY KEY (id, purchased)
)
PARTITION BY RANGE( YEAR(purchased) )
SUBPARTITION BY HASH( MONTH(purchased) )
SUBPARTITIONS 12 (
PARTITION p0 VALUES LESS
浏览 5提问于2011-12-07得票数 1
1回答
我在我的应用程序中使用MySql Engine=InnoDB。有一个表，它收集来自不同位置的搜索数据，并保存以供处理。经过一段特定的时间间隔后，我们使用调度程序删除该数据。当我们删除大量的行时，就会出现问题，它不能释放磁盘空间。我们已经启动了innodb_file_per_table。一个解决方案是运行一个查询：
Optimize Table <TableName>
但是，这会导致该特定表上的其他Select操作失败，说明：
原因: java.sql.SQLException：表定义已更改，请重试com.mysql.cj.jdbc.exceptions.SQLError.cre
浏览 1提问于2019-03-05得票数 0
我有一个表，大约有190万行，而且还在不断增长。我对这些数据运行了一些相当复杂的查询。活动数据通常聚集在表的末尾--也就是说，只有最近的n%的记录倾向于定期访问，尽管对于不太常见的情况，需要在同一个表中提供其余的数据，以便人们查看较旧的记录。
对于那些有MySQL分区经验的人来说，这个表看起来像是分区的一个很好的候选吗？或者它只是太小了，不能获得太多收益？
谢谢,
贾里德
附注：我在stackoverflow上寻找一个问题来回答这个问题，但没有找到任何非常合适的问题。
浏览 0提问于2013-12-02得票数 1
我必须在MySQL中存储一些序列编号的数据。在大约10年的时间里，我每天大约有30万个数据项。假设表结构只是序号(大int)和数据( varchar)。我要做的一个非常常见的查询是对所有数据进行一天的查询，按序列号排序。
每天将数据存储在一个表中非常有效。从一个表中查询所有数据需要0.8秒(这是可以接受的)，而按序列号添加顺序则需要1.0秒(仍然可以接受)，但这确实会导致大量的表，而我希望这些表的数量更少。
每月存储在一个表中(并添加一个索引的日号字段)，获取一天数据的时间增加到1.6秒(不是很大)，但是按天数添加分区将使数据减少到0.8。
然而..。当我将order序列号添加到分区表查询中时
浏览 0提问于2013-05-12得票数 2
我有transactions表，其中按客户端ids进行分区(当前将有4个客户端，因此有4个分区)。现在，如果我在(1,2)中查询客户端id，与在表上不使用分区的情况下使用相同的查询相比，是否存在性能问题？我听说mysql会为每个分区维护单独的文件系统，所以在分区表中查询需要在内部打开多个文件，查询速度会变慢。这是正确的吗？
浏览 4提问于2017-06-09得票数 2
假设我有两个场景，具有相同的数据量，例如一个表有500行。首先，我使用一个查询来查询已分区的MySQL表，并让MySQL引擎的其余逻辑获得我的结果。
在第二个例子中，我创建了5个最多100行的表。然后，我以编程方式遍历这些表，直到找到记录，如下所示(伪代码)：
fetchedData = query table1
if fetchedData == null
fetchedData = query table2
if fetchedData == null
...
fetchedData = query table5
我看到的主要缺点是，我可能
浏览 1提问于2016-10-05得票数 0
我一直在关注这篇关于如何使用Hive分析推特数据的文章：
我已经设置了flume来收集twitter数据并写入HDFS。我已经设置了一个指向相同HDFS位置的配置单元表。
当我在配置单元中运行类似这样的命令时:从推文中选择entities.user_mentions.screen_name；
我得到的响应如下: OK Time Time: 0.16秒。
无论我运行什么查询，我都得不到任何结果。
由于我不熟悉配置单元，我是希望在配置单元命令行中看到结果，还是必须从mySQL中挖掘结果。mySQL是metastore。
浏览 0提问于2016-11-14得票数 0
1回答
我们有一个mysql跟踪数据库，它有大约1亿行。我们通常每天为特定的操作、唯一的访问等运行查询组。问题是，由于索引之间的相互作用，查询生成月度报告的速度越来越慢(我们对日期进行范围扫描，然后基于多个其他字段进行查询)。
为了提高性能，我们已经切换到基于日期的联合，以避免范围扫描，并且性能要好得多。因此，人们提出了这样的想法:也许我们应该每天用一张不同的桌子来分解。好处似乎是：
快速插入--每天桌子都是新的/小的，所以总是快的。
删除旧数据很简单(与其从100米行表中删除5米行，我们只需删除一个表)
我们目前的方法是做联合-所以我们只是联合不同的表，而不是不同的值从一个表。
浏览 2提问于2014-09-07得票数 7
回答已采纳
我是一个新的数据工程师，最近我为BI团队和mysql的工具访问数据部署了自己的apache超级集。问题是mysql数据有一些表用于保存原始日志，因此它在超级集中进行一些超时查询。
我可以通过在超级集和mysql之间设置Presto来加速apache的超级集查询吗？
浏览 3提问于2022-06-22得票数 0
1回答
我有7-8个表在mysql数据库中。所有这些表都有十亿条记录。表的大小从1 5GB到5 5GB不等。
问题: 1. SELECT查询速度慢。需要30秒。到1分钟。用于复杂的SELECT查询。2. JOINS速度非常慢。
解决这个问题的替代技术有哪些？
如果我的问题太天真了，我很抱歉。我研究过Redis，但它不能工作，因为它只是一个键/值存储(连接不能执行)。
浏览 6提问于2015-05-18得票数 1
我是一名大学本科毕业生，致力于基于PHP和MySQL的库存管理系统，在全国范围内运作。其数据库规模预计每月将增加约100万项，目前的规模约为200万项。
我需要防止查询时间的指数增长，目前大多数模块的查询时间从7-11秒不等。
问题是，与以往的数据相比，上个月输入的数据的访问概率要高得多。因此，我认为基于数据输入时间的数据划分应该能够控制查询时间。所以我怎么能做到这一点。
具体来说，我希望有一种方法来缓存上个月的数据，以便每个查询都在具有最近数据的表中搜索产品，并且应该搜索其余的数据，以防在最后一个月的数据中找不到它。
浏览 4提问于2012-08-12得票数 0
回答已采纳
1回答
我们生产的MySql数据库生活在单一的数据分区上。除了数据库之外，在这个分区上真的没有别的东西。在那个分区上运行一个窗口碎片安全吗？MySql会锁定表，它能减慢查询时间吗？我们有Server 2008和MySql 5.1。
浏览 0提问于2011-06-23得票数 0
回答已采纳
我们有一个庞大的数据库。我们希望从Prod中删除前几个月的数据，并且只保留3个月的数据。我们还需要一个包含所有数据的报表DB。
例如:我们已经在单独的服务器上还原了报表DB上的完整Prod DB备份。现在，在每个月的第一天，我们希望从Prod恢复前一个月的报表DB数据。从01-2018年4月-2018年，我们将开始从Prod DB中删除最古老的月份数据。
我们正在计划使用MySql查询和PHP。我们将使用表日期字段从Prod获得备份，并在每个月对Report执行SQL查询。但这是正确的方法吗？
MySQL是否以有效的方式提供了实现这一目标的工具。
编辑：
我想知道，是否有类似于master/s
浏览 0提问于2018-01-02得票数 0
回答已采纳
2回答
在我的HDFS中，我通过date和event_id对数据进行了分区，并拥有大约140万个拼板文件。今天，为了分析Apache中的数据，我使用spark.read.parquet("/path/to/root/")。这需要大约30分钟来列出文件，我每次都要这样做，而且越来越烦人。
现在，我想设置一个外部表，使用MySQL作为。我目前面临的是“知道”问题，在这个问题上，发现所有1.4分区需要花费很长时间。我们都知道，MSCK REPAIR TABLE my_table是不可能的。相反，我生成了一个长查询(约400 MB)，其中包含如下所示的查询
ALTER TABLE my_tab
浏览 6提问于2021-07-15得票数 1
1回答
我必须为不同的人群建立一种服务。该服务包含一个web门户和一个web服务(由智能手机查询)，其中将包含大量记录。每个种群都有自己的一组记录，很少有记录在种群之间共享。
每个人都会有自己的活动，新闻，用户..。许多用户将使用此服务，数据库表(将包含这些事件、新闻和用户)将迅速增长。此表中的选择将比插入多100倍。最后，我计划使用MySQL作为数据库引擎。
我的问题是建筑问题：
是否应该为所有的人群设置通用的表(一个表新闻，一个表事件)。)和允许过滤的列？还是每个人口拥有一个数据库更好(每个种群都有自己的事件表，自己的新闻表.)？如何处理共享对象，如果数据库每个种群的体系结构更加优化?
谢谢您的提
浏览 1提问于2011-06-28得票数 0
回答已采纳
1回答
我正在审查一个案例，其中200+列主要是varchar(100)。这些列来自多个外部数据源，如CRM /人口统计学数据等。我不能将它们保存在一个MySQL表中，因为列的数量在不断增加。
一般查询情况可能包含一个或多个垂直分区的列。
垂直分割它们是个好主意吗？加入他们的查询？
每个分区的大小应该是多少(列数)？以提高业绩。
最佳的连接匹配条件是什么？
MySQL版本: 5.7存储引擎: InnoDB
浏览 0提问于2018-03-27得票数 1
我在我的一个应用程序中使用MySQL数据库，其中一个表的大小约为10 am。我想从该表中删除符合条件的行。Delete查询的形式为：
Delete from table_name
where (a,b,c) in ((1,2,3),(1,5,6));
在字段(a，b，c)上有一个综合索引。查询需要几分钟来删除行，而我希望操作在几毫秒或几秒内完成。我如何才能做到这一点？字段上的单个索引会比多列索引快吗？
我的意思是，如果查询如下：
Delete from table_name
where a = 1 and (b,c) in ((2,3),(5,6));
这会带来更快的结果吗？
浏览 2提问于2017-02-14得票数 0
我们刚刚使用MySQL快照启动了一个Aurora实例。除了我们的分区表之外，一切看起来都很好。在每种情况下，分区表都会出现在SHOW tables输出中，但是如果我们从表中进行选择，或者运行DESCRIBE或SHOW CREATE table，我们会得到一个错误，指出该表不存在。如果我们试图从PHP客户端对任何分区的表运行查询，Aurora会抛出相同的错误。
如果我们运行使用Aurora数据库中的分区的CREATE TABLE语句，则该语句运行时不会出现错误。
迁移分区表有问题吗？有谁有过类似的经历吗？由于Aurora的设计考虑到了非常大的数据库，所以我假设其他人正在迁移分区表。
浏览 3提问于2014-12-19得票数 2
1回答
在我的MySQL集群中，4个数据节点的数据使用率约为77%。我在网上添加了一个新的数据节点，并尝试重新组织分区，以便在所有数据节点之间重新分发数据。
但在成功执行查询alter customer_tbl重新组织分区之前，现有数据节点的数据使用量开始增加，并在遇到错误customer_tbl之前达到95%。
如何将数据节点联机并成功地重新组织表？我的表有1亿行。
为什么现有数据节点的数据使用量首先会增加，以及mysql集群在重新组织分区时的内部工作原理是什么？
浏览 0提问于2013-04-03得票数 2
我有一个MySQL 5.7.16企业运行在一台Centos 6机器上，InnoDB是默认的存储引擎。我有大约300张桌子，其中大约90张是“列表”分区的。
我的服务器配置中有innodb_stats_on_metadata=0选项。
当我使用查询查询元数据时，
SELECT * FROM information_schema.TABLES WHERE TABLE_sCHEMA = 'mydb';
我可以看到列CREATE_OPTIONS对于一些非分区列是空的，对于一些非分区表是row_format=DYNAMIC，对于某些分区表是分区的，对于某些分区表则是row_format=
浏览 0提问于2017-10-05得票数 0
回答已采纳
2回答
我正在与一个网站分析器，将用于分析我们自己的网站，根据日志从tomcat。
现在，我们每天将日志从tomcat推送到数据库(MySQL)，它现在运行良好。然而，我发现了一个潜在和致命的问题！
到目前为止，我们将日志推到数据库中的单个表中，但是日志项很快就会增加，特别是当我们容纳更多的用户时，显然单个表无法保存那么多日志项(从大型表执行查询操作也会导致性能低下)。
我们使用hibernate作为持久化层，日志表中的每一行都映射到应用程序中的LogEntry的java对象。
我曾经想过每个月创建一个新表，但是如何使LogEntry映射到多个表并跨表进行查询呢？
另外，每个月的日志数可能不一样，一个
浏览 13提问于2010-11-04得票数 2
回答已采纳
我有一个包含100列的表，其中80%的列是nvarchar(max)，而且无法更改此数据类型，因为我是从MySQL text类型列获得这些数据的。这个表包含了将近30条记录，所以当我选择所有列时，显示记录集需要花费太多的时间。在这种情况下，我有兴趣将这个表更改为column store表，但是列存储不支持nvarchar(max)数据类型，现在我正在寻找如何设计该表的方法，这将有助于快速查询。
注意，我尝试过使用不同列的非集群索引，这在makig快速查询中也没有影响。如有任何帮助，将不胜感激。
浏览 1提问于2019-09-16得票数 1
1回答
我试图维护一个数据库，其中包含一个包含400亿行(7.2TB)的表在服务器上，使用InnoDB作为存储引擎，MariaDB使用MySQL 5.5。
当我的数据库达到大约2.5兆字节时，我无法按照生产所需的速度将数据插入到表中。表中的数据在24小时后很少被查询。该表有一个主键和一个辅助索引。在进行了相当多的研究之后，如果我要解决这个问题，了解InnoDB缓冲池似乎是至关重要的。这显然是太多的数据，不适合缓冲池。关于如何通过增加过去24小时内的概率数据来提高性能，我有一些想法，但是很难用这么多的数据来测试它们。在以下每一种情况下，InnoDB缓冲池将如何运行？有一个主意明显更好吗？还是他们都很坏？
浏览 0提问于2020-04-04得票数 2
对于按日期划分表，Postgres是比MySQL更好的选项吗？
Postgres如何处理Rails，以及如何处理分区表？
我的应用程序的目的是以类似于Google的方式提供度量标准。数据不是实时收集的，所以不强调快速插入，但是将会有数百万行，最近的数据被访问得最频繁。
还有几个要点。
application.New数据库复制和备份是，而不是，它与开发的方便程度一样重要，而且可以在空闲时插入数据的速度。数据库将主要用于选择查询。服务器将是一个Debian 6盒，运行Rails 3.1和Ruby1.9.3
浏览 2提问于2011-11-24得票数 2
我正在使用Java和mysql维护一个web项目。
一个mysql表有超过1000万条记录，我按日期对表进行了分区，以便减少每个分区中的行数。索引也会根据查询正确添加。
在大多数查询中，只使用前1或2分区，而这些使用的分区中的记录之和小于200 m，它仍然非常快。
但是，有些查询需要加载10个以上的分区才能完成一些静态操作，因此单个查询涉及超过10m条记录，这是相当慢的，而且随着数据的增长，情况会变得更糟。
表的一部分：
id(int), amount(double), type(varchar), user_id(int), event_date(timestamp)
-- `id` is
浏览 4提问于2015-03-07得票数 0
回答已采纳
1回答
我有一个包含2000万行的MySQL表。查询此数据库花费的时间太长。数据库格式如下：
Column Column Column Sector
data data data Retail
data data data Utility
data data data Retail
data data data Insurance
data data data Retail
data data data Agriculture
da
浏览 0提问于2016-06-14得票数 3
回答已采纳
我在想，如果我按日期划分一个表，然后按主键进行一些选择或更新查询，mysql会怎么做呢？
它是要搜索所有分区还是查询优化器知道在哪个分区中保存行？
其他唯一的而不是唯一的索引列呢？
浏览 2提问于2020-08-19得票数 0
回答已采纳
因此，为了解释我的用例以及我被困在哪里：
我正在将Mysql复制到一个DynamoDB实例。在DynamoDB中，表如下所示：
分区键是record_index，排序键为meterId。
我想要做的是调优我的API，该API查询Mysql并写入DynamoDB：
查询最后编写的DynamoDB (在Mysql中是增量的最高数字)，使用该record_index结果作为查询Mysql的起点，然后将结果写入DynamoDB表。
实际上，我正在尝试创建一个只编写增量数据的API。
我已经谷歌和谷歌，找不到一个扫描或查询，将导致我需要什么。
有什么建议吗？
浏览 0提问于2018-06-18得票数 0
回答已采纳
3回答
在我们针对每个查询的应用程序中，我们构建一个唯一的查询id，并根据这个查询id插入到表中。我们过去经常用蜂巢来做这个，这很容易；
create table hivetable (
...
)PARTITIONED BY ( query_id INT ) ...
插到桌子上是这样的：
alter table hivetable add partition (query_id=?);
insert into hivetable partition(query_id=?) select ...;
现在我们正在迁移到MySQL，我很困惑。我试着在下面的桌子下面插入如下：
create table m
浏览 5提问于2021-10-18得票数 1
回答已采纳
8回答
如何在MySQL中从分区中选择行
、、、、
我对300MB的表进行了分区，并尝试使用以下命令从p0分区进行select查询
SELECT * FROM employees PARTITION (p0);
但是我得到了以下错误
ERROR 1064 (42000): You have an error in your SQL syntax;
check the manual that corresponds to your MySQL server version for the right syntax to use near '(p0)' at line 1
如何编写select查询从特定分区获取数据？
浏览 10提问于2013-01-02得票数 11
回答已采纳
我有一个用例，我的每个查询都有这个过滤器date和country，所以我希望有一个表，在这个表中，我可以在每个日期分区下按日期划分它，我可以按国家划分/分组。因此，所有查询都将是非常快的insert、update和delete。
对于MYSQL，我可以看到这一点，我可以使用PARTITION和SUBPARTITION子句，但是Postgresql支持这个吗?我找不到任何直接的解决方案？
在这个场景中，哪一个最适合，因为我的数据包含5亿行，而且我需要为其他2-4列创建索引？
浏览 0提问于2023-05-11得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
腾讯会议活动推荐
腾讯云开发者
