我试图在MySQL中批量插入500万条记录,但得到了ActiveRecord::StatementInvalid: Mysql2::Error: closed MySQL connection错误。我正在使用延迟的作业来批量插入500万条记录到数据库中。出于测试目的,我点击了5个HTTP请求,每个请求都包含将100万条记录批量插入数据库的请求,因此总共有500万条记录将被插入到数据库中。我正在运行5个延迟作业的实例来执行批量<
我在数据库中运行一些update查询,这些查询批量更新记录,还有一些更新每行。在某些时候,我看到MySQL连接队列变满,并且不允许更多到MySQL的连接。我不知道是哪个查询在这么做,因为这是在瞬间发生的,我想通过show full processlist或其他方法来查看数据库中发生了什么。
除了更新应用程序中的一些逻辑,这是非常耗时的。