mysql跳过错误继续运行

基础概念

MySQL跳过错误继续运行是指在执行SQL脚本或批量插入数据时，当遇到某些错误（如违反主键约束、唯一性约束等）时，MySQL能够忽略这些错误并继续执行后续的操作。

优势

1. 提高数据导入效率：在批量导入大量数据时，如果某些记录因为违反约束而失败，跳过这些错误可以避免整个导入过程因单个错误而中断，从而提高效率。
2. 灵活性：允许跳过错误可以让数据库管理员或开发人员根据具体情况决定哪些错误是可以容忍的，哪些是需要处理的。

类型

1. IGNORE关键字：在执行INSERT语句时，可以使用IGNORE关键字来忽略错误。
2. IGNORE关键字：在执行INSERT语句时，可以使用IGNORE关键字来忽略错误。
3. SET SESSION sql_mode：可以通过设置会话级别的SQL模式来忽略某些类型的错误。
4. SET SESSION sql_mode：可以通过设置会话级别的SQL模式来忽略某些类型的错误。

应用场景

1. 数据导入：在从外部系统导入数据时，可能会遇到一些不符合数据库约束的数据，使用跳过错误的方式可以确保大部分数据能够成功导入。
2. 数据清洗：在对现有数据进行清洗或更新时，可能会遇到一些异常数据，使用跳过错误的方式可以确保其他正常数据的处理不受影响。

遇到的问题及解决方法

问题：为什么使用IGNORE关键字后，某些错误仍然导致事务回滚？

原因：虽然使用了IGNORE关键字，但如果错误发生在事务中，并且该错误被MySQL视为严重的（如表损坏），事务仍然会回滚。

解决方法：

1. 检查错误类型：确保错误类型是可以被忽略的。
2. 分批处理：将数据分批导入，每批处理一个小事务，这样可以减少单个事务中的错误影响范围。

问题：使用IGNORE关键字后，如何查看哪些记录被忽略了？

原因：IGNORE关键字会默默地忽略错误，不会返回任何关于被忽略记录的信息。

解决方法：

1. 使用INSERT ... SELECT结合LEFT JOIN：通过左连接查询来检查哪些记录没有成功插入。
2. 使用INSERT ... SELECT结合LEFT JOIN：通过左连接查询来检查哪些记录没有成功插入。
3. 记录日志：在执行插入操作时，将所有记录和错误信息记录到日志文件中，以便后续分析。

参考链接

• MySQL官方文档 - INSERT IGNORE
• MySQL官方文档 - SQL Modes

通过以上方法，可以有效地在MySQL中跳过错误并继续运行，同时确保数据的完整性和导入效率。