近期需要大批量的导入数据到oracle数据库，经过同事处理后，将数据转为.sql 文件并交给数据组同事处理，数据组同事在处理数据时发现数据无法导入，并提示 

 的错误信息。在此基础之上，开始针对数据做进一步的检查。

也咨询了如何将大批量数据导入到数据库中，微信群的大佬给出了一个解决方案。这里也要感谢 —— 青

 这位大佬。其实，在我还未搞清楚数据源头以及目标数据，便开始了寻求解决方案。不过从数据处理同事这边看到一些端倪，这数据量预估了下——32G，也算是一个不小的数据，为此我还专门将同事的数据在本地使用navicat直接导入到oracle库，不过我只是导入一部分来作为测试（效果不是很理解，很慢）。即使是方案可行，但是这边由于环境限制无法进入到服务器，只能使用远程工具连接导入数据，所以这条路也被堵死了。不过，倒是学会了一种导入数据的方式。

数据组同事提供了如下截图，并告知使用Navicat来将 

导入到oracle数据库。一开始，数据处理同事提供的是经由 mysql数据库导出来的 .sql 文件，所以才会出现上述问题。为了更好的理解，我将上述事情的原委在下方流程中画出来了。其实这里应该也能看出一二，那就是从MySQL中导出来的数据文件并不能通过Navicat工具直接导入到oracle。

在得知上述流程之后，我感觉近期脑子是不好用了，其实上述流程可以不用再费事转换，直接将CSV文件导入到Oracle库中，岂不是便捷？这主要取决于使用Navicat工具的熟练程度，而非技术性问题。

经过自己本地测试以及咨询数据导入的同事，此种方案可行。为了更清晰准确的验证我的想法，我索要了oracle库中目标表的表结构并在本地创建了测试表。在测试过程中也出现了一些问题，我将在下一篇讲述。

目标数据导入同事这边导入数据的最终结果如下：

我协助同事导入数据这件事情，更准确的来说，当我拿到这个需求，领导也提出了她想要的结果，当按照领导的要求来做无法实现时，或者实现步骤比较繁琐时，可以适当的思考下，为什么要这么做，一定要这么做吗？还是基于他们已有的经验来说，非得这么做不可呢？

数据导入的方式有很多种，选择适合的一种方式或者选择适合当前环境的一种的方式来处理数据，可以根据数据的来源、格式以及数据量的大小选择适合的方法，最终将数据导入到目标库。

这里也想说说，作为一名软件开发人员，了解并熟悉一些软件开发工具是一种硬性要求，例如在导入数据时，根据不同的库或者工具进行选择：

PL/SQL Developer的Import功能、使用ODBC连接Excel和Oracle数据库、使用ORACLE自带的命令工具sqlldr将Excel文件另存为CSV或TXT格式、编写Python代码或者Java代码处理

本篇感觉更像是写了一个吐槽，而非技术性的强的博文。也希望更多的软件开发者能在软件开发过程中或者数据处理中，快捷开阔脑回路，走捷径来处理手头上的活。

运维实践｜导入数据库数据应该注意什么一次导入数据引发的思考

背景近期需要大批量的导入数据到oracle数据库，经过同事处理后，将数据转为.sql 文件并交给数据组同事处理，数据组同事在处理数据时发现数据无法导入，并提示 ORA-00917: missing comma 的错误信息。在此基础之上，开始针对数据做进一步的检查。错误的理解导入数据也咨询了如何将大批量数据导入到数据库中，微信群的大佬给出了一个解决方案。这里也要感谢 —— 青学会_香里香驻青学会办事

产品KOL

后端

数据库

运维

近期在导入大量数据至Oracle数据库时，遇到ORA-00917错误，经检查发现是因数据源自MySQL导出的.sql文件。建议直接导入CSV文件更便捷。熟悉多种数据导入工具和方法对软件开发人员很重要。

Oracle数据库

软件开发

服务器

Python

MySQL

Java

AI驱动 智领未来

tencentdb-catalog

云数据库采购特惠，高性能、高可靠、高安全，超值优惠等你享！


4核4G3M云服务器 新用户低至38元/年！

文章

问答

运维实践｜导入数据库数据应该注意什么一次导入数据引发的思考

运维实践｜导入数据库数据应该注意什么一次导入数据引发的思考

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐