我们有一个基于Perl的web应用程序,它的数据来源于一个巨大的纯文本文件存储库。这些平面文件被放到我们系统上的一个目录中,我们对它们进行广泛的解析,将一些信息插入到存档数据库中,然后将这些文件移动到它们的归档存储库和永久主目录(/www/ MySQL /MySQL/*.txt)。现在,我们不会解析这些平面
我有一个巨大的数据库,我正在寻找一个正确的设置。目前,im将我的所有条目插入到MongoDB中,希望它比MySQL工作得更好(MySQL不适用于如此庞大的db)。我制作了一个小python脚本,用多处理搜索我所有的文本文件。使用纯文本文件(150 One ),一个查询大约需要1-2个小时。也许这些信息是有帮助的:数据是一个字典(键,值,但是有一些