我在csv的列中保存了一个大列表(字符串/段落列表)。我可以看到，对于一些数据应该很大的行，列是空的。我在用csv_reader。在csv中存储这么大的字符长度值的解决方案是什么？
浏览 11提问于2022-05-06得票数 0
1回答
高性能大文本存储解决方案
、、、、
下面是一个场景：2)有一个表X存储最重要和访问最频繁的数据( 4)记录数量不断增加(超过1000万，而且还在增加问题:数据库变得难以管理，我们需要存储来自Y列的数据，(Server之外)存储大文本的最佳解决方案是什么？
我正在寻找一种最小开销的解决方案。只是普通的存储
浏览 1提问于2013-10-09得票数 2
1回答
如果数据存储在谷歌的BigQuery中，我可以看到每月收取多少费用。假设我每月保存1TB的数据，如果我将数据保存2年，那么就会有24 TB的存储数据。这是否意味着我将支付24 of的存储费用？
浏览 2提问于2015-04-08得票数 1
回答已采纳
我想知道是否有一种方法可以跨脚本存储非常大的数组。在我之前的解决方案中，我使用SQL来存储这些数据，但是由于每秒有200个对页面的请求，这是许多不必要的非常大的select查询！我在想，也许会有一个nginx模块，它允许你存储数据，这些数据可以通过lua轻松修改和访问，而不必每秒从内存中删除并添加到内存200次。
浏览 1提问于2013-07-08得票数 0
2回答
我正在寻找一个个人云存储或备份解决方案，以一个合理的价格和最少可能的限制支持一个高容量的存储。满足我想要的需求的东西可能不存在，但是对于任何接近的东西的建议都会受到赞赏。所需的基本要求是：文件大小无限制如果备份解决方案:没有对备份/恢复功能或带宽的限制
如果备份解决方案:可以备份的内容没有限制(例如外部驱动器、网络驱动器等)。如果备
浏览 0提问于2020-04-11得票数 1
这应该是一个相当常见的要求，也是一个简单的过程:将数据批量上传到appengine。现在，大容量加载器方法似乎已被废弃，而仍然存在于文档中的旧链接会导致错误的页面。下面是一个例子
现在大容量装载数据的推荐方法是什么？
两个可行的替代方案似乎是: 1)
浏览 9提问于2014-08-27得票数 16
回答已采纳
2回答
我需要帮助写一个代码上传本地存储的CSV文件到谷歌云存储，然后存储数据从存储到各自的大查询表，使用.Net客户端库。谢谢。
浏览 3提问于2012-11-05得票数 3
回答已采纳
7回答
如何备份存储服务器？
、、、
我正在考虑实现一个非常大的存储服务器，作为其他几个服务器(都是基于Linux的)的实时NAS。我的问题是:你怎么备份这么多数据！？我是否需要为第二个非现场
浏览 0提问于2010-10-28得票数 14
回答已采纳
1回答
API的一个功能是从数据库获取非常大的数据集，并将它们存储在中间缓存/非关系DB层中。这是为了在该数据集之上执行筛选/排序/操作，而不必从数据库重新构建它。我们正在寻找一个很好/最好的解决方案来实现这个中间层。
我们的数据集可能相当大。
浏览 3提问于2012-01-20得票数 1
回答已采纳
1回答
快速图像扫描
、、、、
我有一个非常大的图像，我想用一个小模板(T)扫描它，并将其存储在数据库中，然后使用该数据库进行图像重建。但是，如果我想扫描所有的图像，我的模式数据库的大小将非常大。有没有什么解决方案可以减小模式库的大小？或者，有没有办法扫描图像来创建一个更小但更丰富的图案库？
浏览 1提问于2012-09-04得票数 0
我正在设计一个windows应用程序，它将为非常大的媒体文件提供在线备份存储。应用程序必须能够为每个用户存储平均1GB的数据。应用程序必须提供随机读写访问。什么将是持久的数据存储解决方案。是使用windows azure驱动器还是windows azure页blob存储，还是使用任何其他存储解决方案？
浏览 2提问于2013-08-08得票数 0
回答已采纳
向量数据库通常被认为是大模型的“海马体”或者“记忆海绵”。目前的大模型都是预训练模型，对于训练截止日之后发生的事情一无所知。第一是没有实时的数据，第二是缺乏私域数据或者企业数据，向量数据库可以通过存储最新信息或者企业数据有效弥补了这些不足，让大模型突破在时间和空间上的限制，加速大模型落地行业场景。同时，通过向量数据的本地存储，还能够协助解决目前企业界最担忧的<em
浏览 635提问于2023-08-14
1回答
我正在编写一个诊断应用程序，它每三秒钟向IndexedDB写入一次数据。数据的大小是固定的，超过一周的数据将被自动删除，从而导致最多201600个条目。简单的解决方案似乎是存储一个非常大的对象，该对象将提示用户接受空间要求。这需要存储然后删除一个非常大的对象，这需要大量的时间和处理能力。这还需要检查是否已经进行了此测试，以确保它只运行一次。有没有更好的解决方案？
浏览 0提问于2015-04-03得票数 0
我正在尝试上传一个json文件从Google存储到大查询。但是这个json文件在被推送到大查询之前需要进行预处理。我计划使用气流操作员gcs_to_bq。在这种情况下，如何处理json数据？我也可以使用python_operator，但是如果有任何干净的解决方案来使用现有的操作符，那么它也很好。
提前谢谢你
浏览 3提问于2020-07-28得票数 1
回答已采纳
1回答
大容量数据存储和处理
、、、、
我正在构建一个新的应用程序，其中我期望有大量的地理位置数据，就像移动的对象每5秒发送一次地理坐标。这些数据需要存储在某个数据库中，以便它可以随时用于跟踪地图上的移动对象。因此，每天要存储的地理坐标约为1150万个。我必须至少在数据库中存储大约一周的数据。
这些数据基本上将用于简单的查询，如查找特定对象和特定路线的所有地理坐标。因此，查询并不是非常复杂，这些数据将不会用于任何分析目的。所以，我的问题是，我应该只使用普通
浏览 2提问于2016-03-29得票数 1
我切换到大查询，因为高性能。但是不知道如何将数据从上传到大型查询数据库。还有一些问题..。我可以直接访问我的数据库从谷歌云存储，同时使用大查询。我要先把它转换成某种格式吗？如何继续更新大查询数据库到我的谷歌云存储数据库。
提前谢谢。
浏览 9提问于2016-02-25得票数 1
回答已采纳
如何获取批量导出时从SQL Server导出为txt或csv文件的表的数据类型详细信息？谢谢，哈尔
浏览 0提问于2013-02-15得票数 0
回答已采纳
我有一个带有Spring Data JPA存储库的汽车数据库，它的搜索方法如下所示： @RepositoryOR
make LIKE "Cherokee" OR model LIKE "Cher
浏览 26提问于2021-04-21得票数 0
回答已采纳
1回答
场景：但是，我们还需要对增量数据执行一些更新操作。例如，如果新旧数据中存在相同的行键，则更新数据而不是插入数据。
目前，我正在使用HDFS执行上述操作。现在我正在考虑迁移到具有读/写操作的HBase。
浏览 3提问于2016-05-30得票数 0
我和phpMailer v5一起工作。从今天起，它工作得很好，但是今天我尝试用邮件正文(每个4.1MB)来添加两张图片。并返回PHP致命错误。当我尝试使用较小的图像时，它工作得很好，但是当图像总大小超过8mb时，它返回错误。这是我的密码$SendMail->setFrom('f
浏览 1提问于2015-04-30得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
云直播活动推荐
腾讯云开发者
