让HDFS上的平面文件与可能有行更新的大型数据库表保持同步的最佳方法是什么？
像sqoop这样的工具似乎很有用，因为它们允许从表中增量地提取新行，但是我看不到处理行更新的简单方法。夜间转储整个表是我们宁愿避免的事情。
浏览 2提问于2011-04-01得票数 2
回答已采纳
我们有一个eCommerce商店，它正在以良好的速度增长。我们最近开始记录项目的“点击”数据。由于用户点击量很大，这些数据似乎增长非常快。在过去的10天里，我们有40k的点击量。这不是一个好的长期解决方案，因为这个表已经占用了超过50%的索引空间。这样做的潜在用例是在未来启用一些功能-比如向用户显示他们的点击历史和分析。
浏览 0提问于2021-01-05得票数 0
我需要将数据插入到MySQL表中。数据通常是通过SQL文件从Oracle数据库中获取的，SQL文件可以查询Oracle数据库表中的数据。所以手术就像，
浏览 4提问于2014-11-19得票数 0
1回答
我正在尝试开发asp.net web sites.according，以满足我的要求我想从我的sql数据库中获取一些更新的信息。如何使用asp.net跟踪sql db中更新的字段或id。
需要web服务或其他技术吗？请帮我解决这个问题。
浏览 2提问于2012-07-16得票数 0
回答已采纳
2回答
我工作的网站提供了一项服务，只有会员才能获得完全访问的内容。我试图在主页上创建一个‘样本’，每天获取新的mysql数据(这通常只对会员可用)，并为所有用户提供该网站所提供的‘免费样本’。数据库包含超过1000个条目，我想找到一种方法，每天从数据库中获取新的mysql数据。假设我的数据库是这样<
浏览 0提问于2012-08-01得票数 3
回答已采纳
2回答
我正在运行MySQL 5.1，并将网络日志中的数据存储到一个表中。有一个datetime列，我想在日间对其进行分区。每天晚上，我都会将前一天的新数据添加到表中，这就是为什么我希望白天进行分区。我想每天进行分区，因为MySQL查询通常需要20秒才能完成。
简单地说，我希望每天进行分区，因为用户可以点击日历来获取由一天的数据组成的web日志信息。数据
浏览 1提问于2012-08-30得票数 2
回答已采纳
在过去的七年中，我经常使用MySQL，我的经验通常是：“忽略存储过程，在数据库中放入任何类型的逻辑。将业务逻辑保留在代码中，并将数据库作为哑巴数据存储。”我正在构建一个新项目，目前使用的是Python + Flask + MySQL。MySQL数据库主要处理读操作。有一个主表--要在web应用程序上显示的项目列表。在最初创建行之后，我从未修改过表中的行。通过<em
浏览 0提问于2012-03-07得票数 1
回答已采纳
我有一个在线的MySQL (presto)数据库，它不断地自动更新(也就是说，新的行每天都会被添加到表中(确切地说，是视图)。我希望每天从它中获取数据，但不想重新获取我以前已经获取的数据。我使用python3从在线主机数据库中提取数据，如下所示：import numpy as np
curso
浏览 0提问于2018-06-05得票数 2
回答已采纳
2回答
我需要每周同步一个大型(3GB+ / 40+表)本地MySQL数据库到服务器数据库。这两个数据库完全相同。本地数据库不断更新，大约每周都需要用本地数据更新服务器数据库。您可以将其称为“镜像数据库”或“master/master”，但我不确定这是否正确。1)首先，我需要将数据库从本地复制到服务器。由于数据库大小和PHPMyAdmin限制，无法使用
浏览 0提问于2010-10-14得票数 6
回答已采纳
5回答
我刚刚创建了我的第一个PHP/MySQL站点，并且正在考虑创建一个数据库镜像以供备份。当然，这是为了防止一些黑客窥探并破坏主数据库。这样做有正确或错误的方法吗？
浏览 8提问于2011-12-12得票数 2
回答已采纳
2回答
我正在使用mysql工作台，我需要检索昨天的数据，但是我希望从特定的时间戳中获取数据，例如从00:00到12:00的数据--怎么做呢？我也不想每天改变日期。谢谢你
浏览 7提问于2022-05-30得票数 1
回答已采纳
我有一个非常大的表格，我每天都在获取数据，它的大小每天都在变大，但是对于我的软件来说，只有6个月的数据是有用的。因此，我计划删除6个月以上的数据。我知道我可以使用CRON作业来完成这个任务，但是我想使用MYSQL方式自动删除旧的数据。我也读过关于PARTITION的文章，我的问题是我能用PAR
浏览 0提问于2016-08-30得票数 8
5回答
我有一个功能，计算整个网站上的总帖子。function posts_count(){ }我在想，当一个帖子发布时，数据库中有一个日期行，所以我可以这样做
fu
浏览 8提问于2014-02-09得票数 1
回答已采纳
3回答
我使用下面的SQL查询从MySQL数据库获取数据。它应该是每天进行的，因此，例如，2016.12.01. 10:51:58和2016.12.01. 15:51:58在这个查询中不应该是不同的条目。我每天该怎么分组？我想总结一下参与者每天的每一项活动，而不是按参与者签字的日期分开。
浏览 7提问于2016-12-02得票数 0
回答已采纳
2回答
可能重复: 我的服务器被黑客入侵黑客正在将其他cpanel中的外壳和文件上传到服务器上，从数据库获取用户和密码，从基于web的mysql管理器登录等等。有什么方法阻止本地主机登录到我的数据库吗？还是把桌子藏起来？或者其他的想法？
浏览 0提问于2012-04-22得票数 -1
我需要使用PHP从网站中获取数据，并将其保存在MySQL数据库中。我还想获取图像并将它们保存在我的服务器中，以便在我的站点中显示它们。我想每天获取大量的数据，那么使用CURL会消耗大量的服务器端资源吗？还有哪些其他方法可以获取数据？
浏览 5提问于2011-08-17得票数 1
我想将workfront数据带入power bi以进行报告。有没有什么免费的api可以作为这两者之间的连接器？
浏览 1提问于2021-03-04得票数 1
每次调用我的php脚本时，我都会执行以下操作来跟踪no。调用脚本的次数：我觉得当有1000个对该脚本的并发请求时，这种方法应该存在并发问题。
浏览 3提问于2012-07-13得票数 0
2回答
我有下面的表结构在前端，我显示的最低和最高价格作为$35 - $671 (per day)，这是酒店每天的最低和最高价格。我可以根据GROUP BY hotelid获取每天的数据，并获得最低/最高价格，如下所示： hotelid, MAX但是我很困惑，因为我在表格中有每天的<
浏览 1提问于2013-12-30得票数 0
我有一个MySQL数据库，里面装满了天气数据，例如每天的平均气温值。我想询问过去五年中每天这些数值的平均值。-06-04 18.42 2016-06-04 21.22 查询结果应该是: 19.216select date, avg(ta) from weatherdata where date l
浏览 0提问于2019-06-04得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
腾讯会议活动推荐
腾讯云开发者
