特别是，我希望将Postgres日志中的所有INSERT、UPDATE和DELETE语句推送到AWS Hadoop集群，并有一种很好的方式搜索它们以查看一行或多行的历史记录。我在任何方面都不是Hadoop的专家，所以如果这是一只红鲱鱼，请告诉我。
谢谢!
浏览 2提问于2014-11-05得票数 0
回答已采纳
1回答
我正在为我的大学做一项作业，在那里我需要在AWS上使用Hadoop实现一些东西。为了实现上述功能，我想使用像MySQL这样的关系数据库。我已经阅读并看到了我实际上可以使用MySQL作为一个带有AWS的RDS，但是我不知道如何使用Hadoop并在此基础上使用Java来实现这一点。基本上，经过几步之后，我将接收每一行如下所示的文件：我想执行一个额外的步骤，它将创建一个数据库，其中每个A是一个新表，每个B是一个新行，而C、num1和num2如果是这样的话，谁能帮我做一个
浏览 0提问于2019-01-30得票数 0
我们的MySQL和Hadoop平台部署在不同的网络中，Hadoop不能访问MySQL，但是MySQL可以连接到Hadoop。那么，是否有一个工具可以像Sqoop获取数据那样将大量数据从RDS推送到HDFS？或者有没有其他方法可以解决这个问题？
任何帮助都是非常感谢的。顺便说一句，Hadoop集群在我们的网络中使用了一个Kafka主题，通过在两边部署水槽并连接在一起。但是对于海量的RDS数据，如何实现这一点呢？
浏览 1提问于2019-02-20得票数 0
1回答
我有十几个存储不同数据的数据库，每个数据库的大小都是100 in。所有数据都存储在AWS服务中，如RDS、Aurora和Dynamo。很多时候，我发现自己需要跨数据库执行“联接”，例如，在多个数据库中显示一个学生ID，其中包含我想要收集的数据。连接通常是在数据从数据库中流出之后进行的，因为数据不在同一个数据库中，这有时只需要对数千条记录进行几个小时。Hadoop和Hive怎么样？我们将数据从数据库中释放出来，并将其作为文件放在
浏览 0提问于2018-01-10得票数 3
回答已采纳
我有一个AWS数据库，其中有一个使用postgres的表。现在，我想将我的数据移动到AWS EMR，以便我可以使用Hadoop来处理它。但是，当我尝试运行这个片段来测试到RDS的连接时：
我很难搞清
浏览 1提问于2019-12-11得票数 0
我在Hadoop中运行一个MapReduce作业。为了简单起见，我的reducer函数输出了键，以及键出现的次数。我的管道中的下一步是将这些数据发送到MySQL数据库(具体地说是RDS实例)，但是我在尝试访问jdbc驱动程序时遇到了一些问题。对于这个程序，我相信与其尝试调试reducer，不如改正另一个简单地从hdfs获取数据并逐行发送到数据库的程序。
让每个Reducer连接到数据库是否通过我期望的并行化改进了进程？示例输出:hdfs:/user/hadoop&#x
浏览 3提问于2014-01-23得票数 0
我是AWS的新手。1-请指导我如何为他们创建帐户并为每个帐户分配类似40美元的资金？或者假设他们已经有了AWS账户，我想给每个账户分配40美元。3-我们应该使用什么语言来减少地图。可以使用J
浏览 1提问于2013-10-31得票数 0
我在一个RDS实例上有大约5个测试postgres数据库。到目前为止，所有这些都已经使用Master_user (在实例创建时创建)创建并运行。
我现在正尝试为每个数据库创建5个新用户并授予所有权限。
浏览 4提问于2017-10-11得票数 4
回答已采纳
我可以在单个Amazon RDS实例上创建多少个数据库？
我需要从Xeround转移到另一台服务器上(它们因公共云而关闭)。我的两个选择是创建具有EBS支持(10,000 iOPS)的单个EC2实例或RDS。我有三个数据库，没有太多的流量。如果我需要为每个数据库启动RDS实例，对我来说可能有点太贵了。
浏览 15提问于2013-05-02得票数 47
回答已采纳
在每天创建的电子邮件中，我一直看到一个RDS集群已经被删除(通过控制台)超过一周了。当我运行"aws rds describe-db- cluster“时，我得到一个空响应(不出所料)，但是如果我运行"aws resourcegroupstaggingapi get-resources--resource-type-filter rds"，它会返回我删除的集群及其标签。
浏览 1提问于2020-09-14得票数 0
我有一个wordpress博客运行在Amazon上(数据库在EC2上)。我想把它转到一个新的亚马逊账户。我有两个疑问：
我必须从头开始完全重新创造环境吗？
浏览 1提问于2014-04-03得票数 0
1回答
我想了解AWS关系数据库服务(RDS)，并发现使用它的好处。能否将EC2实例中的现有数据库与Amazon连接起来？我应该如何自动化RDS？当我想在现有的EC2实例中创建新的数据库时，我可以简单地使用Ansible。如何将我的应用程序与使用RDS的数据库连接？
提前感谢！
浏览 3提问于2018-03-18得票数 1
回答已采纳
2回答
我已经创建了一个RDS实例，并希望授予我的一个用户访问该RDS实例的权限。我想知道我怎么才能允许你这么做。RDSFULLACESS，然后像这样模拟它："Version": "2012-10-17", { "rds"logs:GetLogEvents" "Effect":
浏览 33提问于2016-08-25得票数 0
回答已采纳
如果AWS sql服务器RDS实例中的一个数据库中存在损坏，那么恢复该数据库的最佳方法是什么？备份是整个实例的备份，因此您不希望从AWS备份中恢复，并且丢失其他好数据库上的数据。
浏览 2提问于2015-10-13得票数 10
回答已采纳
我需要关于从Hadoop datalake (Kerberos认证)导入数据到AWS的建议。Hive表中的所有表都应该放在s3中，然后需要加载到AWS RDS。导入数据，然后在RDS中创建单独的模式是不是更好？
浏览 3提问于2018-03-10得票数 0
我运行了eb init并设置了一些东西，只是意识到，如果使用关系数据库，RDS本质上是必需的，但是只有当您将--database选项传递给EB create命令时，才会提示您使用关系数据库( IMO)。
浏览 0提问于2016-11-18得票数 7
1回答
我有一个关于将neo4j部署到亚马逊网络服务的问题。请访问：https://community.neo4j.com/t/cannot-access-database-when-put-neo4j-in-private-subnet/10058
浏览 5提问于2019-09-12得票数 0
我试图将它连接到我设置的RDS MySQL实例，但是加载总是会导致页面超时连接。我把问题缩小到不能连接到数据库。我认为我已经正确地设置了我的安全组，以允许ElasticBean秸秆EC2实例与RDS对话，但是一定有问题，因为页面仍然没有加载。我在下面包含了RDS和ElasticBean秸秆使用的安全组的入站/出站规则的截图，以及我在ElasticBean秸秆实例中附加了哪些安全组的截图。
编辑:
浏览 10提问于2015-10-18得票数 23
回答已采纳
我需要在AWS提供的Postgres中使用Cloudformation创建多个数据库。我能够创建一个数据库。
浏览 4提问于2017-03-02得票数 3
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
