腾讯云
开发者社区
文档
建议反馈
控制台
登录/注册
首页
学习
活动
专区
工具
TVP
最新优惠活动
文章/答案/技术大牛
搜索
搜索
关闭
发布
精选内容/技术社群/优惠产品,
尽在小程序
立即前往
文章
问答
(9999+)
视频
沙龙
2
回答
mapreduce中的多个文件
、
我是mapreduce程序的新手,我遵循Tom white
Hadoop
的权威指南,我正在做
气象
数据
程序,我想在这个程序中找到每年的最高气温。
Hadoop
安装在伪分布式模式上。请帮帮我。
浏览 3
提问于2015-08-07
得票数 0
回答已采纳
2
回答
MapReduce Mrunit单位误差
、
我是
Hadoop
的新人。昨天,我遵循了这本书,并使用JUnit作为
气象
数据
的apper单元测试。但也有一些问题。</version> </dependency> <groupId>org.apache.
hadoop
</groupId> <artifactId><em
浏览 4
提问于2018-07-16
得票数 1
回答已采纳
9
回答
为什么像Vertica/InfoBright/GreenPlum这样的面向列的
数据
库会对
Hadoop
大惊小怪?
、
、
、
馈送
Hadoop
集群并使用该集群将
数据
馈送到Vertica/InfoBright
数据
仓库有什么意义?谢谢!
浏览 6
提问于2011-11-25
得票数 5
1
回答
Orion Context Browser是否可与BigData GE配合使用?
这个应用程序将使用来自
气象
站和天气模型等的
数据
。据我所知,Orion上下文浏览器允许创建和编辑实体及其
数据
作为属性。我的问题是,在使用大量
数据
的情况下,是否可以将BigData
分析
GE与上下文浏览器一起使用,以查询来自
气象
站的实时
数据
和来自天气模型的
数据
?Orion上下文浏览器可以在不使用BigData GE的情况下处理这种
数据
吗?或者反之亦然?
浏览 0
提问于2015-01-05
得票数 1
1
回答
更好的存储、写入和读取大型
气象
数据
集的方法
、
、
、
我正在寻找一个更好的存储,写入和读取
气象
数据
(约30 GB的原始文本格式)。 目前我正在使用NetCDF文件格式来存储天气记录。第一项任务是每天更新大约3000个
气象
站的天气记录。维度顺序(time, var, name)提供了最好的写入性能,因为新的
数据
将添加到NetCDF文件的末尾。第二项任务是读取
气象
站的所有每日天气记录,以进行预案
分析
。维度顺序(name, var, time)提供了最佳的读取性能,因为一个站点的所有记录都存储在一起。我的问题是,是否有其他方法/软件
浏览 8
提问于2015-10-23
得票数 0
回答已采纳
3
回答
使用cassandra和
hadoop
的大
数据
lambda架构
、
、
我正在开发一个用于传感器
数据
和预测
分析
的大
数据
解决方案。我是大
数据
的新手,读过关于lambda-架构的文章。我考虑过将Cassandra
数据
库与
Hadoop
一起使用。Cassandra是一个高可用性和分区容错的
数据
库,
Hadoop
hdfs是一个用于大型
分析
作业的文件系统。
Hadoop
中的
数据
用于大型
分析
,而cassandra中的
数据
应该是我的
Hadoop
浏览 2
提问于2016-11-22
得票数 4
1
回答
可视图算法在时间序列中的应用
、
根据我所读到的文章,我获得了该算法的应用,具体如下: 该算法还用于时间序列的
分析
。在用图算法进行时间序列
分析
时,在得到该算法得到的图之后,出现了这样一个问题:这个图的效率是多少?如果我们考虑
气象
数据
,用可见性图算法得到它的图,那么就可以从这个图中得到服从幂律的网络的统计性质或程度分布。一般来说,我的问题是,
气象
时间序列的图表或在某些时间购买药品和许多其他时间序列的图表提供了什么效率和信息?
浏览 3
提问于2020-12-28
得票数 0
1
回答
Elasticsearch-
Hadoop
获取非索引
数据
、
、
、
、
我有一个elasticsearch集群,它有大量的
数据
。我想将elasticsearch中的所有
数据
提取到
Hadoop
(Hive)中。为了使用Hive外部表从elasticsearch提取
数据
,我使用了Elasticsearch-
Hadoop
驱动程序,但是它太慢,总是失败。我的第一个问题是从现有的elasticsearch集群中获取所有
数据
。第二个问题是在一天或一小时内复制所有流到HDFS上的elasticsearch中的
数据
。提前谢谢。
浏览 4
提问于2015-03-13
得票数 1
回答已采纳
6
回答
如何将
hadoop
用于web应用程序?
我在一个基于社交网络的应用程序上工作,这是使用Apache web服务器和MYSQL服务器的
数据
库与codeigniter MVC框架。我不知道如何将
Hadoop
集成到这个应用程序中,也不知道如何编写map- reduce程序。
浏览 0
提问于2011-08-09
得票数 16
1
回答
什么时候
数据
大到可以使用
Hadoop
?
、
、
我的雇主运行
Hadoop
集群,而且由于我们的
数据
很少大于1GB,我发现很少需要
Hadoop
来满足我们办公室的需求(这不是大
数据
),但我的雇主似乎想说我们正在使用
Hadoop
集群,所以我们正在积极地寻找需要使用我们的大型工具进行
分析
的
数据
我看到一些报道说,小于5tb的东西不应该使用
hadoop
。
Hadoop
成为
数据
分析
实用解决方案的神奇大小是什么?
浏览 2
提问于2015-09-11
得票数 0
回答已采纳
1
回答
如何利用
Hadoop
实时处理Postgres
数据
库?
、
、
我有一个Postgres
数据
库,用于生产服务器,需要定期使用
Hadoop
进行
分析
。在
Hadoop
中进行的每一个查询都应该基于Postges
数据
库中可能的最新版本。如何在
Hadoop
中进行近乎实时的
数据
分析
?
浏览 4
提问于2015-05-19
得票数 2
回答已采纳
2
回答
Hadoop
与NoSQL-
数据
库
、
、
、
由于我是大
数据
和相关技术的新手,我的问题是,正如标题所暗示的: 什么时候使用
Hadoop
,什么时候使用某种NoSQL
数据
库来存储和
分析
大量
数据
?我知道
Hadoop
是一个框架,
Hadoop
和NoSQL不同。但是您可以在HDFS上使用
Hadoop
保存大量
数据
,也可以使用MongoDB、Neo4j等NoSQL.因此,也许
Hadoop
或的使用取决于您是只想
分析
数据
还是只想存储
数据<
浏览 3
提问于2014-07-31
得票数 0
回答已采纳
1
回答
使用具有两组坐标的distGeo
、
8.2382874 50.70487 6.6272526 50.37381 8.040766 对于第一个
数据
集中的每个位置(观测位置),我想知道第二个
数据
集中(
气象
站)中离它最近的位置。基本上将观测的位置与最近的
气象
站相匹配,以便以后
分析
天气影响。
浏览 3
提问于2020-12-09
得票数 0
1
回答
我是否可以运行
Hadoop
onflow (在应用程序运行时运行map还原)
、
我们能在流上使用
hadoop
生成输出吗?我有一个由日志和预约id组成的大文件,如果我使用传统的RDBMS,我可以得到预约id,但需要1或2个小时。我是否可以运行
Hadoop
onflow (在应用程序运行时运行map还原)
浏览 4
提问于2013-10-25
得票数 0
回答已采纳
1
回答
我们如何处理
Hadoop
DB中处理过的
数据
(输出)?
、
、
我是
Hadoop
的新手,如果我的问题太不成熟,我深表歉意。但是,在基于
Hadoop
的
数据
库中是如何工作的呢?在客户端,如果请求特定的报告,这需要来自
Hadoop
DB的
数据
点,那么流程会是怎样的?
浏览 2
提问于2015-12-23
得票数 0
1
回答
为什么不在
Hadoop
节点中启用虚拟节点?
网址:如果我在
分析
/
Hadoop
节点中启用虚拟节点,会发生什么情况?
浏览 1
提问于2013-11-14
得票数 2
回答已采纳
3
回答
是否可以读取MongoDB
数据
,用
Hadoop
处理
数据
,并将其输出到RDBS (MySQL)中?
、
、
、
摘要: 在单个事务中使用Sqoop导出它。我的问题是,我想要阅读一个大型的MongoDB集合来进行
数据
分析
,但是集合的大小意味着
分析
工作将花费太长的时间来处理。不幸的是,MongoDB的内置映射减少框架不能很好地完成这项工作,所以我更愿意使用进行
分析
。我了解到,可以使用MongoDB将
数据
从读取到<
浏览 8
提问于2012-04-01
得票数 7
回答已采纳
2
回答
BigData
分析
选择技术栈
、
、
、
我想编写一个应用程序,该应用程序能够从大型生产系统的监视
数据
中生成报表并启用交互式
数据
分析
(OLAP)。(我知道,前面有一些有问题的权衡决定,但让我们暂时搁置它们。)我确定了基本技术栈的下列可能性: 根据我的研究,我倾向于认为
Hadoop
/HBase/Hive将是最常见的组
浏览 6
提问于2013-06-24
得票数 1
回答已采纳
2
回答
大
数据
存储和查询与传统的关系/非关系
数据
库相比
、
我是一所大型州立大学的高级计算机专业,在他们的
数据
科学系担任一家大型上市科技公司的实习生。我在学校学过
数据
结构和算法(地图、树、图、排序算法、搜索算法、MapReduce等)。我的实习项目是创建一个仪表板,用于显示从
Hadoop
数据
库收集的
分析
数据
。我很难理解这些
数据
是如何构造和查询的。我确信
Hadoop
中的所有
数据
都来自运行其平台的Oracle Relational产品。--我想我的核心问题是,为什么需要
Hadoop</em
浏览 0
提问于2019-06-01
得票数 1
3
回答
对于
hadoop
来说,java是必需的吗?
、
、
、
有人知道是否有必要了解java来学习
hadoop
吗?如果有人在
hadoop
上工作,那么请告诉我们在
hadoop
工作需要什么?
hadoop
的确切用途是什么?在
hadoop
之前有什么?
浏览 11
提问于2015-09-06
得票数 1
点击加载更多
扫码
添加站长 进交流群
领取专属
10元无门槛券
手把手带您无忧上云
相关
资讯
后 Hadoop 时代,大数据分析路在何方?
大数据平台搭建:基于Hadoop的数据分析平台
一文了解大数据分析利器——Hadoop
大数据之Hadoop
如何使用Mahout在hadoop进行集群分析
热门
标签
更多标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频
活动推荐
运营活动
广告
关闭
领券