1回答
我有一个运行Hadoop2.2.0和HBase 0.98.1的三节点集群，我需要在此之上使用Nutch2.2.1爬虫。但是它只支持1.x分支的Hadoop版本。到目前为止，我已经能够向我的集群提交一个Nutch作业，但是它在java.lang.NumberFormatException中失败了。所以我的问题很简单:我如何使纳奇在我的环境中工作？
浏览 1提问于2014-05-02得票数 1
回答已采纳
1回答
无法启动Nutch爬行
、、、、
我试图在Ubuntu14.04上部署Nutch2.3+ ElasticSearch 1.4 + HBase 0.94，遵循这个。当我尝试开始爬行时，注入urls：我得到：nutch-site.xml <property>
<
浏览 6提问于2017-10-12得票数 0
我看到人们在网上发布关于这个主题的帖子时，使用了Nutch和Solr版本的不同组合。Nutch和Solr的最新稳定(非测试版)和兼容版本是什么，我可以下载和设置，而无需构建源代码和只需配置？
浏览 1提问于2013-05-16得票数 6
回答已采纳
我正在尝试使用HBase 0.94.14在Debian Squeeze上安装Nutch2.2.1。我仔细阅读了Nutch 1和Nutch 2教程以及各种文档。目录树中，也不存在于Hbase 0.94.4目录树中- Nutch树中的HBase jar版本不存在: hbase-0.90.4.jar
根据我找到的一些在线讨论，我将nutch树中的hbase-0.90.4.jar替换为hbase树中的<em
浏览 3提问于2014-11-27得票数 0
我正在整合纳奇与Hbase和Solr。启动Hadoop和Hbase服务后，我在Nutch中运行以下命令我正面临这些错误：/usr/local/apache-nutch-2.3.1/runtime/local&#x
浏览 1提问于2016-05-26得票数 1
回答已采纳
1回答
我已经使用'nutch‘与HBase作为存储后端的网站。我已经参考了这个教程链接- http://wiki.apache.org/nutch/Nutch2Tutorial。Nutch版本为2.2.1，HBase版本为0.90.4，Solr版本为4.7.1。./运行时/本地/bin/nutch获取-all
./运行时/本地
浏览 2提问于2014-05-09得票数 1
我正在尝试安装apache nutch 2.2.1，并通过遵循教程在配置文件中进行了必要的更改后成功地构建了它。由于hbase-0.90.4.jar与Hbase- 0.94.2不兼容，当我尝试将url注入nutch时，我得到了以下错误。请帮助我改变阿帕奇nutch的依赖性或修复错误。
我在下面发布了这个错误。(HServerAddress.java:60) at org.apache.hadoop.hbase.MasterAddressTracker.getMaster
浏览 1提问于2014-06-02得票数 1
我已经设置了一个小尺寸的集群，如果Hadoop与Nutch 2.3.1的Hbase。hadoop版本是2.7.7，Hbase是0.98。但在Nutch中没有任何可用选项。在我的例子中，目前通过mapred-site.xml (Hadoop配置)将reducer内存设置为4 GB。但对Nutch来说，我得加倍。是否可以不通过驱动程序类或nutch-site.xml更改hadoop conf文件
浏览 17提问于2019-02-12得票数 0
回答已采纳
我必须用Nutch 2.3.1设置hadoop堆栈。Hadoop2.7.4支持的Hbase版本为1.2.6，我已经成功地配置和测试了该版本。但是当我编译Nutch时，我得到了跟踪并爬行一个示例页面，我得到了这个错误。/usr/local/nutch/runtime/local/bin/nutch inject urls/ -crawlId kics
InjectorJob: starting at 2017-09-at org
浏览 6提问于2017-09-21得票数 1
回答已采纳
Nutch:这是用于网页爬行，使用它，我们可以抓取网页。我们可以把这些网页存储在db的某个地方。2)。要运行apache，我们需要HBase
浏览 3提问于2015-03-26得票数 0
我尝试使用HBase作为Gora的存储后端来运行Nutch2.0。我遵循本教程：http://wiki.apache.org/nutch/Nutch2Tutorial和got java.lang.NoClassDefFoundError；本教程还通过“将库从已安装的HBase目录复制到构建库目录中”介绍了此错误，但我不知道到底需要复制哪个hbase测试jar。如果有人在HBase上成功运行了Nutch2.0，请告
浏览 1提问于2013-05-06得票数 2
1回答
我正在尝试让nutch和hbase基于这个docker镜像工作：InjectorJob: starting at 2017-12-19 20:49:45at org.apache.nutch.crawl.InjectorJob.run(InjectorJob.java:218)
at org.apache.nutch.crawl.InjectorJob.inject$HBASE_HOME和$HADO
浏览 3提问于2017-12-20得票数 0
当我尝试运行nutch时，出现以下错误。我已经安装并运行了hbase-0.94.0，hadoop也可以正常运行。在${NUTCH_HOME}/runtime/local/lib中，存在hbase-0.94.0.jar。我得到了以下错误，这似乎是一个依赖的问题，但我相当卡住。谢谢 at org.apache.gora.hbase.store.HBaseMapping$HBaseMappingBuilder.addFamilyProps(HBaseMappin
浏览 1提问于2012-09-12得票数 2
我已经参考了本教程()来使用Hbase设置Nutch2.2.1。我已经完成了教程中给出的设置，但是没有清楚地提到如何抓取数据并将数据存储到Hbase表中。
浏览 3提问于2014-01-15得票数 3
我使用的是Solr 5.4.1和Apache Nutch 1.12。我能够抓取数据，但在Solr中索引的最后一步中，我遇到了以下错误。at org.apache.hadoop.mapred.JobClient.runJob(JobClient.java:836) at org.apache.nutch.indexer.IndexingJob.run(IndexingJob.java:228)
浏览 0提问于2018-05-01得票数 0
2回答
HBase主机未运行异常
、、、
我正在尝试连接HBase作为Nutch crawler的后端。:357) at org.apache.nutch.crawl.InjectorJob.runat org.apache.nutch.crawl.InjectorJob.in
浏览 24提问于2013-10-21得票数 1
1回答
我刚刚开始使用nutch，在昨天花了一些时间弄清楚如何在最新的HDP (2.3.2) vm上运行nutch之后，我遇到了一些问题。直接构建源代码，进行得很好，但是在本地第一次运行之后，我遇到了java.lang.NoSuchMethodError:
org.apache.hadoo
浏览 0提问于2016-01-29得票数 0
1回答
我使用Nutch爬行某个站点(即)。我跟踪了这个，它运行得很好，但是当我尝试注入其他url以便Nutch爬行时，我收到了InjectorJob: starting at 2014-02-04(StorageUtils.java:75) at org.apache.nutch.crawl.InjectorJ
浏览 2提问于2014-02-04得票数 0
回答已采纳
Apache Nutch抓取了一些保存在hbase中的数据。这些数据包含一些pdfs文件。现在我想解压缩这些文件。
我如何做到这一点呢？
浏览 0提问于2014-09-29得票数 1
有些人说Nutch2.3不能再使用MySQL，但是看看ivy.xml中的组件，MySQL仍然在可能的依赖项列表中。所以，我这样做了，就像在以前的Apache2.x版本中那样。
浏览 4提问于2016-01-19得票数 1
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
