1回答
scrapy.Spider): allowed_domains = ['www.entertainmentearth.com/exclusives.asp'] def parse(self, response
浏览 0提问于2018-02-16得票数 0
回答已采纳
2回答
我需要写一个小的搜索引擎与蜘蛛和所有这些PHP，你推荐男人ASP.NET或stuff.What？我应该阅读哪些来源才能获得这些知识？
浏览 5提问于2009-09-10得票数 0
在研究如何在我们的ASP.NET应用程序上正确地检测爬虫时，我遇到了项目。为了使用它，我做了这个：
下载OceanSpiders.browser.xml并将其重命名为OceanSpiders.browser所以，最后的最后一个看起来像App_Browser/蜘蛛/海洋蜘蛛侠。
浏览 1提问于2010-06-21得票数 2
1回答
我想创建一个网络蜘蛛，能够从其他网站获得一些有用的信息。如何从网站获取文件并存储到我的服务器？？例如:文件的url是，如何让我的网站用户下载文件而不显示页面 ?？
浏览 4提问于2012-03-02得票数 0
1回答
托管WCF服务
、、
我试着把这个服务上传给asp蜘蛛，但是我得到了一个错误。
Line 29: ASP.NET to identify an incoming user.--
该服务在本地运行良好，因此我只需要帮助它在asp蜘蛛上工作(或者如果您有更好的选择
浏览 2提问于2011-06-20得票数 4
1回答
在中，OP说
" name :定义此蜘蛛名称的字符串。蜘蛛名称是由Scrapy定位(并实例化)蜘蛛的方式，所以它必须是唯一的。但是，没有什么可以阻止您实例化同一蜘蛛</em
浏览 3提问于2017-03-02得票数 0
回答已采纳
我试图在一个抓取蜘蛛中使用urlparse.urljoin来编译一个urls列表来进行抓取。目前，我的蜘蛛什么也不返回，但没有抛出任何错误。因此，我试图检查我是否正在编译urls。id=480&city=london', 'lphs.asp?id=1662&city=london',
'lphs.asp?destination/ohttp:&#
浏览 0提问于2017-10-18得票数 1
回答已采纳
1回答
我写蜘蛛是为了从网站中提取一幅图像。但是items.json文件中只有[字符]。请帮帮我。我的蜘蛛档案是：-from scrapy.selectorCaptchaSpider" start_urls = [
"https://*****.ac
浏览 0提问于2015-01-06得票数 0
回答已采纳
2回答
我相信大多数到旧urls的流量都是蜘蛛。
处理这个问题的正确方法是什么？最好我想要一个解决方案，给真正的用户一个很好的体验，如果他们输入一个旧的网址(或使用他们制作的旧书签)，但也通知蜘蛛网址的变化，以便他们可以更新他们的注册表。我正在使用ASP.NET
浏览 0提问于2011-01-07得票数 0
我有一个asp:LinkButton，它触发一个PostBack，将一些内容推入数据库，然后执行一个Response.Redirect，将用户转到下一个页面。为了搜索引擎优化的目的，我们不希望蜘蛛跟随链接到下一页。Response.Redirect是否有指定nofollow的方法
浏览 1提问于2013-02-01得票数 2
回答已采纳
1回答
我有一个asp.net mvc5应用程序。我想防止搜索引擎蜘蛛我的网站在.net mvc。
用下面的代码在我的项目中创建robots.txt (猜它不应该在我的解决方案中)是否足够？
浏览 5提问于2015-07-06得票数 0
回答已采纳
start_urls = []
class Parker_Spider(scrapy.Spider):
浏览 4提问于2016-05-26得票数 5
回答已采纳
好吧，我不想让mysql的东西在蜘蛛里面，在管道里，我遇到了一个问题。如果我试图像前面提到的问题那样将管道对象提交给我的蜘蛛，我只会收到消息中的一个属性错误。有人知道如何把管道对象放在蜘蛛里面吗？
浏览 5提问于2017-09-21得票数 1
回答已采纳
我是ASP.NET的新手，我在VS2010中使用NET4.0(在调试模式下工作得很好)制作了一个应用程序，我试图托管我的应用程序@asp蜘蛛，我得到了以下错误：Description
浏览 3提问于2011-02-03得票数 2
我有时尝试，但通常不测试我的想法，因为我不知道如何快速做到这一点，而不设置一个完整的Scrapy项目和解析一个真正的网页。
浏览 0提问于2014-12-04得票数 3
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
