我得到了这个错误，因为当我试图解析这个链接时，我解析的网站正在检查我的浏览器cookie，如果我没有将名称ChosenSite设置为www的cookie，那么它将立即将我重定向到解析来自无法提供这些数据的colcode=75421790的数据，从那里我得到了无法获得名称的问题。如何设置cookie，或者如何使用另一种方法解析此链接?
提前感谢！
浏览 5提问于2016-03-09得票数 1
我正在尝试抓取一个网站，以学习python和网络抓取。特别是，我试图在这个页面上抓取足球数据：
我的主要问题是如何抓取主数据表的所有页面，而不仅仅是第一个页面。我正在尝试使用selenium并分析当我点击“下一步”按钮时我的浏览器发送的请求，但我遇到了一些问题。感谢您的关注。
浏览 2提问于2018-08-30得票数 1
我正在使用python和Beautiful Soup从网络上抓取足球运动员的统计数据。我将从多个来源抓取，每个来源将有关于每个玩家的各种变量，包括字符串，整数和布尔值。最终，我想将这些数据放入数据挖掘工具或分析工具中，以便发现趋势。这将需要是可搜索的，我将需要能够添加数据到一个球员的信息时，我从一个不同的顺序从一个新的来源。我应该使用什么技术来存储数据，这样我才能最好地添加数据并在以后分析它？
浏览 3提问于2016-07-29得票数 1
1回答
我最近完成了一个机器学习课程，并想制作一个论坛情绪分析工具，将其应用于股票相关论坛。
问题:是否有任何已知的论坛情绪数据可用于无监督的培训？我发现了一些情绪数据集(twitter、imbd、amazon评论)，但它们非常特定于它们的利基(短消
浏览 0提问于2018-10-17得票数 0
3回答
我是从多个网站抓取数据。为此，我使用selenium和PhantomJs编写了多个web刮刀。我想要做的不是保存这些数据来分析它，我想把它发送到一个程序中去进行实时分析。
浏览 7提问于2016-08-03得票数 0
回答已采纳
任何人都知道一种有效的方法来提取包含outlink URL的文本上下文。例如，给定包含outlink的示例文本：
浏览 2提问于2014-03-09得票数 7
回答已采纳
1回答
：什么时候使用？
、、、、
我目前正在学习数据科学，并且已经学到了很多Python，不仅仅是数据科学，还有脚本编写、网络抓取等等。与此同时，我开始寻找人们如何通过数据科学赚钱，我发现了解SQL和Excel也是必要的，或者至少是重要的。我的问题是:什么时候使用这三种语言中的哪种语言/程序(Python、SQL、Excel)来执行不同的任务，比如清理原始数据或进行分析？
谢谢!
浏览 0提问于2022-08-05得票数 0
1回答
我向我的(微生物学和遗传学)学生提出的一个论点是，“数据”是混乱的，Python可以帮助解决这一问题(当然，其他语言也可以)。因此，这里有一种实用的基于web的数据收集练习。我注意到，在最有代表性的用户中，有一些人回答了与Python相关的问题。更广泛地说，在没有用于查询的API的情况下(我不认为有)，除了在页面的URL中查找模式，用Python加载这些页面，然后抓取html之外，还有其他选择吗？
浏览 0提问于2010-02-02得票数 3
回答已采纳
3回答
用于网站分类的简单机器学习
、、、、
我试图生成一个Python程序，以确定一个网站是否有害(色情等)。
首先，我制作了一个Python抓取程序，计算每个单词的出现次数。现在，我希望我的程序分析从任何网站的话，以检查网站是否安全。但我不知道哪种方法适合我的数据。
浏览 5提问于2017-07-12得票数 2
回答已采纳
我正在尝试从极客那里收集数据，用于我自己的简单的抓取和分析项目。我正在使用bs4和requests - python2 我需要抓取这个url上的所有问题， ques_page = requests.get('https://practice.geeksforgeeks.orgques_page.text, 'lxml')
get_ques = ques_soup.find('div', class_="panel proble
浏览 13提问于2019-01-02得票数 0
回答已采纳
我正在使用python中的Scrapy库来抓取数据，并且我计划在将来使用R进行很少的分析。
在未来，它可能是一个拥有数百万项的大型数据库，使用mongoDB和其他数据库有什么区别？
浏览 0提问于2016-01-26得票数 0
回答已采纳
3回答
我们当前的Python管道从web中抓取数据并将这些数据存储到MongoDB中。然后，将数据加载到一个分析算法中。这在本地计算机上很好，因为mongod定位了数据库，但是我想在像Google这样的共享平台上上传数据库，这样其他用户就可以不用再运行刮板就可以使用这些数据了。我知道MongoDB默认将数据存储在/ data /db，所以我可以将整个/data/db上传到Google
浏览 8提问于2016-01-31得票数 1
回答已采纳
1回答
我一直在分析每天从ArcGIS地图(链接如下)中的要素图层手动收集的数据。我想自动化这个过程，并一直在寻找使用RESTful应用程序接口(或其他东西)来收集此信息的方法。任务是将这个表(下面的屏幕截图)保存为我可以操作的python数据帧。 我尝试使用GET语句和id键的组合，但我不熟悉API和web抓取。 这项任务可行吗？它的实现是否相当简单？对于Python中级但不熟悉web抓取的人来说，应该从哪里开始呢？ 谢谢!
浏览 24提问于2020-07-24得票数 0
回答已采纳
1回答
我有几个项目，我想尝试和工作，这将需要做一些网络抓取数据收集，然后存储，排序，分析数据。我也想在我的网站上提供这些数据，以便其他人也能对其进行排序。
我的问题是，我应该往哪个方向学习这方面的必要技能。我的第一个想法是参加一个在线的Standford数据库课程，然后是一些web抓取教程，然后是一些PHP教程。然后，我偶然发现了一个名为"Orange“的软件，它是”面向新手和专家的开放源码数据可视化和分析软件。数据</e
浏览 0提问于2013-06-04得票数 -1
回答已采纳
3回答
我编写了python代码来刮网页并检索挂牌价格。这个能行吗？Python ->美观汤-> mySQL -> html我希望能够计算平均值，然后在html页面上显示它们。
浏览 8提问于2017-03-01得票数 0
2回答
分析对象列表中的数据
、、、
我试图分析来自多个YouTube视频的数据。我不知道如何使用YouTube API，也不知道是否可以通过该方法使用。相反，我通过PythonAnywhere使用Python2.7。已经收集了数千个视频的数据。该计划是分析数据，以找出平均数量的意见，喜欢等和最流行的词在标题，描述.或者是每天观看次数最多的视频(基于上传日期和当前浏览量)。我正试图分析许多事情。问题是:对于多个对象的列表，分析这类数据的最佳方法是什么？(或者是否有更好的方
浏览 0提问于2018-04-26得票数 1
回答已采纳
有没有一种方法可以用Python语言对计算机说，从第一次到最后在一个特殊的文件夹中读取文件，不管它们的名字是什么？(这些数据对我来说并不重要，我只需要抓取这些数据来分析)。
浏览 0提问于2019-02-14得票数 0
回答已采纳
我对情绪分析和twitter情绪分析的名字有点困惑，我想为facebook粉丝页面posts.so做情感分析，我决定使用api，但我没有找到任何为facebook Posts.Every api服务提供情感分析的api是twitter，我发现datumbox api给出了情感分析和twitter-Posts.Every分析这里的结果。对于facebook的情绪分析，我需要使用情绪分析api还是twitter情绪分析(我知道名字本身就意
浏览 0提问于2016-08-08得票数 6
我可以编写的语言之一是Python。说到数据，我可以使用SQL，也可以进行数据抓取。到目前为止，我在读了soo的许多关于数据科学都擅长的文章之后，发现了什么：2-代数4-可视化。Python编程2- Python中的数据报废
你们专家能指导我或提出一份路线图来总结理论和实践吗？我给了自己大约8个月的时间。
浏览 0提问于2015-07-24得票数 13
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
实时音视频
即时通信 IM
对象存储活动推荐
腾讯云开发者
