我正在学习网络抓取和在Eat24 (点评网站)上工作。我可以从Yelp中抓取基本数据，但不能做一些非常简单的事情:将这些数据附加到数据帧中。这是我的代码，我已经对它进行了注释，所以它应该很容易理解。from selenium import webdriverimport pandas as pd
from selenium.webdriver.support.ui impo
浏览 2提问于2017-08-15得票数 0
回答已采纳
1回答
我已经成功地使用selenium来抓取一个html表，它需要在抓取之前点击按钮。不过，我很难把这个解析成熊猫的数据。与URL一样，dataframe应该有5列和大约30行。from selenium import webdriver
b
浏览 1提问于2020-04-03得票数 2
回答已采纳
1回答
有没有人能告诉我一种在python中将数据添加到pandas dataframe中的方法，而多个线程将使用一个函数，在这个函数中，数据必须被附加到dataframe中...？我的代码从一个网址抓取数据，然后我使用了df.locindex...将废弃的行添加到数据帧中。
因为我已经启动了一个多线程，它基本上将每个URL分配给每个线
浏览 1提问于2016-12-03得票数 6
回答已采纳
我正在尝试使用selenium和chromedriver从网站“”中抓取数据。当我运行代码时，chromedriver成功地输入了url，但无法加载页面，显示了一个空白页面。我尝试将目标网站切换到google.com，但抓取成功。我的结论是目标网站服务器检测到selenium并拒绝发送回数据。那么如何在Python语言中使用selenium和chromedriver从网站抓取数据呢
浏览 0提问于2020-05-29得票数 0
1回答
当我单击所需的选项卡，在显示其内容后，首先会出现两个问题。1-网页地址不改变，对所有标签都是相同的。2-当我看到带有浏览器(firefox和chrome)的“查看页面源”的页面源时，所有选项卡的页面源看起来也是相同的，而当我对其中一个选项卡使用“检查Elemnt”时，我看到我的目标内容以html形式显示的代码问题是，我无法通过python访问所需选项卡的内容，这是web世界中可用的典型WEB
浏览 2提问于2020-02-06得票数 4
回答已采纳
我试图刮数据从板球网站，并已经写了一个方法，接受一个球员的名字，并显示他们的相应数据。
如果您看到此方法，则取一个播放机名称并显示其所有数据。我的要求是显示所有球员的完整记分卡，而不是只显示一个球员的数据。
浏览 0提问于2020-03-04得票数 0
1回答
加载内容后，数据动态显示在网页上。在一个网页上，控制台中的响应是json格式的，第二个是html。我尝试过使用scrappy和urllib3，但是除了从网页本身获取静态数据之外，我没能捕捉到其他东西。 f.write(response.body)
如果您知道任何可以使用的解决方案或其他库/
浏览 1提问于2020-05-25得票数 1
我目前正在做一个项目，用python构建一个web scraper，然后将其停靠，这样应用程序就可以在任何机器上运行。我已经构建了python应用程序，使用selenium加载我正在处理的网页。我是否需要使用应用程序创建一个容器，并将其链接到另一个selenium容器？谢谢你的帮助！ 我的代码从我编译的文本文件中获取邮政编码列表，并使用这些代码在地图上的特定位置抓取。抓取数据后，它
浏览 14提问于2019-05-06得票数 9
回答已采纳
2回答
基于日期抓取表数据
、、、
我正在尝试抓取kurs事务的表
从2015-2020年，但问题是默认日期和我选择的日期之间的链接仍然是相同的。那么我如何告诉python从2015-2020(20-11-15-20-11-20)抓取数据呢？我对python和python3的使用非常陌生。
浏览 0提问于2020-11-24得票数 0
这真的很无聊，需要大量的时间。我不想浪费它。
我想让这个过程自动化。据我所知，它被称为“机器人”。它应该做的是浏览几个网站，点击一些按钮，抓取所需的信息，存储收集的信息，并填写一些表格。使用Python可以做到这一点吗？如果是，那么最紧凑的方法是什么？
浏览 1提问于2013-05-07得票数 0
我有以下代码来抓取一个网站： from selenium.webdriver.common.by import Byfrom selenium.webdriver.support import expected_conditions as EC
from selenium.common.exceptions([title.text for title in elements]).rename(c
浏览 80提问于2020-06-05得票数 0
下面的代码将HTML web表打印为python脚本输出。然后，我尝试将其转换为Pandas DF，然后导出为CSV，但失败了 import timefrom selenium import webdriver= webdriver.Chrome('C:\\Users\\rugupta\\AppData\\Roaming\\Microsoft\\Windows\\Start Menu\\Programs\\Pythontable')
#pri
浏览 29提问于2019-12-09得票数 0
我试图在这个网站上做一个网络抓取，其中有信息，但我没有成功。我需要创建一个dataframe的列：'Fecha'，'Hora'，'Area'，'Turno'，'% Solidos'，'Malla 65#'，'Comentarios‘。我们的想法是从init_date抓取到我在python脚本中定义的end_date，并将每天追加到</
浏览 21提问于2021-05-18得票数 0
回答已采纳
我对Selenium是个新手，实际上我从昨天就开始尝试了，我发现了一些关于Selenium和python的有趣的东西。
我找到了一些关于如何抓取JS页面并与之交互的信息。但我的疑问是，如何使用selenium从可点击的地图中获取数据。我试着找出页面中是否有隐藏的链接，但是没有。我计算出，当我将鼠标移到地图上的任何按钮(在地图中)时，x，y位置会发
浏览 1提问于2015-12-20得票数 0
一天中的美好时光， 目前，我在抓取项目的最终目标是创建一个DataFrame。当我从一个页面导航到另一个页面时，我必须收集不同的标准。不过，如果页面上没有条件，我希望收到一个“无”。import re
from selenium.webdriver.support.ui import WebDriverWait except:
area.append(Non
浏览 9提问于2021-05-05得票数 0
我使用Selenium和Pandas从一个网站上抓取一个表，生成一个列表对象。然后，我尝试将列表转换为DataFrame以将其写入MySQL。当我打印抓取结果时，它是一个很好的表格格式，具有清晰的行号和列标题，但是当我打印'len‘时，结果是1。 我已经尝试了很多方法，真的需要一些帮助。from selenium import webdriver
from selenium.webdriver.chrome.options
浏览 11提问于2021-09-07得票数 0
回答已采纳
我正在寻找一个爬虫，它能够处理与Ajax的页面，并能够在开始爬行网站之前与目标网站执行某些用户交互(例如，点击某些菜单项，填写一些表格等).I尝试webdriver/selenium (这是真正的网络抓取工具(用Java、Python或Ruby ...)如果是，我很感谢任何描述这一点的链接。
浏览 1提问于2011-06-28得票数 0
4回答
我想从一个网站上有TextFields，按钮等抓取数据。我的要求是填写文本字段并提交表单以获得结果，然后从结果页面中抓取数据点。(编辑)
我的要求是从ComboBoxes中选择值并单击search按钮，然后从结果页面中抓取数据点。附注:我正在使用selenium Firefox驱动程序从其他网站抓取数据，但这个解决方案并不好，因为<
浏览 1提问于2013-05-28得票数 8
回答已采纳
3回答
之后，我将驱动程序添加到以下路径：我所有的运行都是通过使用Pycharm终端，而不是内置的Debian终端。为了打开Firefox和web抓取，我运行：from selenium import webdriver
from selenium.webdriver.common.keysFile "/root/PycharmProjects/Examp
浏览 0提问于2018-03-06得票数 2
回答已采纳
我想提取31-Dec-19的日期，但无法这样做 IC = requests.get('https://www.reuters.com/companies/IMAX.P/financials/income-statement-annual
浏览 78提问于2020-04-09得票数 0
回答已采纳
云服务器
ICP备案
腾讯会议
云直播
对象存储
腾讯云开发者
