开发者社区

文档建议反馈控制台

最新优惠活动

文章/答案/技术大牛

发布

用PhantomJS提交表单后如何获取结果？

PhantomJS是一个基于WebKit的无界面浏览器，可以用于模拟用户在浏览器中的操作。当使用PhantomJS提交表单后，可以通过以下步骤获取结果：

首先，需要使用PhantomJS打开目标网页，并加载表单页面。可以使用PhantomJS提供的page.open()方法来实现。
接下来，可以使用page.evaluate()方法来执行JavaScript代码，模拟用户在表单页面中填写数据并提交表单。例如，可以使用document.querySelector()方法来选择表单元素，并使用element.value来设置表单元素的值。
提交表单后，可以使用PhantomJS的onLoadFinished事件来监听页面加载完成的事件。一旦页面加载完成，可以在回调函数中执行获取结果的操作。
获取结果的方式取决于表单提交后返回的页面内容。如果结果是在返回的页面中展示的，可以使用page.content来获取页面的HTML内容，并使用相应的方法（例如正则表达式、DOM解析等）来提取结果。

需要注意的是，PhantomJS是一个停止维护的项目，推荐使用更现代化的无头浏览器，如Puppeteer（基于Chrome）或Headless Chrome（Chrome的无头模式）来替代PhantomJS。这些工具提供了更好的性能和更多的功能。

腾讯云相关产品和产品介绍链接地址：

腾讯云函数（Serverless）：https://cloud.tencent.com/product/scf
腾讯云云服务器（CVM）：https://cloud.tencent.com/product/cvm
腾讯云容器服务（TKE）：https://cloud.tencent.com/product/tke
腾讯云数据库（TencentDB）：https://cloud.tencent.com/product/cdb
腾讯云对象存储（COS）：https://cloud.tencent.com/product/cos
腾讯云人工智能（AI）：https://cloud.tencent.com/product/ai
腾讯云物联网（IoT）：https://cloud.tencent.com/product/iotexplorer
腾讯云移动开发（移动推送、移动分析等）：https://cloud.tencent.com/product/mobile
腾讯云区块链（BCS）：https://cloud.tencent.com/product/bcs
腾讯云游戏多媒体引擎（GME）：https://cloud.tencent.com/product/gme
腾讯云直播（CSS）：https://cloud.tencent.com/product/css

页面内容是否对你有帮助？

有帮助

没帮助

相关·内容

form表单提交后如何弹出对话框_ajax提交form表单数据

============ 定义一个函数： function sumbit_sure(){ var gnl=confirm("确定要提交...form的onsubmit里调用就可以了：点击我提交

3.6K5 0

Django表单提交后实现获取相同name的不同value值

打开chrome ，提交表单，看FormData,其实浏览器已经向后台提交了两个name 为’key ‘的值。 ? 后台也成功接收到一个列表 [‘1’, ‘2’]。.../14348321/getting-distinct-values-from-inputs-that-share-the-same-name 补充知识：django中form从后端查询回显到前端以及表单的提交到服务器操作...4 ：新建一个searchstu.html文件，用来展示用的。...因此我把form放在for循环内部，这样循环一条就会多一个form表单。 5：实现提交后后端的处理函数，通过get获取。...stu.objects.filter(pk=id).first() stu1.delete() return HttpResponseRedirect("/homework/showstu") 以上这篇Django表单提交后实现获取相同

3.8K3 0

Python3网络爬虫(十一)：爬虫黑科技之让你的爬虫程序更像人类用户的行为(代理IP池等)

每个网站都有不同的请求头，如何获取这个请求头呢？可以用我从前提到过的Fiddler或者审查元素的方法，我们可以根据实际情况进行配置。...随着越来越多的网站开始用 cookie 存储状态变量来管理用户状态，在找到另一个最佳用途之前，隐含字段主要用于阻止爬虫自动提交表单。 ...第一种是表单页面上的一个字段可以用服务器生成的随机变量表示。如果提交时这个值不在表单处理页面上，服务器就有理由认为这个提交不是从原始表单页面上提交的，而是由一个网络机器人直接提交到表单处理页面的。...2.5 爬虫如何避开蜜罐虽然在进行网络数据采集时用 CSS 属性区分有用信息和无用信息会很容易（比如，通过读取 id和 class 标签获取信息），但这么做有时也会出问题。...这里我是用”#”符号隔开，使用之前，只需要spilt()方法，就可以提取出信息。 ? 已经获取了IP，如何验证这个IP是否可用呢？

2.8K7 1

Python3网络爬虫(十一)：爬虫黑科技之让你的爬虫程序更像人类用户的行为(代理IP池等)

每个网站都有不同的请求头，如何获取这个请求头呢？可以用我从前提到过的Fiddler或者审查元素的方法，我们可以根据实际情况进行配置。...通过Selenium和PhantomJS，我们可以很好的处理一些需要事件执行后才能获得的cookie。...第一种是表单页面上的一个字段可以用服务器生成的随机变量表示。如果提交时这个值不在表单处理页面上，服务器就有理由认为这个提交不是从原始表单页面上提交的，而是由一个网络机器人直接提交到表单处理页面的。...2.5 爬虫如何避开蜜罐虽然在进行网络数据采集时用 CSS 属性区分有用信息和无用信息会很容易（比如，通过读取 id和 class 标签获取信息），但这么做有时也会出问题。...这里我是用”#”符号隔开，使用之前，只需要spilt()方法，就可以提取出信息。 [11.png] 已经获取了IP，如何验证这个IP是否可用呢？

1.8K3 0

Python模拟登录的几种方法（转）

具体步骤： 1.用浏览器登录，获取浏览器里的cookie字符串先使用浏览器登录。再打开开发者工具，转到network选项卡。...cookie访问原理：我们先在程序中向网站发出登录请求，也就是提交包含登录信息的表单（用户名、密码等）。...从响应中得到cookie，今后在访问其他页面时也带上这个cookie，就能得到只有登录后才能看到的页面。具体步骤： 1.找出表单提交到的页面还是要利用浏览器的开发者工具。...也可以看看左边的Name，如果含有login这个词，有可能就是提交表单的页面（不一定！）。 ? 这里要强调一点，“表单提交到的页面”通常并不是你填写用户名和密码的页面！所以要利用工具来找到它。...2.找出要提交的数据虽然你在浏览器里登陆时只填了用户名和密码，但表单里包含的数据可不只这些。从Form Data里就可以看到需要提交的所有数据。 ?

1.5K3 0

如何通过 PhantomJS 模拟用户行为抓取动态网页内容

为了应对这一挑战，PhantomJS 作为一个无头浏览器，能够模拟用户行为并执行 JavaScript，成为了获取动态网页内容的有效工具。...本文将详细介绍如何通过 PhantomJS 模拟用户行为，结合爬虫代理 IP 技术，抓取大众点评上的商家信息，包括店名、地址和评分等关键数据。...自动化能力：支持模拟用户行为，如点击、滚动、提交表单等。3. 使用代理 IP 模拟请求在实际的网页抓取过程中，使用代理IP是规避限制的重要技术手段。通过代理IP爬虫可以避免因频繁请求导致的拒绝响应。...实例下面的代码展示了如何使用 PhantomJS 结合爬虫代理IP技术抓取动态网页内容，并模拟用户行为。...本文的代码展示了如何使用 PhantomJS 和爬虫代理服务抓取动态内容，实践中可以根据需要进一步调整代码实现。

1281 0

通过 selenium 和 flask 中转后利用 sqlmap 进行注入

前端提交登陆表单时数据包加密了, 而且有个 sign 字符串每次都不一样用于校验, 应该是用 js 加密 ? ?...0x01 找加密的 js 文件注入的地方是获取验证码时的手机号, 刚开始想着先找到 js 加密的函数, 然后生成 sign 再组数据包发送。...就像记一次SQL Server报错注入中一样, 用 selenium 或者 PhantomJS 执行 js 代码生成sign 一番查找发现了加密的 js 文件函数, 但是用的是 angular 这个前端框架...想起昨天有个大佬说用 PhantomJS + flask 这样、那样、再这样, 中转数据就可以用 sqlmap 跑了, emmmmm。。。 ?...payload 加到表单中, 然后模拟提交表单 0x03 selenium 和 flask 进行中转没有接触过 PhantomJS, 但是 selenium 以前用过, 可以尝试下大概看了下, 我们需要注意动态的消息提示框

1K4 0

腾讯云上Selenium用法示例

有人问，为什么不直接用浏览器而用一个没界面的 PhantomJS 呢？答案是：效率高！...不过这样会导致的结果就是输入的文本不会自动清除。所以输入的文本都会在原来的基础上继续输入。你可以用下面的方法来清除输入文本的内容。 element.clear() 这样输入的文本会被清除。...options = select.options 如果你把表单都填好了，最后肯定要提交表单对吧。...怎吗提交呢？很简单 driver.find_element_by_id("submit").click() 这样就相当于模拟点击了 submit 按钮，做到表单提交。...当然你也可以单独提交某个元素 element.submit()方法，WebDriver 会在表单中寻找它所在的表单，如果发现这个元素并没有被表单所包围，那么程序会抛出 NoSuchElementException

3.6K0 0

Headless Testing入坑指南

因为你可以利用无头测试工具提供的命令行+api来自动化地替代大量的简单重复操作，如输入页面地址、刷新页面、表单提交、确认显示数据是否正确等等。...CasperJS专为PhantomJS而生，它提供了一个基本的测试套件，它允许你运行完整的功能测试，也允许你从Web页面中获取数据。...，然后把运行结果输出到了终端。...总结在本文中，我们了解了无头测试如何帮助作为开发者的你，并探索了一些无头测试工具和示例。无头测试在web开发中是非常有用的工具。...通过无头测试，您可以生成网站的截图和pdf文件，从网站上抓取内容，自动提交表单，并模拟键盘输入。当与无头浏览器结合使用时，它允许你在完全成熟的浏览器中做任何你可以做的事情，而不需要浏览器。

1.8K5 0

小白用Python | 超详细的Python实现新浪微博模拟登陆

client=ssologin.js(v1.4.18) 这个地址就是进行post提交数据的地址，下面是我自己提交的数据：这里我们需要自己构造su(加密后的用户名),sp(加密后的密码),servertime.../firefox的方案直接模拟人的操作填写表单提交数据进行模拟登陆，这种方式最为简单，效率稍微低一些。...于是我就是用phantomjs来作为运行时环境.考虑到有同学不知道phantomjs怎么使用，这里我简要说一下吧。...使用ubuntu的同学可以直接用sudo apt-get install phantomjs，就可以安装使用了。我直接把加密的js文件使用phantomjs运行，果然好着呢。.... ，这一步会将请求重定向，返回当前账号的登陆信息，如下图：那么问题来了，怎么获取上面的请求地址呢。

1.1K9 0

超详细的Python实现微博模拟登陆,小白都能懂

但可能你们会问我是如何知道的呢，待会儿我会讲到。经过实测，如果我们这里不给su传参数，其实也是可以的。为了最真实的模拟用户登录，我们最好还是带上它的值。.../firefox的方案直接模拟人的操作填写表单提交数据进行模拟登陆，这种方式最为简单，效率稍微低一些。...于是我就是用phantomjs来作为运行时环境.考虑到有同学不知道phantomjs怎么使用，这里我简要说一下吧。...使用ubuntu的同学可以直接用sudo apt-get install phantomjs，就可以安装使用了。我直接把加密的js文件使用phantomjs运行，果然好着呢。...那么问题来了，怎么获取上面的请求地址呢。

8892 0

九.网络爬虫之Selenium基础技术万字详解（定位元素、常用方法、鼠标操作）

PhantomJS常用于页面自动化、网络监测、网页截屏以及无界面测试等。在官网http://phantomjs.org/下载PhantomJS解压后如图5所示。...当Selenium安装成功并且PhantomJS下载配置好后，下面这代代码是调用方法。其中executable_path参数设置PhantomJS的路径。...定位“name”下拉菜单标签之后，我们调用SELECT类选中选项，同时select_by_visible_text()用于显示选中菜单，也可以提交Form表单。...select.options即可，当读者填写完表单后，可以通过submit()函数提交，或者找到提交按钮后调用下面函数提交表单。...，Selenium技术的优势就体现出来了，它通过控制鼠标模拟登录或提交表单从而爬取数据，但其缺点是爬取效率较低，BeautifulSoup速度更快些。

4.7K1 0

Python模拟登录的几种方法

具体步骤： 1.用浏览器登录，获取浏览器里的cookie字符串　　先使用浏览器登录。再打开开发者工具，转到network选项卡。...cookie访问原理：　　我们先在程序中向网站发出登录请求，也就是提交包含登录信息的表单（用户名、密码等）。...从响应中得到cookie，今后在访问其他页面时也带上这个cookie，就能得到只有登录后才能看到的页面。具体步骤： 1.找出表单提交到的页面　　还是要利用浏览器的开发者工具。...也可以看看左边的Name，如果含有login这个词，有可能就是提交表单的页面（不一定！）。 ? 　　这里要强调一点，“表单提交到的页面”通常并不是你填写用户名和密码的页面！所以要利用工具来找到它。...2.找出要提交的数据　　虽然你在浏览器里登陆时只填了用户名和密码，但表单里包含的数据可不只这些。从Form Data里就可以看到需要提交的所有数据。 ?

4.1K4 1

selenium模拟浏览器&PhantomJS

下载完成后，解压压缩包,直接将解压后的Phantomjs.exe复制到python的目录中就可以了,如下图 ? 在python环境中测试一下,如下 #!...从服务器返回数据，由PhantomJS负责，获取返回的数据用Selenium.Webdriver自带的方法page_source,例如: from selenium import webdriver URL...第二种方法:直接用selenium&PhantomJS打开百度的主页，然后模拟搜索关键字。...: Python selenium_百度搜索此时browser已经获取到了搜索的结果了获取有效数据位置获取“有效数据”位置或者说是element,先定位搜索结果的标题和链接。...("result c-container ") print(len(resultElements)) 从位置中获取有效数据有效数据的位置确定后，如何从位置中过滤出有效的数据呢？

1.5K3 0

「Python爬虫系列讲解」八、Selenium 技术

3 个超链接都是用同一个 id 名称 “link”，通过 find_elements_by_id() 函数定位获取之后，再调用 for 循环输出结果，如下（展示核心代码）： test_div = driver.find_elements_by_id...根据上图，用同样的方法定位输入框并清除默认数据后输入账户密码，单击登录。...定位 "name" 下拉菜单标签后，调用 SELECT 类选中选项，同时 select_by_visible_text() 用于显示选中的菜单，也可以提交 Form 表单，具体代码如下： from selenium.webdriver.support.ui...当填写完表单后，可以通过 submit() 函数提交，或者找到提交按钮后调用 “ driver.find_element_by_id("submit").click*() ” 提交。...对于目标网页需要验证登录后才能爬取，所爬取的数据位于弹出对话框中或所爬取的数据通过超链接跳转到了新的窗口等情况，Selenium 技术的优势就体现出来了，它可以通过控制鼠标模拟登录或提交表单来爬取数据，

7K2 0

啥是无头浏览器，都能干啥？一文说清楚

引言您如何知道您正在开发的网站的用户界面(UI)是否正常工作，以及该网站作为一个整体是否提供了最佳的用户体验(UX)?...在一个无头测试环境，你可以编写和执行脚本: 测试基本流程和可选流程模拟单击链接和按钮自动填写和提交表格测试SSL性能尝试不同的服务器负载获取关于页面响应时间的报告获取有用的网站代码截屏查看结果...收集关于站点如何响应的报告和图像，并使用这些信息进行更改以改进UI。 PhantomJS 复杂性在现代internet环境中很常见，而PhantomJS的构建就是为了使用基本的命令行测试来处理这一切。...这涵盖了大量的新浏览器和旧浏览器，帮助确保每个用户在网站上线后都能获得更好的体验。电子商务网站很大程度上依赖于HtmlUnit允许你测试的大部分元素。...表单提交、站点安全和导航都是电子商务UI的组成部分，对转换和销售有重要影响。糟糕的用户界面意味着糟糕的用户体验，在快节奏的网络世界里，消费者会放弃这样的网站，转而在竞争对手的平台进行购物。

1.7K1 0

Python下利用Selenium获取动态页面数据

使用selenium模拟浏览器行为更新网页获取更新后的数据。本文接下来着重讲述这种方法。...2.PhantomJS，这是一个无界面的，可脚本编程的WebKit浏览器引擎，百度进行搜索，在其官网下进行下载，下载后无需安装，放到指定路径下，在使用时只需指定文件所在路径即可。...因此本文思想就是利用selenium模拟浏览器进行点击，点击“下一页”后页面数据进行更新，获取更新后的页面数据即可。...，网上也有人用firefox，chrome，但是我没有成功，用这个也挺方便　　driver =webdriver.PhantomJS(executable_path="C:/phantomjs.exe...selenium的功能非常强大，用在爬虫上能够解决很多一般爬虫解决不了的问题，它可以模拟点击、鼠标移动，可以提交表单（应用如：登陆邮箱账号、登陆wifi等，网上有很多实例，本人暂时还没有尝试过），当你遇到一些非常规的网站数据爬取起来非常棘手时

3.2K3 0

selenium自动登录挂stackoverflow的金牌

，https://bitbucket.org/ariya/phantomjs/downloads/phantomjs-1.9.7-windows.zip，解压后可以看到一个phantomjs.exe的文件...()linux下命令装即可自动化程序设计程序很简单,使用seleium这模块进行浏览器控制,更具密码帐号的表单进行填写即可....这将决定你下方如何做定时启动的设置....然后问题来了,如何定时运行呢?...因为crontab是默认不可使用可视化界面的如果你用的是chrome的内核就不运行了.,所以说得这么处理.

9255 1

基于PhantomJS的动态爬虫引擎

爬虫功能爬虫主要需要具备基本功能： javascript动态解析能力 hook所有的网络请求静态页面链接、表单自动分析能力自动交互能力 1.1 静态页面链接和表单自动分析 phantomjs提供page.evaluate...，获取url和对应的参数 1.4 自动交互爬虫的自动交互能力就是需要获取页面所有事件，并想办法触发事件，最后获取事件触发的结果。...分解下自动触发事件的三个步骤，逐步实现 1、获取事件 2、触发事件 3、获取事件触发结果 2.1 内敛事件获取内敛事件：遍历节点，获取所有节点内的onxx属性和javascript:属性值触发内敛事件...获取form表单属性和值获取a标签的href值获取link标签的href值获取area标签的href值获取img标签的src值获取embed标签的src值获取video标签的src值获取audio...，自动填写对应类型的表单数值根据后缀禁止静态资源的加载，因为如果根据Content-Type判断将导致结果目录树不全尽量获取所有标签中的链接，比如图片，视频等，因为可能存在SSRF、XSS、文件包含等漏洞

1.7K4 0

前端自动化测试探索

如何测试多浏览器如果想测试多浏览器下的兼容性情况，只需要拿到多个浏览器下的截图即可。...与自动化测试的结合回到刚才的需求，如何通过casperjs实现这些检测需求呢。...casperjs支持执行JS来获取返回结果： ```javascript this.page.evaluate(function(text) { $(“#ueditor_replace”).text(text...工具会根据用户提交配置自动运行并将结果返还给用户。与CI的结合讲到这里，上面这些步骤很像ci系统啦！如果能通过ci实现一系列的自动化部署测试等工作，使用上就更加顺畅了。...当然如果你要自己实现一套类似ci的流程也不复杂，因为对于上面提到的自动化测试来说只需要一个队列系统处理批量提交的测试任务然后将运行结果反馈给用户即可。当然前端测试可能对于自定义的报表输出要求更高点。

1.5K10 0

点击加载更多

扫码

添加站长进交流群

领取专属 10元无门槛券

手把手带您无忧上云

扫码加入开发者社群

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭