首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Python轻松爬取煎蛋网三千美女图片,且看教程

很多朋友都反应学 python 语言太枯燥,学不进去,其实学语言最好的方法是自己用所学的语言做项目,在项目中学习语言的用法。今天给大家带来的项目是用 python3 爬取煎蛋网妹子的图片。图片质量还不错,我放两张图片大家感受下。

别说话,先感受一下,仔细的感受一下!!!

开发环境

Python3 +Windows + requests + selenium + beautifulsoup

需要源码的朋友可以加Python学习群

它是五四八三七七八七五

程序思路

对目标网站链接进行分析,找出目标网站链接的规律。

从目标网站里面提取图片链接。

将图片下载并保存在目录中。

代码整体主要是由六个函数组成的:

get_html() :利用 webdriver 来请求对应的网站。

get_page():解析面跳转地址。

mkdir():判断目录是否存在,不存在就创建一个。

get_pic():提取图片链接。

download(allimgs):通过图片链接下载保存。

main():程序执行的主函数。

分页链接分析

创建目录

提取图片

用 BeautifulSoup 解析源码,用选择器循环提取图片的链接,并调用 download() 函数下载图片直至下载所有图片。

  • 发表于:
  • 原文链接https://kuaibao.qq.com/s/20180911A20BS100?refer=cp_1026
  • 腾讯「腾讯云开发者社区」是腾讯内容开放平台帐号(企鹅号)传播渠道之一,根据《腾讯内容开放平台服务协议》转载发布内容。
  • 如有侵权,请联系 cloudcommunity@tencent.com 删除。

扫码

添加站长 进交流群

领取专属 10元无门槛券

私享最新 技术干货

扫码加入开发者社群
领券