很多朋友都反应学 python 语言太枯燥,学不进去,其实学语言最好的方法是自己用所学的语言做项目,在项目中学习语言的用法。今天给大家带来的项目是用 python3 爬取煎蛋网妹子的图片。图片质量还不错,我放两张图片大家感受下。
别说话,先感受一下,仔细的感受一下!!!
开发环境
Python3 +Windows + requests + selenium + beautifulsoup
需要源码的朋友可以加Python学习群
它是五四八三七七八七五
程序思路
对目标网站链接进行分析,找出目标网站链接的规律。
从目标网站里面提取图片链接。
将图片下载并保存在目录中。
代码整体主要是由六个函数组成的:
get_html() :利用 webdriver 来请求对应的网站。
get_page():解析面跳转地址。
mkdir():判断目录是否存在,不存在就创建一个。
get_pic():提取图片链接。
download(allimgs):通过图片链接下载保存。
main():程序执行的主函数。
分页链接分析
创建目录
提取图片
用 BeautifulSoup 解析源码,用选择器循环提取图片的链接,并调用 download() 函数下载图片直至下载所有图片。
领取专属 10元无门槛券
私享最新 技术干货