首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Python素材下载爬虫,多线程rar下载爬虫

    一个多线程素材下载爬虫,实现多线程素材下载,包含素材包rar,素材图及素材描述,应用了经典的生产者与消费者模式,不过数据没有下载全,容易出现卡死的问题,期待后期能够解决相关问题,可以算是一个半成品,供大家参考和学习...,素材是否有下载权限 如果能够下载,获取到下载相关数据,下载路径链接以及素材包名,不能下载则返回为空 if int(req.xpath('//div[@class="download"]/dl[@class...req.xpath('//div[@class="download"]/dl[@class="downlink"]/dt/li/a/@href')[0] down_name = f'{h2}/{h2}.rar...div[@class="download"]/dl[@class="downlink"]/dt/li/a/@href')[0] down_name = f'{h2}/{h2}.rar...# 下载素材 def down(self, down_url, down_name): print("开始下载素材...")

    70920

    Linux压缩打包介绍,gzip压缩工具,bzip2压缩工具,xz压缩工具

    笔记内容: l 6.1 压缩打包介绍 l 6.2 gzip压缩工具 l 6.3 bzip2压缩工具 l 6.4 xz压缩工具 笔记日期:2017.8.5 6.1 压缩打包介绍 ?...家用网络只有下载速度快,上传速度慢,所以服务器机房的网络带宽比较昂贵,压缩文件就是节省带宽资源的方法之一。...在Linux里文件的后缀名可以任意的去自定义,但是最好还是遵循常规的格式去定义文件的后缀,这有利于方便区分、识别文件。 6.2 gzip压缩工具 ? 例如我使用gzip压缩一个1.txt文件: ?...注意:gzip不能压缩目录 6.3 bzip2压缩工具 ? 这个bzip工具比起gzip来说,要压缩得更狠一些,也就代表着耗费的cpu资源更多,而且这两个工具的压缩算法不一样。...6.4 xz压缩工具 ? xz压缩工具和之前的两个压缩工具的用法也差不多,但是并不经常使用,但是在常用的tar包里面,会经常看到后缀为tar.xz的压缩包,所以此工具也是要了解一下的。

    1.9K20

    linux下解压rar压缩文件

    在windows下我们压缩解压文件通常后缀为rar,在linux下我们压缩解压文件通常后缀为tar 默认在linux下我们不能解压压缩rar文件 我们可以下载rarlinux安装包实现解压压缩后缀为...rar的包 下载地址:WinRAR archiver, a powerful tool to process RAR and ZIP files 安装 ~]# wget https://www.rarlab.com.../rar/rarlinux-x64-610.tar.gz ~]# tar -zxvf rarlinux-x64-610.tar.gz -C /opt ~]# cd /opt/rar/ ~]# make...&& make install 注:如果linux不支持网络则要去下载地址去单独下载 使用: rar命令 # 格式: ~]# rar [命令参数] -[开关] [压缩文件] # 命令参数:...e test.rar DestPath  #解压(会在当前解压目录内产生一个以压缩包名字命名的目录,目录内是解压内容,推荐使用) ~]# unrar x test.rar DestPath

    6.6K20

    Linux嵌入式开发——压缩与解压缩

    文章目录 Linux嵌入式开发——压缩与解压缩 一、前期准备 二、Linux下的压缩格式 三、gzip压缩工具 1、gzip压缩文件 2、gzip压缩文件夹 四、bzip2压缩工具 五、tar打包工具...使用图形界面压缩 Linux嵌入式开发——压缩与解压缩 一、前期准备 首先我们需要在Windows下安装7-ZIP软件,这个比较简单,到官网去下载,然后安装即可。...二、Linux下的压缩格式 Linux下常用的压缩扩展名有:.tar、.tar.bz2、.tar.gz,其中.tar.bz2、.tar.gz使用的较多。...三、gzip压缩工具 1、gzip压缩文件 gzip工具负责压缩和解压缩.gz格式的压缩包,具体的使用方法如下所示。...四、bzip2压缩工具 和gzip类似,只是bzip2工具负责压缩和解压缩.bz2格式的压缩包。

    1.1K30

    Linux下解压缩命令rar如何用

    这篇文章主要介绍“Linux下解压缩命令rar如何用”,有一些人在Linux下解压缩命令rar如何用的问题上存在疑惑,接下来小编就给大家来介绍一下相关的内容,希望对大家解答有帮助,有这个方面学习需要的朋友就继续往下看吧...a test.rar file1.txt 若test.rar文件不存在,则打包file1.txt文件成test.rar 例:rar a test.rar file2.txt 若test.rar文件已经存在...例:rar a -ed test.rar dir1 添加dir1到test.rar中时,不对空目录进行操作 rar e -ed test.rar 解压test.rar时,不生成空目录 k 锁定文件 例...:rar a -k test.rar file1.txt 等价于rar a test.rar file1.txt rar k test.rar m 设定压缩比等级(0-存储,3-默认,5-最大) 例:rar...递归的将a.rar解压到当前目录 感谢各位的阅读,以上就是“Linux下解压缩命令rar如何用”的内容了,经过本文的学习后,相信大家对Linux下解压缩命令rar如何用都有更深刻的体会了吧。

    2.5K20
    领券