首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

python爬取qq空间说说

所以当我们想要打开浏览器去获取好友空间的时候必定会要求进行登录,接着再是查看说说。那么我们先把登录步骤给解决了。...1.模拟登录QQ空间 因为想更直观的看到整个登录过程所以就没有用selenium+phantomjs,而是结合Chorme使用。...既然已经搞清楚数据是怎么来的那么就可以开始考虑将获取的数据保存到数据库里了,这次我们选择的是MongoDB,MongoDB的数据储存格式为BSON类似于JSON。...在获取过程需要考虑两个问题,一是你是否有权限访问该空间,二是在能访问的情况下不能无止境的爬下去需要判断该空间说说是否爬取完毕。在爬取过程中将不能访问的QQCode存入list在最后跑完的时候输出。

3.8K130

Python 爬取 QQ 空间说说和相册

QQ 空间在 2005 年被腾讯开发,已经经历了 15 个年头,在还没有微信的年代,看网友发表的心情、心事、照片大多都在 QQ 空间。...它承载了80、90 后的大量青春,下面我们一起 selenium 模块导出说说和相册回忆青春吧 安装 selenium selenium 是一个在浏览器中运行,以模拟用户操作浏览器的方式获取网页源码,...,password, business_qq): ''' 登陆 :param login_qq: 登陆QQ :param password: 登陆的QQ密码...# 回到主文档 driver.switch_to.default_content() # 等待页面加载 time.sleep(3) 相册 下载相册里面的照片需要..., name)) # 取下面的 当前照片张数/总照片数量 counts = driver.find_element_by_xpath('//*[@id=

3.3K30
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    去世、盗号、封号……QQ钱包的钱怎么办!

    最近网上流传着“如果用户去世后,QQ钱包的钱会被腾讯充公”的信息。这其实是一个谣言。...根据《QQ钱包支付用户服务协议》和《财付通服务协议》,QQ钱包账户中存有余额,QQ钱包和财付通公司将会为用户妥善保管,并不会出现充公的情况。...具体材料如下: 二、QQ账号被盗 当用户QQ账号被盗时,QQ钱包内的资金还是非常安全的。...三、QQ账号无法登录 当用户出现QQ账号被封导致无法登录时,用户可通过“账户资金管理”功能进行QQ钱包内的余额提取、理财通提现和微粒贷还款。...虽然,目前QQ盗号情况已大幅减少,但是广大用户还要有网络安全意识,采取使用最新版的QQ软件、不在非腾讯官方的网站或软件中输入QQ帐号和密码、不要访问陌生人发来的安全性未知的网址,并定期修改QQ密码等措施

    3.3K00

    函数快速批量处理COS里面的日志

    本来CLS日志服务可以直接触发函数来快速处理的,不过这样触发次数就有点多了,比如说被处理的日志本来就是函数生成的,那么函数触发次数就直接要翻番,如果日志不是需要及时处理的话,可以让它在CLS里面累计上几分钟...,然后用定时器触发一个函数,通过日志服务查询接口 SearchLog 来实现批量处理。...所以更好的方式可能是每分钟通过 日志下载接口 来下载指定时间段的日志处理,或者把日志自动投递到COS,COS的创建文件事件做触发器来触发函数执行,然后把日志文件下载过来批量处理。...这样一个日志文件可能会非常大,如果整个文件读到内存中处理的话需要给函数申请足够多的内存。更好的方式是流的方式来处理。...因为COS的sdk可以把文件读成流,日志下载接口生成的日志文件也可以request读成流。

    600120

    怎么服务器搭建私有桌面?桌面怎么使用?

    不知道大家对面的了解有多少,即使了解得不够多,至少应该听过这个名词。可能很多人听到“”这个字都会觉得很虚无缥缈,但面的作用却是实实在在的。那么,怎么服务器搭建私有桌面?...以及桌面怎么使用?下文会对这两个问题做个详细的介绍。 怎么服务器搭建私有桌面? 首先大家需要安装virtualbox以及git bush,具体安装流程不再赘述。接下来就是创建虚拟机。...另外注意的是,在选择存储空间时最好不要低于32G,点击创建以后就可以创建完成了。 下面双击刚刚创建的虚拟机,选择下载好的镜像文件,点击启动,点击安装。语言当然是选择汉语。...以上就是怎么服务器搭建私有面的详细介绍。 桌面怎么使用? 桌面创建完成以后如何使用,也是大家关心的问题。首先安装SV后并打开,点击后会有一个界面,输入公司提供的ip地址以及端口号。...点击连接后就可以使用桌面了。整个过程也是非常简单。 怎么服务器搭建私有桌面?桌面怎么使用?这两个问题我们在上文都做了详细的介绍,大家可以作为参考。

    46.2K31

    魔术的集合、映射和关系(二)——集合怎么

    上一讲我们通过一些故事讲到了集合的概念和来历,对其意义有了一个基本的认识: 魔术的集合、映射和关系(一)——集合是个啥? 今天,我们来说说,基本集合到底怎么,有什么?...不用纠结,这是数学概念起源时候的借助对方互相定义,怎么讲都讲不清,于是干脆说集合是个不加定义的概念好了。你得先承认这个玩意,再往后推导。...和我们代数x, y, z来表示未知数是一样,但一般大写字母表达,一般会遵守这些基本习惯,没必要特立独行。...这是函数每个原象中的元素仅有唯一象空间元素与之对应决定的,不允许有两个,故互异性成立。 这些性质也是不加定义的,是人们抽象数学概念对具体问题的总结归纳和规定。...我们生物里面的“界门纲目科属种”的分类就是典型的树状分类体系;NLP里面的文本分来也是去相对找到一种合理的多级树状体系,哪怕不可能用这个体系解决所有问题,也比没有好,而那些多粒度,多层次的表达交给bool

    1.3K10

    文件空间映射mmap()函数(是什么,为什么,怎么

    4.文件空间映射mmap()函数 是什么 1、mmap()函数用来将文件或者设备映射到内存中。 2、mmap的特点是按需调页。最开始只申请vma,并不调真正的页。...3、如果系统频繁的使用mmap操作,而且每次mmap的size都不同,那么就会使得内存可能缺少足够的连续的内存空间。 那又怎么了,人家就是用来操作大型数据的。...你其他方式来进行大量数据传递简直不理智。...怎么 1、开启文件空间映射函数mmap() #include void *mmap(void *start,size_t length,int prot,int flags,...,取值范围 { PROT_EXEC:映射区可执行 PROT_READ:映射区可读取 PROT_WRITE:映射区可写入 PROT_NONE:映射区不可存取 } 如果要几个功能合在一起,管道符

    2.5K20

    桌面是什么怎么连接服务器?面的主流架构包括什么?

    现在很多人为了面的功能更加强大,都会选择将其与服务器相连,从而更好地更好地使用桌面上的软件系统。那么桌面是什么怎么连接服务器?面的主流架构包括什么?一起通过本文学习一下吧!...面的主流架构包括什么? 目前就国内的市场来看,比较受欢迎的桌面技术架构分为VDI/VOI/IDV这三种,而且不同的架构都有其独特的优势,可以应用于各种场景之中。...桌面是什么怎么连接服务器? 桌面其实就是一个虚拟化的界面,可以为用户提供更多的虚拟服务。本文主要以腾讯为例,告诉大家桌面是什么怎么连接服务器。...前期需要准备的材料:windows操作系统的服务器、windows本地电脑。具体方法如下: 1、打开腾讯的网站,跳转登录页面。 2、登录已经注册好的账号后进入管理中心。...桌面是什么怎么连接服务器?面的主流架构包括什么?以上就是小编给大家讲解的连接方法,大家可以按照这些步骤自己操作一下。需要注意的是,IP地址一定要是公网地址哦。

    5.5K10

    腾讯加速怎么,腾讯CDN接入教程

    当然你也可以手动验证,使用ping命令,ping一下你的域名,如果PING到后缀为cdntip.com或后缀为tcdn.qq.com表示域名CNAME已生效。...图6.png 至此,域名的接入工作,算是搞定了,接下来,我们一起来看看腾讯免费CDN使用https部署教程。 高级缓存设置 如果你没有什么特殊要求,保持默认即可。...当然,对于搜索引擎优化,对于搜索引擎的referer怎么设置,小编还在研究中,如果小伙伴您有好的方法,欢迎与小编分享。...如果你是自己有其它第三方证书,复制所需的证书内容到对应的框保存即可。如果是申请了腾讯的SSL,选择腾讯托管证书。 图13.png 在这里选择对应的证书,别选错了哦。...图17.png 注意事项 1、域名要有备案号,网站必须合法 2、要结合网站实际情况配置缓存时间,别乱缓存一气,导致CDN越越慢 3、回源域名,不能和当前CDN域名一样,注意修改为源站域名,系统有时候会默认为当前

    35.6K41

    智能硬盘怎么 本地硬盘和硬盘的差异

    普通的硬盘已经无法满足企业应用的需要,因此出现了智能硬盘,智能硬盘怎么呢? 智能硬盘怎么?...智能硬盘怎么这个问题是许多人都想了解的,智能硬盘之所以诞生,是因为硬盘比起本地硬盘拥有更多显而易见的优势。...按用途来说,智能硬盘的用途和本地硬盘的用途是相似的,都是给服务器提供一个计算和储存数据的空间。...在使用硬盘的时候,要先将硬盘正确挂载到服务器上,进行一系列的专业设置之后,服务器才可以使用于硬盘来完成一系列的读写操作。 本地硬盘和硬盘的差异 上面了解了智能硬盘怎么?...而本地硬盘上面的内容,如果没有经过及时备份的话,是有可能随时丢失的。在扩展内存方面,本地硬盘也没有硬盘那么方便和快捷。并且硬盘的价格不会比本地硬盘高出多少。 以上就是智能硬盘怎么的相关内容。

    6.3K30

    Web IDErbenv创建ruby虚拟执行环境

    一些测试工具,很多都是Ruby实现的,这些工具可能会要求在不同的Ruby版本下才能兼容运行,所以一个Ruby虚拟管理工具很必要,就像Python的Conda, rbenv就是这么一个工具。...我们在Coding.net 的WEB IDE创建一个Ruby测试工具环境, 的是Web IDE的 All In One环境, 之前应该有Ruby环境支持, 经过Coding.net的各种Web IDE...如果是Mac系统安装比较简单,但是Coding.net Web IDE是2H 4GB的Ubuntuapt-get安装,因为是默认的ZSH,有些Bash Shell不太适合,比下下面这种。...apt-get remove ruby-build 然后,Git下载的方式安装。...编辑切换为居中 .zprofile 如果的是Bash就放到Bash的配置文件中,这样打开新终端窗口的时候,ruby就跳到虚拟环境中。

    1.1K20

    小程序·开发打造功能全面的博客小程序丨实战

    小程序·开发将博客小程序常用功能“一网打尽” 本文介绍mini博客小程序的详情页的功能按钮如何实现,具体包括评论、点赞、收藏和海报功能,这里记录下整个实现过程和实际编码中的一些坑。...我一般的经验是,先在脑子过一遍需要的功能和大致流程,然后在笔记稍微画下「最最基础的原型,相当于产品的角色」。...然后就开始直接开始搭建页面和简单的交互「使用假数据,优先完成页面」,在构造页面的时候其实也能够补充最初想法上一些流程上的缺陷,这样在设计后端和数据库结构的时候可以补上,整体下来也基本比较完善了。...原因是根据官方文档介绍,小程序 npm 包只有构建文件生成目录会被算入小程序包的占用空间,上传小程序代码时也只会上传该目录的代码。这样大大减少了上传的代码体积。...resultUrl.fileList } return [] } 但这里有个尴尬的地方是,生成小程序码的api中的scene参数最大长度是32,而文章id的长度已经是32了,无法根据文章id进行拼接跳转页面的路径了

    1.2K101

    怎么cdn提高性能?主要能够提高哪几方面的性能?

    所以怎么cdn提高性能?这个问题一直都困扰着大家。 image.png 怎么cdn提高性能? 怎么cdn提高性能?...另外人们还需要新建存储空间,在存储空间新建的时候,包括了三个方面,分别是存储空间名称、存储区域还有访问控制,必须要选择公开的空间才行,如果是私人空间的话,那么别人根本就没有办法访问。...主要提高哪几方面的性能? 使用cdn缓存后可以缓解服务器的压力,如果自己所使用的服务器压力确实是非常大的话,很有可能会影响到人们的使用过程,因此人们可以利用缓存的方法来加以遏制。...以上就是怎么cdn提高性能的相关介绍,操作结束之后会发现,在网络硬件方面上虽然没有发生任何的变化,但是在提速方面上却产生了巨大的作用。可以方便人们的日常工作。

    78110

    数据库怎么选购 数据库有什么

    随着网络技术的不断发展,网络上的各种应用不断的出现,而数据库受到了很多人都欢迎,现在的很多公司基本上都会使用数据库,但是很多人对于数据库怎么选购却并不了解,以下就是关于数据库的相关内容。...数据库怎么选购 数据库怎么选购?如果大家想要购买数据库,就需要去到专门的官网了,目前网络上有很多的网络服务商,大家在选择这些服务商的时候,一定要谨慎的选择,因为有些服务商的数据库并不好用。...在腾讯里面,就能够为大家提供数据库,使用起来非常的简单,而且功能非常的强大。在选购的时候也需要考虑其它的方面,如业务应用场景、服务区域、计费方式等等。...数据库有什么 从某种程度上来说,数据库是一种非实体化的资产,它对于企业的管理非常有用。首先,使用数据库是低成本的,因为它可以提供应用软件服务,和其他的软件设备相比较起来,数据库的成本要低很多。...而且数据库是非常可靠的,因为里面有着自动备份的设置,所以并不用担心数据会丢失。数据库还可以轻松的实现部署,在短时间内就可以进行使用了。 数据库怎么选购?

    9.5K20
    领券