比如,用huginn爬网这个链接:
https://s.weibo.com/weibo?q=%E4%B8%AD%E5%9B%BD%E8%87%AA%E5%BC%BA&typeall=1&suball=1×cope=custom:2021-08-01:&Refer=g&scope=ori
以前没问题,最近突然不行了。换了其他地方的机器,电脑和ip不同,huginn照样无法正常爬取。而在同一台机器上用 下载工具甚至简单的脚本下载这个链接的网页内容,却可以实现,不知道是什么情况。
相似问题