需要抓取的页面较多,单线程速度很慢,多线程在get页面的时候网站返回503,而且特别容易封IP。怀疑网站是通过IP的单位时间内访问次数判断是不是爬虫,没有代理啊。。大家有什么好的解决方案?
0条回答 默认 最新
悬赏问题
- ¥50 buildozer打包kivy app失败
- ¥30 在vs2022里运行python代码
- ¥15 不同尺寸货物如何寻找合适的包装箱型谱
- ¥15 求解 yolo算法问题
- ¥15 虚拟机打包apk出现错误
- ¥15 用visual studi code完成html页面
- ¥15 聚类分析或者python进行数据分析
- ¥15 三菱伺服电机按启动按钮有使能但不动作
- ¥15 js,页面2返回页面1时定位进入的设备
- ¥50 导入文件到网吧的电脑并且在重启之后不会被恢复