RaaOa 2021-09-09 14:53 采纳率: 73.3%
浏览 65
已结题

【Python爬虫】Ip爬取问题

在一个Py程序中，我把200个买的代理（快代理）放到text里然后转为py列表，用random随机数来提取，可不论怎么说，比如爬了60来次，就不行了，或者10几次，甚至几次，我认为是代理质量问题，不知道怎么解决了，要定时换一批，根本无法自动化，怎么办，每次一卡壳就要重新运行，擦

  • 写回答

4条回答 默认 最新

  • Pliosauroidea 2021-09-09 15:04
    关注

    使用try catch维护,发现疑似失效ip就给个对应标记,标记达到一定数量就删除对应ip

    本回答被题主和专家选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(3条)

报告相同问题？

问题事件

  • 系统已结题 9月21日
  • 已采纳回答 9月13日
  • 专家已采纳回答 9月12日
  • 创建了问题 9月9日

悬赏问题

  • ¥15 安卓adb backup备份应用数据失败
  • ¥15 eclipse运行项目时遇到的问题
  • ¥15 关于#c##的问题：最近需要用CAT工具Trados进行一些开发
  • ¥15 南大pa1 小游戏没有界面，并且报了如下错误，尝试过换显卡驱动，但是好像不行
  • ¥15 没有证书，nginx怎么反向代理到只能接受https的公网网站
  • ¥50 成都蓉城足球俱乐部小程序抢票
  • ¥15 yolov7训练自己的数据集
  • ¥15 esp8266与51单片机连接问题(标签-单片机|关键词-串口)（相关搜索：51单片机|单片机|测试代码）
  • ¥15 电力市场出清matlab yalmip kkt 双层优化问题
  • ¥30 ros小车路径规划实现不了，如何解决？(操作系统-ubuntu)