薛定谔的泰迪 2017-11-30 07:26 采纳率: 0%
浏览 2360

用WebMagic框架 爬某网站（多个页面）的内容 、启动爬虫有时候能抓取成功、

用WebMagic框架 爬某网站（多个页面）的内容 、启动爬虫有时候能抓取成功、有时候启动之后没任何反应3S之后程序停止。问什么会这样，求解

  • 写回答

1条回答 默认 最新

  • 生命是属于我们的 2017-11-30 07:50
    关注

    网站设置的有防爬取程序 超过次数就自动屏蔽了

    评论

报告相同问题？

悬赏问题

  • ¥50 永磁型步进电机PID算法
  • ¥15 sqlite 附加（attach database）加密数据库时，返回26是什么原因呢？
  • ¥88 找成都本地经验丰富懂小程序开发的技术大咖
  • ¥15 如何处理复杂数据表格的除法运算
  • ¥15 如何用stc8h1k08的片子做485数据透传的功能？(关键词-串口)
  • ¥15 有兄弟姐妹会用word插图功能制作类似citespace的图片吗？
  • ¥200 uniapp长期运行卡死问题解决
  • ¥15 latex怎么处理论文引理引用参考文献
  • ¥15 请教：如何用postman调用本地虚拟机区块链接上的合约？
  • ¥15 为什么使用javacv转封装rtsp为rtmp时出现如下问题：[h264 @ 000000004faf7500]no frame？