m0_59076519 2021-06-07 10:16 采纳率: 0%
浏览 52

关于爬虫上的技术，有没有大神

想找一位爬虫技术厉害的爬一些网页上的数据，网页具有反爬，有兴趣的可以联系我

  • 写回答

3条回答 默认 最新

  • CSDN专家-文盲老顾 2021-06-07 11:07
    关注

    爬虫并不是万能的，反爬方其实是可以掀桌的，比如直接ban掉你的IP

    所以一个网站的爬虫，肯定是根据对方的反爬策略做出妥协后才能使用的，所以确实需要具体分析你想采集的目标

    比如我自己的站，除了百度，其他来自IDC的IP我碰到一个就ban一个

    评论

报告相同问题？

悬赏问题

  • ¥15 LiBeAs的带隙等于0.997eV,计算阴离子的N和P
  • ¥15 关于#windows#的问题：怎么用WIN 11系统的电脑 克隆WIN NT3.51-4.0系统的硬盘
  • ¥15 matlab有关常微分方程的问题求解决
  • ¥15 perl MISA分析p3_in脚本出错
  • ¥15 k8s部署jupyterlab，jupyterlab保存不了文件
  • ¥15 ubuntu虚拟机打包apk错误
  • ¥199 rust编程架构设计的方案 有偿
  • ¥15 回答4f系统的像差计算
  • ¥15 java如何提取出pdf里的文字？
  • ¥100 求三轴之间相互配合画圆以及直线的算法