最近用c#捣鼓爬取群成员空间数据，测试了两遍都是在爬取到三百多位的时候ip就被禁止访问空间，网上也都是Python 的解决方式，有大佬会吗？
3条回答 默认 最新
Nick Peng 2021-04-21 09:46关注1. 加延迟
2. 构建ip池，或用代理ip，高匿代理等
本回答被题主选为最佳回答 , 对您是否有帮助呢?评论 打赏解决 1无用举报
分享
- 2021-04-21 08:22回答 3 已采纳 1. 加延迟 2. 构建ip池，或用代理ip，高匿代理等
- 2022-08-12 12:20回答 3 已采纳 不如换用requests库和bs4库吧。 from bs4 import BeautifulSoup as bs import requests as r url = 'https://fanqie
- 2021-10-24 09:44回答 1 已采纳 爬取内容不完整，应该是文档的更多内容，要往下滑动页面才会出现这个不太清楚，应该不是什么反爬，就是类似于中途给你弹出个广告，要具体分析怎么弄VIP内容肯定是需要你的账号是VIP才能看得到的，与selen
- 2020-09-25 14:39万变ip的博客 网站根据识别ip来判定是否爬虫，当同一个ip频繁的对网站进行访问，那么就会触发网站的反爬虫机制，你的ip将会被限制或者禁用。 当ip出现限制的时候，这个时候我们需要降低访问的速度，但是这样是影响效率的，不便于...
- 2017-12-14 06:55回答 6 已采纳 应该有cookie，或者session验证，你捉去页面的时候注意用cookiecontainer获取这个页面返回的cookie信息，然后获取图片的http请求附加上这个cookiecontainer
- 2021-08-19 23:44回答 2 已采纳 Thread+Invoke更新就行，最主要的是Invoke，要不会出错在其他线程更新控件内容，示例代码如下，有帮助麻烦点个采纳【本回答右上角】，谢谢~~有其他问题可以继续交流~ using Syst
- 2017-08-22 13:17回答 3 已采纳 http://outofmemory.cn/code-snippet/1587/python-zhongwen-charaeter-coding-decode-encode-yiji-luanma-r
- 2020-02-24 22:41二叉叔的博客 import requests#如果代理需要认证，可以使用proxy='username:password@IP:port'proxyHttps = '121.33.220.158' #端口:808proxyHttp = '110.73.8.171' #端口：8123url = 'http://httpbin.org/get'proxies={ ...
- 2021-09-28 14:05回答 1 已采纳 1、解决方案资源管理器，找到你的项目，右键引用点击管理NuGet程序包2、在浏览出输入MySql.Data,右侧下载安装；3、代码中引用；4、代码内容； using MySql.Data.MySqlC
- 2020-05-05 09:19回答 2 已采纳 用vs自带的installshield le就可以打包mysql https://blog.csdn.net/qq_27157051/article/details/53169584
- 2017-08-22 13:55回答 1 已采纳 字符串在Python内部的表示是unicode编码，因此，在做编码转换时，通常需要以unicode作为中间编码，即先将其他编码的字符串解码（decode）成unicode，再从unicode编码（en
- 2022-11-21 12:35管程序猿的博客 1爬虫是什么 2名词解释 2.1 Webmagic： ...2.4代理IP： 2.4.1代理IP类型： 2.5 Selenium方式下载页面： 2.5.1chrome的无头（headless）模式： 2.5.2 webdriver 2.5.3 ChromeDriver下载 2.6 Xpath 2.
- 2017-11-20 11:15回答 2 已采纳 class Program { static void Main(string[] args) { SerialPort
- 2022-05-25 09:52苏州程序大白的博客 擅长C#、Java、机器视觉、底层算法等语言。2019年成立柒月软件工作室，2021年注册苏州凯捷智能科技有限公司 有任何问题欢迎私信，看到会及时回复 微信号：stbsl6，微信公众号：苏州程序大白 如果文章对你有帮助，...
- 2019-07-03 17:22逸少凌仙的博客 一些经典的Python爬虫和网络编程面试题... 1 1、动态加载又对及时性要求很高怎么处理？... 1 2、分布式爬虫主要解决什么问题？... 1 3、什么是 URL？... 1 4、python 爬虫有哪些常用技术？... 1 5、简单说一下...
- 没有解决我的问题, 去提问
