最近学习pyhton爬虫
比如我采集马蜂窝..需要用代理不然会被封..
我就找了个免费代理.但是免费代理有些是失效的..
所以我就写了一个 代理检测的 .py文件..
目的是把这个返回的 ip 用在 采集.py 的文件里..
这是引用的位置
额 ,就这个没搞懂...
请问是怎么解决的呢..谢谢!
最近学习pyhton爬虫
比如我采集马蜂窝..需要用代理不然会被封..
我就找了个免费代理.但是免费代理有些是失效的..
所以我就写了一个 代理检测的 .py文件..
目的是把这个返回的 ip 用在 采集.py 的文件里..
这是引用的位置
额 ,就这个没搞懂...
请问是怎么解决的呢..谢谢!
在x前面加上一个proxy调用,把获取到的值,赋值给x就行了,如
x = proxy(ip_list)
if not x
return
proxies = {"http":x }