2 mmmaxwell mmmaxwell 于 2016.04.23 23:19 提问

求助大神,爬虫爬取京东评论数据爬一小部分(大概100条评论)就爬不到评论了,返回空值了

python 爬取评论数据,爬到一百多条评论,就返回空值了,无法继续爬下去了

2个回答

caozhy
caozhy   Ds   Rxr 2016.04.23 23:24

用fiddler调试下,看下是不是京东有限制。比如让你过多少时间再访问,或者要你输入验证码。

caozhy
caozhy 回复mmmaxwell: 我不卖这个
一年多之前 回复
mmmaxwell
mmmaxwell 回复caozhy: 那大神介绍点便宜的ip呗
一年多之前 回复
caozhy
caozhy 回复mmmaxwell: 谁都不能凭空生产ip。就像即便你是学生,你去学校食堂吃饭还是要花钱,因为学校食堂也变不出大米,大米还是农民种出来的,食堂进货也得花钱。
一年多之前 回复
mmmaxwell
mmmaxwell 回复caozhy: 我是学生而已,可能无法花钱买ip了
一年多之前 回复
caozhy
caozhy 回复mmmaxwell: 这个看你花钱多少了。
一年多之前 回复
mmmaxwell
mmmaxwell 回复caozhy: 真心感谢!请问有没有什么好的ip推荐一下,本人菜鸟,找到的代理ip都是很慢很慢的。
一年多之前 回复
caozhy
caozhy 回复mmmaxwell: 换ip,清空cookie,换用户等
一年多之前 回复
mmmaxwell
mmmaxwell 多谢解答,我还发现一个问题,就是等一段时间,再爬即可以接着爬了。这是不是时间限制?应该不是输验证码吧。那该怎么破解它的时间限制?
一年多之前 回复
qq_25970551
qq_25970551   2016.05.20 17:35

如果要爬京东评论,已经有大牛写出很成熟的代码了,推荐大家去看看,专门讲了怎么突破京东的限制:http://blog.csdn.net/youmumzcs/article/details/51396283

Csdn user default icon
上传中...
上传图片
插入图片
准确详细的回答,更有利于被提问者采纳,从而获得C币。复制、灌水、广告等回答会被删除,是时候展现真正的技术了!