weixin_41914461 2021-03-22 10:03 采纳率: 33.3%
浏览 531

scrapy 爬取亚马逊网站出现机器验证的问题

使用scrapy爬取亚马逊网站,出现了机器验证,通过查看页面form表单大概了解到,这个页面的地址是amazon.com/errors/validateCaptcha   用get请求提交时将图里面的amzn、amznr和验证码三个参数提交就可以跳转到没有机器验证码的商品页面。

我遇到的问题是:

1.我在本地用request请求写了一个使用超级鹰打码的验证,可以通过验证并跳转,但是我不知道这些步骤再scrapy框架里怎么写。

2.如果验证成功,我怎么将验证成功的这个状态保持住,并将跳转后的页面信息在scrapy框架读出来。

 

 

  • 写回答

2条回答 默认 最新

  • jasper__xu 2022-04-07 16:04
    关注

    我也遇到了,请问您解决了吗?可以分享一下吗。

    评论

报告相同问题?