’list index out of range‘报错,但是xpath语法经过浏览器的检验是正确的

Question

爬取淘宝商品标题的时候,采用了xpath的语法提取

其网页的代码如下

浏览器的检验是正确的

最终报错

Answer 1

有一种可能性最大，很有可能你爬取的是空的list，我爬过很多东西，经常出现的错误就是这个，测试过代码写的是正确的，但是个别网页或者像楼上说的反扒机制，导致你没爬到数据，一个空的list，后面只要调用就会出现这种情况。解决思路是第71行先把最后的索引【0】去掉，把输出的list，拿print校验下是不是空的或者NONE，十有八九是这个问题。