tyrandoupup 2019-01-10 11:54 采纳率: 0%
浏览 2462
已采纳

爬取网站上数据，爬下内容不全

我爬取下厨房的作品url（比如这个界面：http://www.xiachufang.com/cook/10585157/created/）
*图片说明

其中::after的内容需要我鼠标滚动到下面才显示。导致我python爬下来的url数量很少，只有最开始的15组。
图片说明

我用的etree.html和xpath。
大家有什么方法能让我爬取到::after里的数据。

  • 写回答

3条回答 默认 最新

  • qq_24499417 2019-01-10 12:21
    关注

    有个page参数的。http://www.xiachufang.com/cook/10585157/created/?page=4

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题？