coder_szc 2020-03-03 10:30 采纳率: 0%
浏览 860

各位,如何用Scrapy的XPath按顺序获取标签下的所有文本和子标签,就像BeautifulSoup.Tag里的contents属性一样?

初涉Scrapy,还在摸索语法,标题所示的问题是我遇到的比较棘手的问题,还在做进一步搜索,还请各路好汉不吝赐教。

最终达到的效果应该像BeautifulSoup框架里bs4.element.Tag中contents属性一样,能让我方便对每一个元素或文本进行筛选。

  • 写回答

2条回答 默认 最新

  • 放风喽 2020-03-04 03:03
    关注

    def pares(self,response):
    print(response.body_as_unicode())

    #### response.body_as_unicode()就是html,你直接用BeautifulSoup解析就行
    soup = BeautifulSoup( response.body_as_unicode(),"lxml")
    #### 这样就转换成你擅长的东西了

    评论

报告相同问题?