遇到一个很奇怪的爬虫问题

Question

遇到个很奇怪的问题，明明xpath没有问题，但是运行出来为空：

代码如下：

import re
from lxml import etree
import requests

#模拟浏览器发送请求
headers = {
    'User - Agent':
    'Mozilla / 5.0(Windows NT 10.0;Win64;x64) AppleWebKit / 537.36(KHTML, likeGecko) Chrome / 119.0.0.0Safari / 537.36Edg / 119.0.0.0'
}
#发送请求
response = requests.get("https://hz.lianjia.com/ershoufang/pg2/",headers=headers)
# print(response.text)
#乱码处理
html = response.content.decode(response.apparent_encoding)
elementOjbt = etree.HTML(html)
aaa = elementOjbt.xpath('//*[@id="content"]/div[1]/div[7]/div[2]/div/a[last()]/@href')
print(aaa)

网页元素为：

Answer 1

【相关推荐】

• 这个问题的回答你可以参考下: https://ask.csdn.net/questions/692921
• 你也可以参考下这篇文章：爬虫坑之xpath解析不出来
• 您还可以看一下 CSDN就业班老师的第一章：数据提取与清洗策略课程中的 百度针对xpath爬虫的反爬策略与解决方式小节, 巩固相关知识点
  
• 除此之外, 这篇博客: 网络爬虫之基于XPath爬取百度贴吧图片详细教程（可输入版）中的 (3)、分析页面并提取页面信息 部分也许能够解决你的问题, 你可以仔细阅读以下内容或跳转源博客中阅读:
  

  因为本次爬取的内容是图片，所以找到图片的相应信息

  			html = response.content
              #etree.HTML 解析页面信息 通过xpath
              lxmlobj = etree.HTML(html)
              #通过xpath进行提取
              #xpath 语法  :// 代表从匹配选择的当前节点选择文档中的节点，而不考虑其位置
              #@ 选取属性
              #//a 的意思是从前面获取的html中提取出a标签
              #//a[@class='j_th_tit '] 选出class为j_th_title的的标签
              m = lxmlobj.xpath("//a[@class='j_th_tit ']/@href")
              for href_match in m:
                  new_url = "https://tieba.baidu.com"+href_match
  
                  #print(href_match)
                  self.downloadImg(new_url)
  

如果你已经解决了该问题, 非常希望你能够分享一下解决方案, 写成博客, 将相关链接放在评论区, 以帮助更多的人 ^-^