请教Python xpath 定位抓取信息问题

Question

本人新手，想用python 抓取目标网站的认沽/认购信息，代码如下：

import requests
from lxml import etree
#1.将目标网页的数据抓取下来
headers = {
           'User-Agent':"Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:82.0) Gecko/20100101 Firefox/82.0"
           }
url ='http://www.sse.com.cn/assortment/options/date/'
resp = requests.get(url,headers=headers)
text = resp.text
#print(text)
#movies = []
#2.讲抓取下来的数据按一定规则进行提取
#print(resp.text)

html = etree.HTML(text)
ul = html.xpath("//div[@class='align_right']/text()")
#for i in ul:
print(ul)  

结果如下：

runfile('E:/Py file/practice/未命名0.py', wdir='E:/Py file/practice')
[]

显示没有，但我用Chrome 的 xpath helper却能查到好几个，请问应该如何解决，信息

 

Answer 1

抓取的网页内容正常吗？一般直接右键获取xpath路径即可，而且网页有反爬虫行为，先确认你的网页爬取成功了。