往事随风i0 2021-12-20 18:33 采纳率: 80%
浏览 21
已结题

Python3.9爬文章标题和url

求大佬解答,整了一个小时都没搞懂,爬的是网站首页的文章标题和url,代码都对,路径也没错,也出来了uuu.txt,但是里面没内容(┯_┯)
网站url代码里有。

img


代码如下
import requests
from lxml import etree

headers = {
'User-Agent': "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.110 Safari/537.36 Edg/96.0.1054.57"
}

url = 'http://xb.xsqk.ccut.edu.cn/gwqk/list.htm'

response = requests.get(url=url, headers=headers)

page_text = response.text
tree = etree.HTML(page_text)

tr_list = tree.xpath('/html/body/div/div[2]/table[3]/tbody/tr/td/table/tbody/tr/td[3]/table[4]/tbody/tr/td/div/div/div[1]/table/tbody/tr')

with open('./uuu.txt', 'w', encoding='utf-8')as fp:
for tr in tr_list:
title = tr.xpath('.//a/@title')[0]
href = 'http://xb.xsqk.ccut.edu.cn/gwqk/list.htm' + tr.xpath('.//a/@href')[0]
fp.write(title + href + '\n')
fp.close()

  • 写回答

1条回答 默认 最新

  • Harley~G 2021-12-21 09:44
    关注

    你的tr_list里面取到的值就为空,肯定没数据存进去

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

问题事件

  • 系统已结题 12月31日
  • 已采纳回答 12月23日
  • 创建了问题 12月20日

悬赏问题

  • ¥15 ETLCloud 处理json多层级问题
  • ¥15 matlab中使用gurobi时报错
  • ¥15 这个主板怎么能扩出一两个sata口
  • ¥15 不是,这到底错哪儿了😭
  • ¥15 2020长安杯与连接网探
  • ¥15 关于#matlab#的问题:在模糊控制器中选出线路信息,在simulink中根据线路信息生成速度时间目标曲线(初速度为20m/s,15秒后减为0的速度时间图像)我想问线路信息是什么
  • ¥15 banner广告展示设置多少时间不怎么会消耗用户价值
  • ¥15 可见光定位matlab仿真
  • ¥15 arduino 四自由度机械臂
  • ¥15 wordpress 产品图片 GIF 没法显示