往事随风i0 2021-12-20 18:33 采纳率: 80%
浏览 21
已结题

Python3.9爬文章标题和url

求大佬解答,整了一个小时都没搞懂,爬的是网站首页的文章标题和url,代码都对,路径也没错,也出来了uuu.txt,但是里面没内容(┯_┯)
网站url代码里有。

img


代码如下
import requests
from lxml import etree

headers = {
'User-Agent': "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/96.0.4664.110 Safari/537.36 Edg/96.0.1054.57"
}

url = 'http://xb.xsqk.ccut.edu.cn/gwqk/list.htm'

response = requests.get(url=url, headers=headers)

page_text = response.text
tree = etree.HTML(page_text)

tr_list = tree.xpath('/html/body/div/div[2]/table[3]/tbody/tr/td/table/tbody/tr/td[3]/table[4]/tbody/tr/td/div/div/div[1]/table/tbody/tr')

with open('./uuu.txt', 'w', encoding='utf-8')as fp:
for tr in tr_list:
title = tr.xpath('.//a/@title')[0]
href = 'http://xb.xsqk.ccut.edu.cn/gwqk/list.htm' + tr.xpath('.//a/@href')[0]
fp.write(title + href + '\n')
fp.close()

  • 写回答

1条回答 默认 最新

  • Harley~G 2021-12-21 09:44
    关注

    你的tr_list里面取到的值就为空,肯定没数据存进去

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题?

问题事件

  • 系统已结题 12月31日
  • 已采纳回答 12月23日
  • 创建了问题 12月20日

悬赏问题

  • ¥15 通信专业本科生论文选这两个哪个方向好研究呀
  • ¥50 我在一个购物网站的排队系统排队,这个排队到号后重新定向到目标网站进行购物,但是有技术牛通过技术方法直接跳过排队系统进入目标网址购物,有没有什么软件或者脚本可以用
  • ¥15 ios可以实现ymodem-1k协议 1024字节传输吗?
  • ¥300 寻抓云闪付tn组成网页付款链接
  • ¥15 请问Ubuntu要怎么安装chrome呀?
  • ¥15 视频编码 十六进制问题
  • ¥15 unity terrain打包后地形错位,跟建筑不在同一个位置,怎么办
  • ¥15 uniapp实现如下图的图表功能
  • ¥15 u-subsection如何修改相邻两个节点样式
  • ¥15 服务端控制goose报文控制块的发布问题