Python爬虫问题

Question

我需要完成这项任务，但是爬到的数据是空的，只有表头（如图2），代码如下，请问是为什么呢？

import requests
# 目标网址
url = 'http://www.xinhuanet.com/'
# 发送 GET 请求，获取页面内容
response = requests.get(url)
content = response.content.decode('utf-8')
from bs4 import BeautifulSoup
# 使用 BeautifulSoup 解析页面内容
soup = BeautifulSoup(content, 'html.parser')
# 提取页面中所有包含新闻标题、发布时间和链接的 div 标签
news_divs = soup.find_all('div', class_='new-data-words')
# 遍历每一个 div 标签，提取包含的信息
for news_div in news_divs:
    # 提取新闻标题
    title = news_div.find('a').text
    
    # 提取新闻发布时间
    publish_time = news_div.find('span', class_='time').text
    
    # 提取新闻链接
    link = news_div.find('a')['href']
import csv
# 打开 csv 文件
with open('news.csv', 'w', encoding='utf-8', newline='') as csvfile:
    # 定义 csv writer
    writer = csv.writer(csvfile)
    
    # 写入表头
    writer.writerow(['Title', 'Publish Time', 'Link'])
    
    # 遍历每一个 div 标签，提取包含的信息并写入 csv 文件
    for news_div in news_divs:
        # 提取新闻标题
        title = news_div.find('a').text
        
        # 提取新闻发布时间
        publish_time = news_div.find('span', class_='time').text
        
        # 提取新闻链接
        link = news_div.find('a')['href']
        
        # 写入 csv 文件
        writer.writerow([title, publish_time, link])

Answer 1

【相关推荐】

• 你可以参考下这个问题的回答, 看看是否对你有帮助, 链接: https://ask.csdn.net/questions/7789745
• 这篇博客也不错, 你可以看下python 已知文本文件中存放了若干数字，请编程读取所有的数字，排序以后进行输出。
• 同时，你还可以查看手册：python-数据压缩和存档 中的内容
• 您还可以看一下 CSDN就业班老师的Python爬虫技术和浏览器模拟，验证码识别视频教程课程中的 解析库的使用2小节, 巩固相关知识点
  
• 除此之外, 这篇博客: 整理了7道Python函数的练习题，希望对你学习函数有帮助中的 2.写函数，计算传入的字符串中数字，字母，空格，以及其他的个数 部分也许能够解决你的问题, 你可以仔细阅读以下内容或跳转源博客中阅读:
  

  def func(s):
      al_num =0
      space_num = 0
      digit_num = 0
      others_num = 0
      for i in s:
          if i.isdigit():
              digit_num +=1
          elif i.isspace():
              space_num +=1
          elif i.isalpha():
              al_num +=1
          else:
              others_num +=1
      return (al_num,space_num,digit_num,others_num)
   
  result = func("asdsadjlk1212jdjakdk2  d d d d323233223下")
  print(result)
  result = func("  d d d d323233223下")
  print(result)
  

如果你已经解决了该问题, 非常希望你能够分享一下解决方案, 写成博客, 将相关链接放在评论区, 以帮助更多的人 ^-^