刚学会开机 2021-09-23 13:18 采纳率: 37.5%
浏览 53
已结题

python代码无法实现循环爬取

import requests
from lxml import etree
import time
baseurl="https://www.295k.com/type/ribendongman-1"
for i in range(0,30):
    i+=1
    url=baseurl+str(i)
headers={"user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.107 Safari/537.36"}
response=requests.get(url=url,headers=headers)
response1=response.content.decode(encoding='utf-8',errors='ignore')
response2=etree.HTML(response1)#获取请求
title1 = response2.xpath('/html/body/div[1]/div/div[1]/div/div/div[2]/ul/li/div/a/@href')
title2 = response2.xpath('/html/body/div[1]/div/div[1]/div/div/div[2]/ul/li/div/a/@title')
x=str(("https://www.295k.com/")+str(title1))
z=str(title2)
print(x)
print(z)

爬取的数据不是单独分开的 for循环也不能每页进行爬取 恳求各位给出解决方案

  • 写回答

2条回答 默认 最新

查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 10月2日
  • 已采纳回答 9月24日
  • 创建了问题 9月23日

悬赏问题

  • ¥15 数学的三元一次方程求解
  • ¥20 iqoo11 如何下载安装工程模式
  • ¥15 本题的答案是不是有问题
  • ¥15 关于#r语言#的问题:(svydesign)为什么在一个大的数据集中抽取了一个小数据集
  • ¥15 C++使用Gunplot
  • ¥15 这个电路是如何实现路灯控制器的,原理是什么,怎么求解灯亮起后熄灭的时间如图?
  • ¥15 matlab数字图像处理频率域滤波
  • ¥15 在abaqus做了二维正交切削模型,给刀具添加了超声振动条件后输出切削力为什么比普通切削增大这么多
  • ¥15 ELGamal和paillier计算效率谁快?
  • ¥15 蓝桥杯单片机第十三届第一场,整点继电器吸合,5s后断开出现了问题