juzi_go 2021-11-29 19:12 采纳率: 80%
浏览 56
已结题

python爬虫如何垂直爬取网页内容 ?

爬取国家地理画廊 想爬取点击图片链接进去页面的图片,如何爬取,现在下面的代码只能爬取当前页面的图片与内容,如何修改才能实现爬取图片里面那个链接的内容?
import requests
from lxml import etree


r_url = 'http://www.dili360.com/gallery'
res = requests.get(r_url)

res_html = etree.HTML(res.text)
title = res_html.xpath("/html/body/div[1]/div[3]/ul/li/div[2]/h3/text()")
img_srcs = res_html.xpath("/html/body/div[1]/div[3]/ul/li/div[1]/a/img/@src")
print(img_srcs)
img_lst = []


for item in title:
    print(item)
for src in img_srcs:
    print(src)


运行结果及报错内容
我的解答思路和尝试过的方法
我想要达到的结果
  • 写回答

1条回答 默认 最新

  • YipSzeTo 2021-11-30 14:45
    关注
    img = requests.get(url=img_url)  # img_url:图片的路径
    with  open('{}.jpg'.format(n), 'wb') as f:  # n:文件名
      f.write(img.content)
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论 编辑记录

报告相同问题?

问题事件

  • 系统已结题 1月3日
  • 已采纳回答 12月26日
  • 创建了问题 11月29日

悬赏问题

  • ¥15 安卓adb backup备份应用数据失败
  • ¥15 eclipse运行项目时遇到的问题
  • ¥15 关于#c##的问题:最近需要用CAT工具Trados进行一些开发
  • ¥15 南大pa1 小游戏没有界面,并且报了如下错误,尝试过换显卡驱动,但是好像不行
  • ¥15 没有证书,nginx怎么反向代理到只能接受https的公网网站
  • ¥50 成都蓉城足球俱乐部小程序抢票
  • ¥15 yolov7训练自己的数据集
  • ¥15 esp8266与51单片机连接问题(标签-单片机|关键词-串口)(相关搜索:51单片机|单片机|测试代码)
  • ¥15 电力市场出清matlab yalmip kkt 双层优化问题
  • ¥30 ros小车路径规划实现不了,如何解决?(操作系统-ubuntu)