多热烈的Aries 2023-10-01 11:18 采纳率: 100%
浏览 13
已结题

爬虫获取的图片网页没有信息

写了一个微博图片的爬虫代码，微博图片的网址可以获取了，点开网址发现是403，什么东西也没有，我看网上说需要调整referrer，完全不知道怎么操作，麻烦指导一下，谢谢。

img

  • 写回答

1条回答 默认 最新

  • 无序繁星 2023-10-01 14:26
    关注

    调整referer的话，可以先在浏览器正常访问微博页面，然后在开发者工具把headers里的referer复制下来，在requests模块传参的headers里添加进去

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论

报告相同问题？

  • 爬虫获取的图片尺寸不对 html5 python 爬虫
    2022-10-22 14:15
    回答 1 已采纳 在浏览器里f12看一下你抓取的那个原图是不是跟你下载下来的一样。如果一样，有没有可能是网站知道你非正常访问，给你转到一个裁剪后的图片地址。
  • 爬虫 POST请求 获取网页标题内容 python 爬虫
    2022-10-26 16:35
    回答 1 已采纳 post和get方法的使用不是你决定的，二十接口使用的是什么请求方式，如果它是get请求那就只能用get请求，是post就只能用post
  • python爬虫网页图片 python 爬虫
    2022-08-04 20:03
    回答 2 已采纳 你把这里的文件名改成绝对路径加文件名呢你没加路径，保存到的是你运行代码的那个路径里面去了你把那个盘符和文件夹名给加上
  • 爬虫jsp获取网页源码
    2019-04-28 17:45
    总的来说，【爬虫jsp获取网页源码】这一主题涵盖了JSP的请求处理、Jsoup库的使用、前端与后端的交互等多个知识点。在实际项目中，可能还需要考虑其他因素，比如错误处理、请求限制、爬虫伦理和法律法规等，以确保...
  • python爬虫html获取不全 html python 爬虫
    2022-06-24 19:43
    回答 1 已采纳 其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载， 其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
  • python后端开发或爬虫怎么系统学习？ python 后端 爬虫
    2023-04-13 13:18
    回答 1 已采纳 爬虫严格来讲并不算一个大方向，更偏向于js逆向，python的话推荐走后端方向至于系统学习的话，推荐去blibili找一些路线，然后根据路线去找bilibili上播放量比较高的视频进行系统学习
  • python爬虫获取源码与网页不同 python 爬虫
    2017-09-29 14:07
    回答 1 已采纳 网页中有js脚本的话，可以在下载网页后动态修改/添加网页本身，也就是ajax
  • 图片信息动态网页模板
    2021-01-23 01:41
    【标题】"图片信息动态网页模板"涉及到的核心知识点主要包括网页设计、前端开发、动态效果实现以及用户体验优化。在创建一个图片信息动态网页模板时，设计师和开发者需要关注以下几个方面： 1. **HTML5**：作为网页...
  • python爬虫爬取图片，图片打不开 python 爬虫
    2022-10-18 21:52
    回答 1 已采纳 图片是从cdn上过来的，做了防盗链。在headers中添加Refer，指向该网站就行了。 import re import requests import os if not os.path.ex
  • python爬虫网页标签个别无法读取 python 开发语言 有问必答 爬虫
    2022-04-05 22:09
    回答 3 已采纳 因为 个别标签字典中没有bond_nm和bond_nm_tip键 data2 = data_get['bond_nm'] data5 = data_get['bond_nm_tip']
  • 爬虫失败，中间获取信息的函数没有运行直接跳过了。 python 数据挖掘 爬虫
    2022-08-23 23:23
    回答 1 已采纳 我看也没跳过loading_mv函数，该函数有运行，帮你改好了 from base64 import encode from dataclasses import replace from pand
  • 慢病爬虫数据管理后端.zip
    2024-01-19 17:02
    爬虫（Web Crawler）是一种自动化程序，用于从互联网上收集信息。其主要功能是访问网页、提取数据并存储，以便后续分析或展示。爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的...
  • 爬虫构建网页 获取不了多个网页 python
    2022-10-23 18:36
    回答 1 已采纳 range(0,41,10)分别得到0,10,20,30,40range三个参数意思分别是：start开始,end结束，step步长
  • 以Node.js基于express以及爬虫实现的视频资源后端.zip
    2024-03-25 17:19
    爬虫（Web Crawler）是一种自动化程序，用于从互联网上收集信息。其主要功能是访问网页、提取数据并存储，以便后续分析或展示。爬虫通常由搜索引擎、数据挖掘工具、监测系统等应用于网络数据抓取的场景。 爬虫的...
  • 一个管理磁力和漫画爬虫的springboot项目（kb磁力后端）.zip
    2024-03-08 12:17
    这些工具帮助爬虫定位和提取目标数据，如文本、图片、链接等。 数据存储： 爬虫将提取的数据存储到数据库、文件或其他存储介质中，以备后续分析或展示。常用的存储形式包括关系型数据库、NoSQL数据库、JSON文件等。...
  • 没有解决我的问题, 去提问

问题事件

  • 系统已结题 10月11日
  • 已采纳回答 10月3日
  • 修改了问题 10月1日
  • 创建了问题 10月1日

悬赏问题

  • ¥15 Opencv（C++）异常
  • ¥15 VScode上配置C语言环境
  • ¥15 汇编语言没有主程序吗？
  • ¥15 这个函数为什么会爆内存
  • ¥15 无法装系统，grub成了顽固拦路虎
  • ¥15 springboot aop 应用启动异常
  • ¥15 matlab有关债券凸性久期的代码
  • ¥15 lvgl v8.2定时器提前到来
  • ¥15 qtcp 发送数据时偶尔会遇到发送数据失败？用的MSVC编译器(标签-qt|关键词-tcp)
  • ¥15 cam_lidar_calibration报错