刚刚对着视频爬了下豆瓣成功了，然后试了试CSDN，状态码400，是不是被反爬了
2条回答 默认 最新
- 2020-12-20 15:48首先在程序中引入Requests模块 import requests 一、获取不同类型的响应内容 在发送请求后，服务器会返回一个响应内容，而且requests通常会自动解码响应内容 1.文本响应内容 获取文本类型的响应内容 ...
- 2022-07-01 14:50课时11：106 - 状态码 课时12：200 - 使用Requests包发起请求 课时13：201 - 使用Requests获得网页源代码 课时14：202 - 使用Requests访问知乎 课时15：203 - Headers中的UserAgent 课时16：204 - 使用爬虫伪装成...
- 2021-08-14 15:11课程对HTTP协议进行了深入的讲解，包括HTTP的简介、主要特点、URL、URI和URN的区别和联系、HTTP和HTTPS协议的区别、HTTP请求和响应过程、请求方法、状态码、请求头信息、响应头信息、响应体、Cookies和session的概念...
- 2021-10-01 12:44响应则包含状态码、头部信息和返回数据。 二、Python爬虫库 1. Requests库：是最常用的Python HTTP库，用于发送各种HTTP请求，支持GET、POST等方法，以及设置头部、Cookie等。 2. BeautifulSoup：是一个解析HTML和...
- 2021-07-11 21:56穆瑾轩的博客 python爬虫简介 1、基本概念 1.1、什么是爬虫 网络爬虫，是一种按照一定规则，自动抓取互联网信息的程序或者脚本。另外一些不常使用的名字还有蚂蚁、自动索引、模拟程序或者蠕虫。随着网络的迅速发展，万维网...
- 2022-06-21 22:07练习时长两年半的Programmer的博客 爬虫简单的来说就是用程序获取网络上数据这个过程的一种名称。如果要获取网络上数据，我们要给爬虫一个网址（程序中通常叫URL），爬虫发送一个HTTP请求给目标网页的服务器，服务器返回数据给客户端（也就是我们的...
- 2024-06-22 13:45在Python中，requests库是发送HTTP请求的常用工具，通过GET或POST方法向目标网站请求数据，并接收返回的响应状态码、响应头和网页内容。 为了解析网页内容，有多种技术可用。正则表达式通过模式匹配提取数据，适用...
- 2023-05-12 15:29本文将深入探讨Python爬虫的基本概念、工作原理以及如何编写爬虫代码。 首先，理解爬虫的工作原理至关重要。爬虫通过程序模拟用户浏览器的行为，向指定的网址（URL）发起HTTP请求。当请求发送给服务器后，服务器...
- 2021-01-20 04:14在某网站主页提取url进行迭代，爬虫请求主页时没有问题，返回正常，但是在访问在主页提取到的url时出现了400状态码(400 Bad Request)。 结论 先贴出结论来，如果url里有空格的话，要把空格替换成 ，也就是url编码，...
- 2021-09-29 05:03理解请求方法（GET、POST等）和响应状态码（200、400、500等）对于构建有效的爬虫至关重要。此外，了解HTTP头、Cookie和Session也是必不可少的，它们能帮助我们实现更复杂的爬虫功能，比如模拟登录和保持会话。 ...
- 没有解决我的问题, 去提问
问题事件
已结题
（查看结题原因） 8月9日-
创建了问题
8月8日