python request爬虫遇错误

Question

python requests爬虫 我想爬取我们学校体育馆预定信息，使用post方法，url cookies 请求负载 都是浏览器中粘贴的 ，但是它返回的json信息：
{'content': None, 'msg': 'syntax error, expect {, actual error, pos 0', 'no': 5000, 'now': 1726900791055}
而浏览器返回信息content: {dateLines: [{date: "2024-09-21", isSelected: false, isToday: true, week: 6}], sites: [,…],…}是完全正常的 包含我想要的所有信息。
我的python返回内容syntax error, expect {, actual error, pos 0 网上搜索了一下 fastjson中有极其类似的问题，好像是转json用python中字典还是列表的问题。 我不清楚该怎么办 我是直接reques.post（data=.....）这样传递参数的 我该如何解决此问题？谢谢

Answer 1

以下回复参考：皆我百晓生、券券喵儿等免费微信小程序作答:

你的问题似乎是在使用Python的requests库进行网络请求时遇到了解析JSON的问题。这个问题可能是由于服务器端返回的并非有效的JSON格式，或者是你解析这个JSON格式时的方法出现了问题。让我们分步骤解决这个问题：

首先，确认服务器端返回的数据确实是你需要的JSON格式。你可以在requests.post请求的响应中获取返回的原始内容，并打印出来检查：

response = requests.post(...)  # 你的post请求
print(response.text)  # 打印返回的原始内容

这样你可以确认返回的内容是否为有效的JSON格式。如果返回的内容不是有效的JSON格式，那么你可能需要检查你的请求是否正确（比如URL是否正确，Cookies和请求负载是否都是必须的等）。或者，可能是服务器端出现了一些问题导致返回的内容并不是预期的格式。如果确认服务器端的返回是有效的JSON格式，那么我们可以进一步解决解析的问题。

然后，你遇到的问题可能是由于在解析JSON时使用了不适合的方法。在Python中，我们可以使用json库来解析JSON字符串。假设你获取的服务器响应内容是正确的JSON格式，你可以这样解析它：

import json
response = requests.post(...)  # 你的post请求
data = json.loads(response.text)  # 解析返回的JSON字符串为Python字典或列表

注意，json.loads方法用于解析一个已经编码为JSON格式的字符串。如果你的服务器返回的已经是Python字典或列表（比如直接返回的是一个Python对象而不是JSON格式的字符串），那么你可能不需要再使用json.loads进行解析。这时你可以直接使用response.json()方法来获取返回的Python对象。因此你需要检查服务器返回的格式是否是需要被解析的JSON字符串。如果是，再使用json库进行解析。否则，直接使用返回的Python对象即可。

最后，关于你提到的fastjson的问题，fastjson是一个Java库，用于将Java对象转换为JSON格式的字符串或从JSON格式的字符串转换为Java对象。如果你在Python中使用fastjson可能会出现问题，因为Python有自己的一套处理JSON的库和方法。在Python中，你应该使用json库来处理JSON数据。如果你的服务器返回的确实是JSON格式的字符串并且你想用Python解析它，那么你应该使用Python的json库而不是其他库。