新条茜 2021-08-18 21:40 采纳率: 100%
浏览 63
已结题

爬取京东书籍分类的那个页面,发现书籍分类信息已经被弄成一个像json文件一样的东西了,但我却怎么也访问不了那个东西的地址,来请求一下大家的帮助

img
这是那个response里面有书籍分类信息的url,也是我访问不了的url

img
详细数据
我一开始以为这跟B站上爬取评论一样,把其中的条件,也就是callback删除就可以了,但实际上并不能,并会出现以下情况:

img
它会显示我非法请求,然后我就去看callback后面的东西。
其中”_“把数字分成了两串,第一串数字应该是时间戳,但我却想不出第二串数字是怎么来的,然后就去看网页代码,结果还是不行.所以就请大家来帮我看看这个问题,我到底应该把这个地址分析完整还是说有其他的访问方法。
最后附上一张我找到的感觉比较关键的代码(分析第二串数字):

img

  • 写回答

2条回答 默认 最新

  • CSDN专家-HGJ 2021-08-18 22:19
    关注

    添加请求头,将params参数构建成这样即可:counter随机数,请求当时时间戳。

    params = (
        ('source', 'bookSort'),
        ('callback', f'jsonp_{int(time.time()*1000)}_{random.randint(1000,9000)}'),
    )
    
    response = requests.get('https://pjapi.jd.com/book/sort',
                            headers=headers, params=params)
    
    s=re.findall('jsonp.*?\((.*)\)',response.text)[0]
    js=json.loads(s)
    print(js)
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 8月26日
  • 已采纳回答 8月18日
  • 创建了问题 8月18日

悬赏问题

  • ¥15 装 pytorch 的时候出了好多问题,遇到这种情况怎么处理?
  • ¥20 IOS游览器某宝手机网页版自动立即购买JavaScript脚本
  • ¥15 手机接入宽带网线,如何释放宽带全部速度
  • ¥30 关于#r语言#的问题:如何对R语言中mfgarch包中构建的garch-midas模型进行样本内长期波动率预测和样本外长期波动率预测
  • ¥15 ETLCloud 处理json多层级问题
  • ¥15 matlab中使用gurobi时报错
  • ¥15 这个主板怎么能扩出一两个sata口
  • ¥15 不是,这到底错哪儿了😭
  • ¥15 2020长安杯与连接网探
  • ¥15 关于#matlab#的问题:在模糊控制器中选出线路信息,在simulink中根据线路信息生成速度时间目标曲线(初速度为20m/s,15秒后减为0的速度时间图像)我想问线路信息是什么