m0_67280317 2022-04-07 09:45 采纳率: 100%
浏览 43
已结题

豆瓣爬虫利用requests获取数据,bs解析数据,目前打印结果为空,布置问题出在哪里?

问题遇到的现象和发生背景

豆瓣简单 初学案例

问题相关代码,请勿粘贴

import requests, bs4

引用requests库

url = 'https://movie.douban.com/top250?start=0&filter=%27
res = requests.get(url)
bs = bs4.BeautifulSoup(res.text, 'html.parser')

print(bs.text)

运行结果及报错内容

空白

我的解答思路和尝试过的方法
我想要达到的结果
  • 写回答

4条回答 默认 最新

  • CSDN专家-showbo 2022-04-07 10:05
    关注

    缺少请求头user-agent,被反扒了没返回内容,要加上

    img

    import requests
    import bs4
    url = 'https://movie.douban.com/top250?start=0&filter='
    headers={'user-agent':'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/100.0.4896.60 Safari/537.36 Edg/100.0.1185.29'}
    res = requests.get(url,headers=headers)
    bs = bs4.BeautifulSoup(res.text, 'html.parser')
    
    print(bs.text)
    
    

    img

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论 编辑记录
查看更多回答(3条)

报告相同问题?

问题事件

  • 系统已结题 4月15日
  • 已采纳回答 4月7日
  • 创建了问题 4月7日

悬赏问题

  • ¥100 set_link_state
  • ¥15 虚幻5 UE美术毛发渲染
  • ¥15 CVRP 图论 物流运输优化
  • ¥15 Tableau online 嵌入ppt失败
  • ¥100 支付宝网页转账系统不识别账号
  • ¥15 基于单片机的靶位控制系统
  • ¥15 真我手机蓝牙传输进度消息被关闭了,怎么打开?(关键词-消息通知)
  • ¥15 装 pytorch 的时候出了好多问题,遇到这种情况怎么处理?
  • ¥20 IOS游览器某宝手机网页版自动立即购买JavaScript脚本
  • ¥15 手机接入宽带网线,如何释放宽带全部速度