一只小菲 2021-10-24 15:40 采纳率: 100%
浏览 25
已结题

爬取猫眼电影top100所有海报图片到本地的images文件夹下

爬取猫眼电影top100所有海报图片到本地的images文件夹下,大佬求解🙏🙏

  • 写回答

2条回答 默认 最新

  • CSDN专家-HGJ 2021-10-24 17:05
    关注

    首先根据页面网址变化,构造出网址列表:
    urls=[f'https://maoyan.com/board/4?offset={i}' for i in range(0,100,10)]
    在用requests.get请求时,headers中加入cookies,同时加参数verify=False
    后面解析代码 如下,加入写入文件语句就行了:

    for url in urls[:1]:
        res=requests.get(url,headers=headers,verify=False)
        res.encoding=res.apparent_encoding
        soup=bs(res.text,'lxml')
        # with open('t1024.html','w',encoding='utf-8') as f:
        #     f.write(str(soup))
        t=[t['title'] for t in soup.select('dl.board-wrapper dd a:nth-child(1)')]
        s = ["https:"+i['data-src'] for i in soup.select(
            'img.board-img')]
        time.sleep(1)
        print(t,s)
    
        
    
    

    如有帮助,请点击一下采纳本回答的按钮。

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 11月1日
  • 已采纳回答 10月24日
  • 修改了问题 10月24日
  • 创建了问题 10月24日

悬赏问题

  • ¥15 csmar数据进行spss描述性统计分析
  • ¥15 各位请问平行检验趋势图这样要怎么调整?说标准差差异太大了
  • ¥15 delphi webbrowser组件网页下拉菜单自动选择问题
  • ¥15 wpf界面一直接收PLC给过来的信号,导致UI界面操作起来会卡顿
  • ¥15 init i2c:2 freq:100000[MAIXPY]: find ov2640[MAIXPY]: find ov sensor是main文件哪里有问题吗
  • ¥15 运动想象脑电信号数据集.vhdr
  • ¥15 三因素重复测量数据R语句编写,不存在交互作用
  • ¥15 微信会员卡等级和折扣规则
  • ¥15 微信公众平台自制会员卡可以通过收款码收款码收款进行自动积分吗
  • ¥15 随身WiFi网络灯亮但是没有网络,如何解决?