爬取猫眼电影top100所有海报图片到本地的images文件夹下,大佬求解🙏🙏
2条回答 默认 最新
- CSDN专家-HGJ 2021-10-24 17:05关注
首先根据页面网址变化,构造出网址列表:
urls=[f'https://maoyan.com/board/4?offset={i}' for i in range(0,100,10)]
在用requests.get请求时,headers中加入cookies,同时加参数verify=False
后面解析代码 如下,加入写入文件语句就行了:for url in urls[:1]: res=requests.get(url,headers=headers,verify=False) res.encoding=res.apparent_encoding soup=bs(res.text,'lxml') # with open('t1024.html','w',encoding='utf-8') as f: # f.write(str(soup)) t=[t['title'] for t in soup.select('dl.board-wrapper dd a:nth-child(1)')] s = ["https:"+i['data-src'] for i in soup.select( 'img.board-img')] time.sleep(1) print(t,s)
如有帮助,请点击一下采纳本回答的按钮。
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 1无用
悬赏问题
- ¥15 freertos下使用外部中断失效
- ¥15 输入的char字符转为int类型,不是对应的ascall码,如何才能使之转换为对应ascall码?或者使输入的char字符可以正常与其他字符比较?
- ¥15 devserver配置完 启动服务 无法访问static上的资源
- ¥15 解决websocket跟c#客户端通信
- ¥30 Python调用dll文件输出Nan重置dll状态
- ¥15 浮动div的高度控制问题。
- ¥66 换电脑后应用程序报错
- ¥50 array数据同步问题
- ¥15 pic16F877a单片机的外部触发中断程序仿真失效
- ¥15 Matlab插值拟合差分微分规划图论