SunnnQ 2022-05-11 19:38 采纳率: 0%
浏览 35

如何用pycharm爬取存在详情页以及分页的网站的所有图片。

例如: 美学空间_优秀方案
刚接触爬虫,用的火狐的插件,研究了很多教程,都无法获取,毫无头绪。

代码如下:
import requests
import re
import os

image = '方案赏析'
if not os.path.exists(image):
os.mkdir(image)
headers = {
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:100.0) Gecko/20100101 Firefox/100.0'
}
response = requests.get('#链接',headers=headers)
response.encoding = 'gbk'
response.encoding = 'utf-8'
print(response.request.headers)
print(response.status_code)
t = '(.*?)'
result = re.findall(t, response.text)
for img in result:
print(img)
res = requests.get(img[0])
print(res.status_code)
s = img[0].split('.')[-1]
with open(image + '/' + img[1] + '.' + s, mode='wb') as file:
file.write(res.content)

  • 写回答

1条回答 默认 最新

  • 丨水木旦丨 2022-05-11 20:07
    关注

    你的提问过于模糊,我无法确定你的需求。如果需要简单免费教学可以回复我的评论,我开一个腾讯会议和你进一步沟通一下。

    评论

报告相同问题?

问题事件

  • 修改了问题 5月12日
  • 修改了问题 5月11日
  • 创建了问题 5月11日

悬赏问题

  • ¥15 本题的答案是不是有问题
  • ¥15 关于#r语言#的问题:(svydesign)为什么在一个大的数据集中抽取了一个小数据集
  • ¥15 C++使用Gunplot
  • ¥15 这个电路是如何实现路灯控制器的,原理是什么,怎么求解灯亮起后熄灭的时间如图?
  • ¥15 matlab数字图像处理频率域滤波
  • ¥15 在abaqus做了二维正交切削模型,给刀具添加了超声振动条件后输出切削力为什么比普通切削增大这么多
  • ¥15 ELGamal和paillier计算效率谁快?
  • ¥15 蓝桥杯单片机第十三届第一场,整点继电器吸合,5s后断开出现了问题
  • ¥15 file converter 转换格式失败 报错 Error marking filters as finished,如何解决?
  • ¥15 Arcgis相交分析无法绘制一个或多个图形