问题遇到的现象和发生背景
在使用PyCharm抓取图片时出现报错 requests.exceptions.SSLError: HTTPSConnectionPool(host='pic.quanjing.com', port=443)
问题相关代码,请勿粘贴截图
import requests
import json
import os
url='https://www.quanjing.com/Handler/SearchUrl.ashx'
for i in range(1,10):
params={
't': '6064',
'callback': 'searchresult',
'q': '圣诞',
'stype': '1',
'pagesize': '100',
'pagenum': '1',
'imageType': '2',
'fr': '1',
'sortFlag': '1',
'_': '1640083408182'
}
headers={
'Referer': 'https://www.quanjing.com/search.aspx?q=%E5%9C%A3%E8%AF%9E',
'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36'
}
html=requests.get(url,params=params,headers=headers,verify=False).text
start=html.find('{"pageindex')
end=html.find('}]}')+len('}]}')
date=json.loads(html[start:end])['imglist']
for d in date:
pic_id=d['pic_id']
pic_url=d['imgurl']
print(pic_id,pic_url)
if not os.path.exists('quanjing'):
os.mkdir('quanjing')
with open('quanjing/{}.jpg'.format(pic_id),'wb')as f:
f.write(requests.get(pic_url).content)
运行结果及报错内容
requests.exceptions.SSLError: HTTPSConnectionPool(host='pic.quanjing.com', port=443)
图片没有保存到新建的文件夹quanjing里
我的解答思路和尝试过的方法
按照网上方法 安装了 pyOpenSSL、certifi、cryptography
使用verify=False
都无法解决
我想要达到的结果
抓取成功,并保存到文件夹quanjing里