∠J 2020-11-26 07:45 采纳率: 0%
浏览 166
已结题

python爬取的数据怎么保存成json格式?能提供完整代码吗》我太笨了,一直搞不好

import requests
from bs4 import BeautifulSoup
# 自定义函数,获取城市的AQI
def get_city_aqi(city_pinyin):
    url = 'http://pm25.in/' + city_pinyin
    r = requests.get(url, timeout=300)
    # 创建BeautifulSoup对象
    soup = BeautifulSoup(r.text, 'html.parser')
    # 按照属性查找所有满足条件的节点
    div_list = soup.find_all('div', {'class': 'span1'})

    city_aqi = []
    for i in range(8):
        div_content = div_list[i]
        caption = div_content.find('div', {'class': 'caption'}).text.strip()
        value = div_content.find('div', {'class': 'value'}).text.strip()
        # 将每一对caption和value作为一个元素增加到列表中
        city_aqi.append((caption, value))

    return city_aqi
# 自定义函数:获取所有的城市列表
def get_all_cities():
    url = 'http://pm25.in/'
    city_list = []
    r = requests.get(url)
    soup = BeautifulSoup(r.text, 'html.parser')
    city_div = soup.find_all('div', {'class': 'bottom'})[1]
    city_link_list = city_div.find_all('a')
    for city_link in city_link_list:
        # 获取每个城市的名称
        city_name = city_link.text
        # 获取每个城市的拼音
        city_pinyin = city_link['href'][1:]
        # 将每对城市名称和城市拼音作为一个元素写入城市列表中
        city_list.append((city_name, city_pinyin))
    return city_list
def main():
    # 调用自定义函数,获取所有城市列表
    city_list=get_all_cities()
    for city in city_list:
        city_name = city[0]
        city_pinyin = city[1]
        # 调用自定义函数,获取每个城市的AQI值
        city_aqi = get_city_aqi(city_pinyin)
        print(city_name, city_aqi)
if __name__ == '__main__':
    main()

展开全部

  • 写回答

2条回答 默认 最新

  • 我不喜欢这个世界 2020-11-26 09:26
    关注
    def main():
        dict1 = {}
        # 调用自定义函数,获取所有城市列表
        city_list=get_all_cities()
        for city in city_list[:1]:
            city_name = city[0]
            city_pinyin = city[1]
            # 调用自定义函数,获取每个城市的AQI值
            city_aqi = get_city_aqi(city_pinyin)
            print(city_name, city_aqi)
            d_d = {}
            for i in city_aqi:
                d_d[i[0]]= i[1]
            dict1[city_name] = d_d
        print(dict1)
        with open('json.txt','w',encoding='utf-8')as f:
            f.write(str(dict1))
        # with open('json.txt',encoding='utf-8')as f:
        #     res = f.read()
        #     print(type(eval(res)))
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)
编辑
预览

报告相同问题?

悬赏问题

  • ¥15 eNSP中防火墙的使用
  • ¥15 不能对数据库增删改但是可以查询
  • ¥15 在触控设备上启动TabTip.exe打不开键盘界面,怎么用代码启动进程打开界面
  • ¥15 lvgl7.11怎么做出文字被选中的效果
  • ¥50 如何快速查看手机目标app的主要服务器ip
  • ¥15 (标签-stm32|关键词-m3)
  • ¥15 matlab中频率调制法代码的解读
  • ¥15 ceph的对象、块、文件相关问题求解答
  • ¥50 如果使用python进行ERA5 10米风场预报检验
  • ¥15 navicat解析mysql密码