21世纪农民工 2021-10-25 15:47 采纳率: 100%
浏览 57
已结题

爬取网页需要完整代码用两种方法

爬取买购网户外运动品牌信息(只爬取一页即可)


需要代码

  • 写回答

2条回答 默认 最新

  • CSDN专家-showbo 2021-10-25 16:15
    关注

    页面数据接口这个,修改下page参数获取指定页的数据即可,不过接口返回的是html代码,具体内容需要用BeautifulSoup解析下

    https://www.maigoo.com/brand/search/?catid=8961&page=1&ajax=1&subaction=resultlist&action=searchlist
    
    

    题主要的代码如下,有帮助麻烦点下【采纳该答案】,谢谢~~有其他问题可以继续交流~

    img

    import requests
    from bs4 import BeautifulSoup
    for i in range(1,3):#采集1,2页数据
        url="https://www.maigoo.com/brand/search/?catid=8961&page=%s&ajax=1&subaction=resultlist&action=searchlist"%i
        html=requests.get(url).text
        soup=BeautifulSoup(html,features="html.parser")
        lis=soup.select('li')
        for li in lis:
            print('图片网址:'+li.select('img')[0].attrs['src'])
            print('品牌:'+li.select('.info a.name')[0].text)
            print('公司名称:'+li.select('.cbox')[0].text)
            print('公司介绍:'+li.select('.rongyu')[0].text)
            print('\n\n')
    
    
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 11月3日
  • 已采纳回答 10月26日
  • 创建了问题 10月25日

悬赏问题

  • ¥15 nslt的可用模型,或者其他可以进行推理的现有模型
  • ¥15 arduino上连sim900a实现连接mqtt服务器
  • ¥15 vncviewer7.0安装后如何正确注册License许可证,激活使用
  • ¥15 phython如何实现以下功能?查找同一用户名的消费金额合并2
  • ¥66 关于人体营养与饮食规划的线性规划模型
  • ¥15 基于深度学习的快递面单识别系统
  • ¥15 Multisim仿真设计地铁到站提醒电路
  • ¥15 怎么用一个500W电源给5台60W的电脑供电
  • ¥15 请推荐一个轻量级规则引擎,配合流程引擎使用,规则引擎负责判断出符合规则的流程引擎模板id
  • ¥15 Excel表只有年月怎么计算年龄