21世纪农民工 2021-10-25 15:47 采纳率: 100%
浏览 57
已结题

爬取网页需要完整代码用两种方法

爬取买购网户外运动品牌信息(只爬取一页即可)


需要代码

  • 写回答

2条回答 默认 最新

  • CSDN专家-showbo 2021-10-25 16:15
    关注

    页面数据接口这个,修改下page参数获取指定页的数据即可,不过接口返回的是html代码,具体内容需要用BeautifulSoup解析下

    https://www.maigoo.com/brand/search/?catid=8961&page=1&ajax=1&subaction=resultlist&action=searchlist
    
    

    题主要的代码如下,有帮助麻烦点下【采纳该答案】,谢谢~~有其他问题可以继续交流~

    img

    import requests
    from bs4 import BeautifulSoup
    for i in range(1,3):#采集1,2页数据
        url="https://www.maigoo.com/brand/search/?catid=8961&page=%s&ajax=1&subaction=resultlist&action=searchlist"%i
        html=requests.get(url).text
        soup=BeautifulSoup(html,features="html.parser")
        lis=soup.select('li')
        for li in lis:
            print('图片网址:'+li.select('img')[0].attrs['src'])
            print('品牌:'+li.select('.info a.name')[0].text)
            print('公司名称:'+li.select('.cbox')[0].text)
            print('公司介绍:'+li.select('.rongyu')[0].text)
            print('\n\n')
    
    
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 11月3日
  • 已采纳回答 10月26日
  • 创建了问题 10月25日

悬赏问题

  • ¥15 平板录音机录音问题解决
  • ¥15 请问维特智能的安卓APP在手机上存储传感器数据后,如何找到它的存储路径?
  • ¥15 (SQL语句|查询结果翻了4倍)
  • ¥15 Odoo17操作下面代码的模块时出现没有'读取'来访问
  • ¥50 .net core 并发调用接口问题
  • ¥15 网上各种方法试过了,pip还是无法使用
  • ¥15 用verilog实现tanh函数和softplus函数
  • ¥15 Hadoop集群部署启动Hadoop时碰到问题
  • ¥15 求京东批量付款能替代天诚
  • ¥15 slaris 系统断电后,重新开机后一直自动重启