21世纪农民工 2021-10-25 15:47 采纳率: 100%
浏览 57
已结题

爬取网页需要完整代码用两种方法

爬取买购网户外运动品牌信息(只爬取一页即可)


需要代码

  • 写回答

2条回答 默认 最新

  • CSDN专家-showbo 2021-10-25 16:15
    关注

    页面数据接口这个,修改下page参数获取指定页的数据即可,不过接口返回的是html代码,具体内容需要用BeautifulSoup解析下

    https://www.maigoo.com/brand/search/?catid=8961&page=1&ajax=1&subaction=resultlist&action=searchlist
    
    

    题主要的代码如下,有帮助麻烦点下【采纳该答案】,谢谢~~有其他问题可以继续交流~

    img

    import requests
    from bs4 import BeautifulSoup
    for i in range(1,3):#采集1,2页数据
        url="https://www.maigoo.com/brand/search/?catid=8961&page=%s&ajax=1&subaction=resultlist&action=searchlist"%i
        html=requests.get(url).text
        soup=BeautifulSoup(html,features="html.parser")
        lis=soup.select('li')
        for li in lis:
            print('图片网址:'+li.select('img')[0].attrs['src'])
            print('品牌:'+li.select('.info a.name')[0].text)
            print('公司名称:'+li.select('.cbox')[0].text)
            print('公司介绍:'+li.select('.rongyu')[0].text)
            print('\n\n')
    
    
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
  • 普通网友 2021-10-25 15:59
    关注

    哈哈
    哈哈哈,
    你好直接

    import requests
    
    daima = requests.get('https://www.maigoo.com/brand/search/?catid=8961');
    
    print('代码如下:')
    print(daima)
    
    评论
查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 11月3日
  • 已采纳回答 10月26日
  • 创建了问题 10月25日

悬赏问题

  • ¥15 求局部放电案例库,用于预测局部放电类型
  • ¥100 QT Open62541
  • ¥15 stata合并季度数据和日度数据
  • ¥15 c语言练习:统计词频
  • ¥15 谁能提供rabbitmq,erlang,socat压缩包,记住版本要对应
  • ¥15 Vue3 中使用 `vue-router` 只能跳转到主页面?
  • ¥15 用QT,进行QGIS二次开发,如何在添加栅格图层时,将黑白的矢量图渲染成彩色
  • ¥50 监控摄像头 乐橙和家亲版 保存sd卡的文件怎么打开?视频怎么播放?
  • ¥15 Python的Py-QT扩展库开发GUI
  • ¥60 提问一下周期性信信号的问题