weixin_51643586 2021-04-06 12:31 采纳率: 100%
浏览 138
已采纳

Python爬取笔趣阁小说只保存第一章,哪里出错了

from selenium import webdriver
from bs4 import BeautifulSoup
import time

PATH = 'C:\Program Files\chromedriver.exe'
driver = webdriver.Chrome(PATH)
driver.get('http://www.xbiquge.la/41/41495/18842440.html')
content = driver.page_source.encode('utf-8').strip()
soup = BeautifulSoup(content, 'lxml')


# get information
def getinfo():
    chapter_name = soup.find('div', class_='bookname').h1
    chapter_info = soup.find('div', id='content')
    with open(r'C:\Users\14155\Desktop\Python\爬虫实战案例\笔趣阁\全属性武道\{}.txt'.format(chapter_name.text[4:]), 'w',
              encoding='utf-8') as f:
        f.write(chapter_name.text.strip() + "\n\n" + chapter_info.text.replace(' ', ''))


# next chapter
def nextchapter():
    next_chapter = driver.find_element_by_link_text('下一章')
    next_chapter.click()


def main():
    for i in range(5):
        getinfo()
        nextchapter()


main()
  • 写回答

3条回答 默认 最新

  • 木三136 2021-04-06 14:02
    关注

    您的soup只访问了一次,就是说getinfo()这个函数一直在对第一章进行操作

    您可以在每次使用getinfo()这个函数时,先更改一下soup

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(2条)

报告相同问题?

悬赏问题

  • ¥15 多电路系统共用电源的串扰问题
  • ¥15 slam rangenet++配置
  • ¥15 有没有研究水声通信方面的帮我改俩matlab代码
  • ¥15 对于相关问题的求解与代码
  • ¥15 ubuntu子系统密码忘记
  • ¥15 信号傅里叶变换在matlab上遇到的小问题请求帮助
  • ¥15 保护模式-系统加载-段寄存器
  • ¥15 电脑桌面设定一个区域禁止鼠标操作
  • ¥15 求NPF226060磁芯的详细资料
  • ¥15 使用R语言marginaleffects包进行边际效应图绘制