鸿 鸿 2023-12-26 20:31 采纳率: 92.7%
浏览 4
已结题

获取数据问题,不能获取数据

请问搜索后运行结果是1怎么回事啊?

img

import requests
import parsel

def get_response(html):
    headers = {

        "user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/103.0.0.0 Safari/537.36"
    }
    response = requests.get(html, headers=headers)

    return response

# 提取小说名称和所有章节的链接列表
def get_novel_info(html):
    html_data = get_response(html).text
    selector = parsel.Selector(html_data)
    name = selector.css(".info h1::text").get()

    href = selector.css(".listmain dd a::attr(href)").getall()

    link_list = ['https://www.bqgbe.com/' + i for i in href]

    return name, link_list


def get_content(html):
    link_data = get_response(html=html).text

    link_selector = parsel.Selector(link_data)

    print(link_selector)
    title = link_selector.css('.content h1::text').get()
    content = '\n'.join(link_selector.css('#chaptercontent::text').getall())
    return title, content


def save(name, title, content):
    with open(name + '.txt', mode='a', encoding='utf-8') as f:
        f.write(str(title))
        f.write('\n')
        f.write(str(content))
        f.write('\n')
    print('保存: ', title)

def search(word):

    search_url=f'https://www.bqgka.com/user/search.html?q={word}'

    json_data=get_response(html=search_url).json()
    print(json_data)

if __name__ == "__main__":
    search('弃宇宙')

    # url="https://www.bqgka.com/book/3315/"
    # name, link_list = get_novel_info(html=url)
    #
    # for link in link_list:
    #     title, content = get_content(html=link)
    #
    #     save(name=name, title=title, content=content)
    #     print(link)




  • 写回答

2条回答 默认 最新

  • 虫虫仙人 2023-12-26 21:43
    关注

    看图片,你的47行代码的url过时了。
    兄弟你需要重新定位一下

    img

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

问题事件

  • 系统已结题 1月10日
  • 已采纳回答 1月2日
  • 创建了问题 12月26日

悬赏问题

  • ¥15 DS18B20内部ADC模数转换器
  • ¥15 做个有关计算的小程序
  • ¥15 MPI读取tif文件无法正常给各进程分配路径
  • ¥15 如何用MATLAB实现以下三个公式(有相互嵌套)
  • ¥30 关于#算法#的问题:运用EViews第九版本进行一系列计量经济学的时间数列数据回归分析预测问题 求各位帮我解答一下
  • ¥15 setInterval 页面闪烁,怎么解决
  • ¥15 如何让企业微信机器人实现消息汇总整合
  • ¥50 关于#ui#的问题:做yolov8的ui界面出现的问题
  • ¥15 如何用Python爬取各高校教师公开的教育和工作经历
  • ¥15 TLE9879QXA40 电机驱动