Unjx. 2021-07-23 11:36 采纳率: 84.6%
浏览 47
已结题

Python的Scrapy模块;解释一下?

img
这是一段别人(陌生人)的代码,当初她问我这哪里错了的时候我忘记问这段代码准备用来做什么了,现在啊,找不到那个人了,就想问一问,不知道有没有会scrapy的能解释一下这是准备干嘛?反正呢,我是不明白这个
我想,如果我知道了原作者的意图,说不定我还能补全这个代码,也算是给我这种刚学的人练练手
问:原作者写的这段代码是用来做什么的?

  • 写回答

3条回答 默认 最新

  • weixin_45864635 2021-07-23 13:24
    关注

    这个只是爬虫的Spider编写
    啥也没做 没有入口 都运行不了
    顶多实现下面:
    import requests
    url = 'https://www.santostang.com/'
    response = requests.get(url)
    print(response.text)
    with open('index.html','w',encoding='utf-8') as f:
    f.write(response.text)

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
  • python收藏家 2021-07-23 11:56
    关注

    这是爬虫主模块部分吧,看样子的打算爬上面那个网站的内容,后面是把爬取的数据保存一个html文件?

    评论
  • 碧池阿蒂拉 2021-07-23 11:56
    关注

    是个基于spider类的爬虫脚本,指定了爬虫名、允许爬取的域名列表和初始url列表,下面那个方法是把响应文本保存为本地的html文件

    评论
查看更多回答(2条)

报告相同问题?

问题事件

  • 系统已结题 7月31日
  • 已采纳回答 7月23日
  • 创建了问题 7月23日

悬赏问题

  • ¥15 Java环境配了,但启用不成功。
  • ¥15 求一个智能家居控制的代码
  • ¥15 ad软件 pcb布线pcb规则约束编辑器where the object matpcb布线pcb规则约束编辑器where the object matchs怎么没有+15v只有no net
  • ¥15 虚拟机vmnet8 nat模式可以ping通主机,主机也能ping通虚拟机,但是vmnet8一直未识别怎么解决,其次诊断结果就是默认网关不可用
  • ¥20 求各位能用我能理解的话回答超级简单的一些问题
  • ¥15 yolov5双目识别输出坐标代码报错
  • ¥15 这个代码有什么语法错误
  • ¥15 给予STM32按键中断与串口通信
  • ¥15 使用QT实现can通信
  • ¥15 关于sp验证的一些东西,求告知如何解决,