m0_70680242 2022-09-12 18:54 采纳率: 82.2%
浏览 21
已结题

scrapy框架,selector

尝试根据网络上自学教程使用scrapy
开始就崩了
spider代码如下

import scrapy


class DoubanSpider(scrapy.Spider):
    name = 'douban'
    allowed_domains = ['moive.douban.com']
    start_urls = ['https://movie.douban.com/top250']

    def parse(self, response):
        sel = scrapy.Selector(response)
        a = sel.xpath('//div')
        print(a)
        # for base in base_list:
        #     name = base.xpath('.//div')

始终找不到元素,已经确定robot协议为False
在直接使用xpath进行解析时会得到数据,selector之后无法查询到

  • 写回答

2条回答 默认 最新

  • honestman_ 2022-09-12 19:11
    关注

    结果是什么

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

问题事件

  • 已结题 (查看结题原因) 9月13日
  • 已采纳回答 9月13日
  • 创建了问题 9月12日

悬赏问题

  • ¥15 在若依框架下实现人脸识别
  • ¥15 网络科学导论,网络控制
  • ¥100 安卓tv程序连接SQLSERVER2008问题
  • ¥15 利用Sentinel-2和Landsat8做一个水库的长时序NDVI的对比,为什么Snetinel-2计算的结果最小值特别小,而Lansat8就很平均
  • ¥15 metadata提取的PDF元数据,如何转换为一个Excel
  • ¥15 关于arduino编程toCharArray()函数的使用
  • ¥100 vc++混合CEF采用CLR方式编译报错
  • ¥15 coze 的插件输入飞书多维表格 app_token 后一直显示错误,如何解决?
  • ¥15 vite+vue3+plyr播放本地public文件夹下视频无法加载
  • ¥15 c#逐行读取txt文本,但是每一行里面数据之间空格数量不同