深海鲛鲨
2019-03-05 17:39用scrapy爬取网易财经股票的实时数据,出现爬取的数据丢失
10def parse_stock(self, response):
stock_item = ShishihqItem()
data_list1 = response.xpath("/html/body/div[@class='area']/div[@class='header']/div[@class='stock_info']/table/tr/td[2]/div[@class='stock_detail']/table/tr[1]/td[1]/span/strong").extract_first()
stock_item['收盘价'] =data_list1
print(stock_item)!
图片说明
也就是上图中的strong这一项中的12.91,为什么我把strong这一项都爬下来了,发现class="cRed">13.06<没有了,这是什么防爬虫机制
爬出的结果是:图片说明
- 点赞
- 回答
- 收藏
- 复制链接分享
1条回答
为你推荐
- scrapy-爬取京东笔记本电脑信息问题
- python
- selenium
- 开发语言
- chrome
- 2个回答
- 【scrapy爬虫问题】scrapy.xpath解析返回的结果有问题,求解答!!!
- python
- 1个回答
- scrapy中把数据存储到MongoDB,运行也没出错怎么查找不到数据库呢???
- python
- mongodb
- 1个回答
- scrapy框架+formdata+ajax爬取及翻页问题
- python
- 数据挖掘
- 测试用例
- 1个回答
- 利用Scrapy框架爬虫时出现报错ModuleNotFoundError: No module named 'scrapytest.NewsItems'?
- python
- 2个回答
换一换