所有的主演导演评分信息都无法爬取，这是为什么？
python爬虫爬取数据出新问题
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
2条回答 默认 最新
- 2021-11-11 11:15回答 1 已采纳 先确定需要爬取的网站，然后分析网站的数据来源，是后端生成数据还是ajax生成数据，确定数据来源方式就根据HTTP请求编写代码，这个涉及一些请求参数的加密、转换等等处理，然后清洗数据和数据入库
- 2021-11-27 22:00回答 2 已采纳 你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。 或者是通
- 2022-06-06 20:12回答 4 已采纳 你题目的解答代码如下： #coding=gbk import requests from io import BytesIO from PIL import Image from selenium
- 2018-11-26 15:33lyhsdy的博客 1.获取商品目录 在Chrome浏览器开发者工具中，可以找到目录的JS地址： ... 得到商品数据 def get_categoryList(): url='http://you.163.com/xhr/globalinfo//queryTop.json' ...
- 2021-05-22 21:34回答 1 已采纳 这里我们以爬取淘宝评论为例子讲解一下如何去做到的。 这里主要分为了四步： 一 获取淘宝评论时，ajax请求链接（url） 二 获取该ajax请求返回的json数据 三 使用python解析js
- 2022-10-18 21:52回答 1 已采纳 图片是从cdn上过来的，做了防盗链。在headers中添加Refer，指向该网站就行了。 import re import requests import os if not os.path.ex
- 2022-08-17 17:07回答 3 已采纳 因为元素里的你要的内容是通过 ajax 请求动态加载的，可以浏览器抓包去看下，你想要的这条数据到底是哪个请求返回的，找到真正的请求，然后模拟发送就行了
- 2021-08-09 19:26五包辣条！的博客 Python爬虫-vip动漫采集 效果展示 爬取目标 网站目标：樱花动漫 工具使用 开发工具：pycharm 开发环境：python3.7， Windows10 使用工具包：requests，lxml， re，tqdm 重点学习内容 正则的使用 tqdm的...
- 2021-11-27 11:36回答 3 已采纳 你爬虫应该是用requests发送http请求的吧，这个是无法从elements找到，你要在network的doc分析网页，你找不到的数据很大可能是ajax请求渲染前端的
- 2019-04-22 20:43回答 3 已采纳 首先，我建议你主键最好不要设在userId上。让ID自增长。然后把userId作为一个普通的字段。 其次，我个人建议也不要设置外键关系。你可以通过把某一张表的ID放到另一张表里作为关联，但是不建议设
- 2022-02-28 22:22回答 1 已采纳 看你想怎么处理了，可以放到一行，可以放到word里，可以用Excel，你选一个，我教你另外你的代码需要看一下，要不不好改
- 2018-07-05 20:01东木月的博客 爬取策略 在爬虫系统中，待抓取URL队列是很重要的一部分。待抓取URL队列中的URL以什么样的顺序排列也是一个很重要的问题，因为这涉及到先抓取那个页面，后抓取哪个页面。而决定这些URL排列顺序的方法，叫做抓取策略...
- 2022-08-12 12:20回答 3 已采纳 不如换用requests库和bs4库吧。 from bs4 import BeautifulSoup as bs import requests as r url = 'https://fanqie
- 2021-11-03 17:28编程简单学的博客 使用 Python 爬取猫咪图片，并为猫咪????制作千图成像！ 爬取猫咪图片 本文使用的 Python 版本是 3.10.0 版本，可直接在官网下载：www.python.org 。 Pythonn 的安装配置过程在此不做详细介绍，网上随意搜都...
- 2023-09-14 11:47坚持不懈的大白的博客 首先，说明一下，本篇博客内容可能涉及到版权问题，为此，小编只说明一下实现思路，至于全部参考代码，小编不粘贴出来。不过，小编会说明详细一些，真心能够帮助到一些读者。仅供参考，请莫用于商业活动！
- 没有解决我的问题, 去提问
悬赏问题
- ¥20 腾讯企业邮箱邮件可以恢复么
- ¥15 有人知道怎么将自己的迁移策略布到edgecloudsim上使用吗？
- ¥15 错误 LNK2001 无法解析的外部符号
- ¥50 安装pyaudiokits失败
- ¥15 计组这些题应该咋做呀
- ¥60 更换迈创SOL6M4AE卡的时候，驱动要重新装才能使用，怎么解决？
- ¥15 让node服务器有自动加载文件的功能
- ¥15 jmeter脚本回放有的是对的有的是错的
- ¥15 r语言蛋白组学相关问题
- ¥15 Python时间序列如何拟合疏系数模型