• 全部
  • 关注
  • 有问必答
  • 等你来答

排行榜

  • 用户榜
  • 标签榜
  • 冲榜分奖金

频道

  • 编程语言
  • 后端
  • Python
  • Java
  • 前端
最新最热精华悬赏待回答 筛选
  • 0

    回答

charles抓包抖音无网络其他app都有网络

其他类型有网络能抓到抖音无网络，手机ios系统求大佬指点一二

回答 m0_66661677
  • 2

    回答

我的爬虫得到的是空内容

本来我是打算得到十个最火的图片 但是在加粗的地方出现了问题，得到的是空的数组（大概），我不太清楚应该怎么改，欢迎各位指正 def main(): baseurl = "https://stoc

回答 dmc2003040
采纳率0%
  • 2

    回答

python爬取证监会行政监管措施遭遇 IndexError: list index out of range

需求：深圳证监会政府公开页面http://www.csrc.gov.cn/shenzhen/ ... gk.shtml?tab=zdgkml爬取主动公开目录-证监局文种体裁-行政监管措施的842条数据

回答 小想看格桑花
采纳率0%
  • 6

    回答

网站搜索的批量自动化搜索的脚本

需要对一个搜索网站进行批量搜索，要求是shell脚本或者python脚本搜索网站：https://blast.ncbi.nlm.nih.gov/Blast.cgi?PROGRAM=tblastn&PA

回答 bigben446
采纳率33.3%
  • 1

    回答

爬虫只得到空列表怎么解决#print(img_src_list)

问题遇到的现象和发生背景 问题相关代码，请勿粘贴截图 运行结果及报错内容 我的解答思路和尝试过的方法 我想要达到的结果 import requests import re import os if

回答 阳54
采纳率100%
  • 1

python爬虫发送post请求，遇到了未知问题

我这样写的方式有错误吗？，该填的参数都填了，不知道为什么会报这个错误。 def get_admin_sanction(self): url = 'https://credi

回答 a971386334
采纳率100%
  • 2

一个python requests 爬虫遇到乱码的问题

我在爬虫的时候遇到了这样的乱码，太原本应该是中文 来看看这个是什么意思他出现的乱码都是些 \u5361 \u5206 的？

回答 刘锦城ljc
采纳率100%
  • 2

    回答

爬取小说时超出索引范围

问题遇到的现象和发生背景 本人出于兴趣开始了python的相关学习，在跟着网课学习爬虫的过程遇到了一些问题 问题相关代码，请勿粘贴截图 def get_text(url):...if r =

回答 D244700
采纳率0%
  • 1

    回答

在使用selenium模拟登录12306时，滑块一直滑动验证失败

问题遇到的现象和发生背景 在使用selenium模拟登录12306时，滑块一枝滑动验证失败 问题相关代码，请勿粘贴截图 import time from selenium import webdriv

回答 weixin_53215066
采纳率40%
  • 2

爬虫爬取数量改变不了，如何解决？

import requests import json if __name__ == '__main__' : start_url = 'http://scxk.nmpa.gov.cn:81

回答 阳54
采纳率100%
  • 1

    回答

python如何同时执行一个函数多次？

问题遇到的现象和发生背景 我通过requests和etree得到了一个图片的url列表，然后我把列表里的每一个值都放到我创建的队列里面去然后我写一个download方法，这个download方法就负责

回答 Unjx.
采纳率88%
  • 0

    回答

Python如何获取浏览器开发者工具下“网络”里的文件？

我正在通过浏览器的f12功能下载m3u8和key文件，再使用python进行解析。但是挨个视频获取这两类文件的过程效率太低，在python中可以使用什么方式或者什么库获取它们？ 我对Requests

回答 tigerForest_
  • 1

    回答

学习python爬虫代码执行出现 ValueError: not enough values to unpack (expected 2, got 1) 求解答

问题遇到的现象和发生背景 学习python执行爬虫代码 问题相关代码，请勿粘贴截图 import urllib.request import re # 请求头信息，字段名:字段值 格式：heade

回答 yaoyifan22
采纳率0%
  • 0

    回答

学习的爬虫代码执行出现 ValueError: not enough values to unpack (expected 2, got 1) 求解

import urllib.request import re # 请求头信息，字段名:字段值 格式：header = {"user-agent",具体用户代理值} headers = {"Us

回答 yaoyifan22
采纳率0%
  • 1

    回答

爬虫用cookie只能爬一半怎么办?

问题遇到的现象和发生背景 def main(ID, pages): global movie_name for i in tqdm(range(0, pages)): # 豆瓣只开放500条评论

回答 把喜欢给你.
采纳率0%
  • 1

百度安全验证（爬取百度搜索结果，出现这个问题如何解决）

已经添加请求头了 httpGet.setHeader("User-Agent","Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.

回答 球进了
采纳率66.7%
  • 0

    回答

Scrapy框架写的python爬虫，爬虫结束后的汇报都代表了什么意思？

每次scrapy框架爬虫结束以后，都会有如下显示，请问这些产生的结束数据，都代表了什么意思？请各位CSDN论坛大咖解释一下。

回答 m0_56550331
采纳率0%
  • 1

    回答

运用selenium进行爬虫时，获取的网页中的body内的内容被字符“正在载入中代替”，请问如何解决。这导致了我无法对网页进行元素提取。

print("开始执行") op = webdriver.Chrome(r'C:\Program Files\Google\Chrome\Application\chromedriver.exe')

回答 m0_63430316
采纳率0%
  • 1

    回答

find_all()如果在结构体中找不到对应的元素怎么办，比如结构体可能缺失该元素

下面的数据是不对的，mvdate也就是上映日期，有些电影他没有写上映日期，我需要让所有数据的对应索引是一样的，但是现在如果他找不到对应的元素值，仍然继续写入，这样的话，数据顺序是错误的，到后面会报索引

GAO_A
采纳率66.7%
  • 1

    回答

pyspider all时，出现TypeError

命令行运行pyspider all时，出现报错C:\Users\lenovo>pyspider allf:\anaconda\lib\site-packages\pyspider\libs\ut

回答 zxx3Z
采纳率0%
  • 3

请问这个爬虫出了什么问题，他的结果是None

这个出来的结果是None,想知道怎么回事，就是简单的爬取一个页面的评论

回答 m0_61488091
采纳率100%
  • 0

    回答

求一个爬虫厉害的做个东西

爬取大众点评：北京美食，按人气排名，要有团购的店铺；要店铺名字，星级，人均，地址，团购菜和团购价格，只要120个就可以

回答 ＆599
  • 2

python爬虫初学者，网页手动打开过才显示数据，爬虫访问没打开过的网页，爬不到数据怎么办？

以前打开过的网页，会有js_r['model']['in']属性 ，没手动打开过得js_r['model']是空的。下图是打开手动网页看到的。没点开过的用爬虫获取发现都是空的，这种怎么办？ 网址：ht

sinat_39294068
采纳率100%
  • 1

    回答

scrapy中start_requests指定回调函数为何没有调用

###### 问题遇到的现象和发生背景 ef start_requests(self): login_url = 'https://antispider7.scrape.center/

回答 王太歌
采纳率0%
  • 4

请各位帮我看一下，我这个Chromedriver的问题。我在网上把自己能试的方法都试了。实在是解决不了，

这是我的Chrome版本和Chromedriver版本 这是我的代码，能打开浏览器，但是报错 运行之后就在报错

回答 . 終末
采纳率100%
  • 2

贝壳找房 夜神模拟器抓不到包

用夜神模拟器安装贝壳找房app 然后用charls抓包 只能抓到一些图片 模拟器是Android7 64位本来想换Android5试一下 结果这app只能在64上装 ，有抓过贝壳app的知道怎么弄吗

回答 杉杉锅锅
采纳率100%
  • 2

    回答

爬虫request能不能提取出正在获取的网页的url

正常都是填完参数后就能进行网页获取但是如果我想把该网页的url也保存下来，如果不填参数全填url的话，url会显得很臃肿而且代码也不好看，能不能提取出正在获取的网页的url呢

回答 a971386334
采纳率100%
  • 1

    回答

python爬虫遇到重定向，请问应该怎么解决？每次都要手动获取一个cookie的值，怎样可以自动获取？

每次都要修改代码里的这个cookie才能继续执行程序，应该是登录这个网页是进行了重定向，然后有没有一个好的方法可以解决这个问题，或者是我怎么去获取网页登录之后GET包里面的cookie

回答 weixin_47344539
采纳率0%
  • 1

这段selenium爬虫程序问题出在哪里

问题遇到的现象和发生背景 爬到第二页就提示没有获得元素，第一页都是可以获取的，是怎么回事呢 问题相关代码，请勿粘贴截图 import time from selenium import webdriv

回答 binggo6656
采纳率71.4%
  • 1

    回答

爬虫抓取网络播放器渲染H5的video标签中的src值

大家都知道爬虫抓取网页元素，利用正则匹配规则截取想要的数据，例如我用scrapy，但是它不具备JS渲染，所以我加上了Splash，但真正的困难来了，网页其它都没问题，这些在抓取常规网站是完全没问题的，

回答 SiriBen
采纳率0%