我想问一下现在爬百度贴吧老帖子只能爬到一万贴，再翻就是当天的帖子了，翻不到以前的，这种情况你是怎么应对的？
1条回答 默认 最新
- 2021-08-09 16:26回答 1 已采纳 可以在浏览器开发者工具里面ctrl+f搜索文章的关键词找到该请求。
- 2021-12-22 17:33回答 1 已采纳 你这个是VPN代理问题，你可以将VPN设置成部分代理，不要全部代理你的网络。
- 2021-07-24 14:01回答 3 已采纳 bilibili加了反扒，你代码没加请求头user-agent，禁止访问了。有帮助麻烦点个采纳【本回答右上角】，谢谢~~ 改成下面的就行 from urllib.request import url
- 2020-12-03 09:13weixin_39903872的博客 一、介绍我们常遇到一些很长的贴吧连载帖子想存到本地再看此文就是运用python爬取指定百度贴吧的帖子并存到本地满足需求环境:python2.7目标网页:【长篇连载】剑网3的正史和野史——从头开始讲剧情故事源码存放:源码...
- 2022-03-08 08:32回答 2 已采纳 第二个li的div下少了结束标签导致etree解析出错了少了div结束标签后，etree将建筑类别后的几点全部归类到第二li下了，改下面这样就可以了 import requests from lxm
- 2021-11-30 12:48回答 5 已采纳 这个是提示这个函数已过期，但不影响运行！ 最好不要用，一般过期函数会有其替代的函数，你可以进入函数实现看看说明就知道了！ 如果是你来处理后续，我建议是这样做！
- 2021-09-30 17:40回答 2 已采纳 你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。 或者是通
- 2018-01-31 14:07喜碧夫人听众的博客 说在前面 之前分享了微博的爬虫代码，因为这些大网站的...这次分享我写的爬取百度贴吧帖子内容的爬虫。 上代码 import requests from bs4 import BeautifulSoup import re import pymysql import time phone_p
- 2017-09-14 08:55回答 4 已采纳 你自己建的py文件起名字不要和python的包名一样！问题应该出在这里，你自己写的threading.py文件把python的threading覆盖了
- 2021-07-04 16:59回答 2 已采纳 重点还是从网页上分析翻页的网址构造情况，即baseurl及请求的url要写准确,另外可能需要补充一些请求参数。
- 2021-08-30 20:13回答 3 已采纳 请求头没有配置好，重点是 headers 参数，看一下吧
- 2020-12-09 10:28weixin_39776298的博客 pn 传贴吧翻页 whileTrue:for ye in range(int(pn)): #这个循环是循环贴吧翻页 pn = ye * 50url= "https://tieba.baidu.com/f?kw=%s&ie=utf-8&pn=%d" %(kw, pn)#爬贴吧第一页的所有帖子 html = requests.get(url, ...
- 2022-08-09 16:58回答 3 已采纳 soup.find_all('div',class_='box_con')[1]这样呢
- 2022-06-13 10:31Single_minde的博客 对百度贴吧的爬取，主要利用了request库和re库分别获取贴吧的包和内容，最后输出贴吧所有的评论和链接。
- 2017-03-15 08:52韦艳莹的博客的博客 前面爬完了糗事百科，接下来看看百度贴吧。 可是光光获取评论文字也是忒无聊了，咱们来点图片。 然鹅，找哪儿的图好吶，翻来覆去，一个偶然的机会，让我看到了这个： 机智的我灵机一动，为...
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 想通过pywinauto自动电机应用程序按钮，但是找不到应用程序按钮信息
- ¥15 MATLAB中streamslice问题
- ¥15 如何在炒股软件中，爬到我想看的日k线
- ¥15 51单片机中C语言怎么做到下面类似的功能的函数（相关搜索：c语言）
- ¥15 seatunnel 怎么配置Elasticsearch
- ¥15 PSCAD安装问题 ERROR: Visual Studio 2013, 2015, 2017 or 2019 is not found in the system.
- ¥15 (标签-MATLAB|关键词-多址)
- ¥15 关于#MATLAB#的问题，如何解决？（相关搜索：信噪比，系统容量）
- ¥500 52810做蓝牙接受端
- ¥15 基于PLC的三轴机械手程序