为什么页面源码和httpclient结合jsoup解析的页面代码不同
求指教httpclient还是jsoup的问题，以及js加载的问题，比较困惑
爬虫相关内容，为什么页面源码和httpclient结合jsoup解析的页面代码不同
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
- 2017-10-25 07:48回答 1 已采纳 这是一个随机值，只是确保每次浏览器重新获取图片，而不是从缓存获取，导致验证码不刷新。 换言之，你用相同的random请求两次，得到的验证码图片还是不同的。
- 2012-05-31 11:48回答 3 已采纳 应该是httpClient抓取更牛逼吧，属于专业的抓取网页的库，可以设置代理，抓取失败可以重试抓取之类的 在抓取上jsoup比较弱，API简单，所以功能也简单么，主要是扩展htmlparser的功能
- 2012-09-13 15:53回答 1 已采纳 这很正常啊,有些是js动态加载的页面内容,有些是嵌了iframe之类的
- 2022-06-30 21:32资源名字：基于java+Jsoup+HttpClient的网络爬虫技术的网络新闻分析系统设计与实现（源码+文档）_MySQL_网络爬虫_数据挖掘.zip 资源内容：项目全套源码+完整文档 源码说明： 全部项目源码都是经过测试校正后百分百...
- 2021-08-16 20:33回答 3 已采纳 你前端传的是json，后端却用两个参数接收，肯定获取不到啊1、前端改成Params里传参，分别为projectCode=?,companyId=?或者2、后端改为对象接收参数，定义一个Request，
- 2014-07-25 17:44回答 5 已采纳 我之前也遇到过这个问题，网上说法很多，不过觉得都没有解决问题，后来相过有什么功能可以获取请求某一个url地址时所附带请求的其他链接地址，但是这个好像说是用抓包可以实现，不过我没实现 只能采用最原
- 2016-10-06 05:59回答 2 已采纳 楼主你好，HttpCLient是阿帕奇的工具包，你应该没有下载导入这个jar包。 这是中文使用用例： http://blog.csdn.net/wangpeng047/article/detail
- 2022-03-26 20:34盛者无名的博客 Jsoup页面解析 Jsoup是一款Java的HTML解析器,可直接解析某个URL地址、HTML文本内容.它提供了一套非常省力的API,可通过DOM,CSS以及类似于jQuery的操作方法来取出和操作数据. Jsoup的主要功能如下:1.从一个URL,文件或...
- 2020-08-21 10:25回答 2 已采纳 ``` print(postRequest(request).decode('utf-8')) ``` https://www.cnblogs.com/xiaoqi/p/5101795.
- 2013-10-28 11:06回答 5 已采纳 发送请求的参数与后台 处理程序 的要求不匹配。 特别是用 spring mvc时，容易出现该问题。 比如 @RequestMapping("/api/ddd") public @Res
- 2021-07-16 22:42回答 2 已采纳 由于前端传送的是json字符串，所以后端要用输入流接收，并转换为json格式，之后才能进一步操作。
- 2017-11-06 16:37johnson_moon的博客 本文介绍了如何利用HttpClient和Jsoup库的配合实现简单的Java爬虫程序
- 2021-05-31 16:43回答 1 已采纳 不关它会一直占用httpclient导致其无法被jvm回收，程序一直异常，后边就获取不到值了，直到崩溃。
- 2018-09-04 11:42wbzhongsy的博客 博客 学院 下载 GitChat TinyMind 论坛 APP 问答 ...Java爬虫（二）-- httpClient模拟Http请求+jsoup页面解析 2018年03月01日 15:00:12 阅读数：393 标签： java爬虫httpClientjsoup...
- 2020-10-17 17:27梦里逆天的博客 之前同事分享了一些关于Java爬虫的视频，其中有一个是用HttpClient及Jsoup爬取京东上的一些手机数据（如图片、标题、sku、spu等），同时参考几篇博客后基本实现目标，在此篇做个简单记录。 一、准备工作 由于需要将...
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 安卓adb backup备份应用数据失败
- ¥15 eclipse运行项目时遇到的问题
- ¥15 关于#c##的问题：最近需要用CAT工具Trados进行一些开发
- ¥15 南大pa1 小游戏没有界面，并且报了如下错误，尝试过换显卡驱动，但是好像不行
- ¥15 没有证书，nginx怎么反向代理到只能接受https的公网网站
- ¥50 成都蓉城足球俱乐部小程序抢票
- ¥15 yolov7训练自己的数据集
- ¥15 esp8266与51单片机连接问题(标签-单片机|关键词-串口)（相关搜索：51单片机|单片机|测试代码）
- ¥15 电力市场出清matlab yalmip kkt 双层优化问题
- ¥30 ros小车路径规划实现不了，如何解决？(操作系统-ubuntu)