用httpclient或者htmlunit解析这个网页是无法获取到内容,
http://www.hfr.cc/forum.php?mod=viewthread&tid=88379&extra=page%3D1
这个帖子是英文的,如果是中文的就能获取到主贴的内容,
有谁知道这是为什么,有什么方法可以解决的吗?
用httpclient或者htmlunit解析这个网页是无法获取到内容
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
- 邀请回答
-
1条回答 默认 最新
- ChatGPTᴼᴾᴱᴺᴬᴵ 2023-02-28 13:30关注
该回答引用ChatGPT
可能是因为该网站的内容是动态生成的,而不是静态的。许多网站使用 JavaScript 和 AJAX 技术动态生成页面内容,这使得使用 HttpClient 或 HtmlUnit 等工具很难从页面中提取内容。这些工具只能获取页面的初始 HTML 代码,而无法获取动态生成的内容。
解决此问题的方法之一是使用一个支持 JavaScript 的爬虫框架,例如 Selenium 或 PhantomJS。这些框架可以模拟浏览器行为,使您能够获取页面的完整内容,包括动态生成的内容。
另一个解决方法是直接使用该网站的 API 接口,如果该网站提供 API 接口,那么您可以通过 API 接口获取所需的数据。这是一种更加可靠和有效的方法,因为 API 接口通常是为了提供可靠和可重复的数据访问而设计的。
解决 无用评论 打赏 举报
悬赏问题
- ¥15 stm32开发clion时遇到的编译问题
- ¥15 lna设计 源简并电感型共源放大器
- ¥15 如何用Labview在myRIO上做LCD显示?(语言-开发语言)
- ¥15 Vue3地图和异步函数使用
- ¥15 C++ yoloV5改写遇到的问题
- ¥20 win11修改中文用户名路径
- ¥15 win2012磁盘空间不足,c盘正常,d盘无法写入
- ¥15 用土力学知识进行土坡稳定性分析与挡土墙设计
- ¥70 PlayWright在Java上连接CDP关联本地Chrome启动失败,貌似是Windows端口转发问题
- ¥15 帮我写一个c++工程