java爬虫如何获取非html页面内容

这几天在写一个爬虫程序爬课表，但是课表不是一个html页面，没有html标签，相当于一个文本文档，所以每次获取这个页面内容返回的结果都是空，求教应该怎么获取这个页面的内容？

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

1条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
threenewbee 2017-10-27 01:27
关注
webclient请求页面，不管是不是html，都可以把返回结果取下来。如果得不到，看看是不是缺少cookie、参数，导致没有正确返回结果

解决无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

java爬虫获取小说相关内容 java 爬虫
2017-06-30 01:53

回答 2 已采纳请参考我发的一个帖子[完整的小说站点爬虫-spring-mybatis-jsoup-http-client ](http://www.52pojie.cn/thread-542306-1-1.html
python爬虫html获取不全 html python 爬虫
2022-06-24 19:43

回答 1 已采纳其实有的，但是这个网站应该是为了懒加载把url用base64密了一下，然后再动态加载，其实我下面发的这个就是url 是base64后的url 解码后就是https://s1.aigei.com/
java爬虫页面class都一样怎么办 java 爬虫
2018-09-29 03:13

回答 1 已采纳最好能上个样例.自己寻找规律自定义吧.一般现在的网站为了防止非法抓取数据都是做一些防护的.
java爬虫之获取HTML元素
2020-06-11 20:00

玉带林中挂的博客如上图所示，我要获取div下的img标签下的src的内容之前我的思维是直接定位到div，然后进行爬取： Elements imgDiv = topicReplys.select(".smallImg.clearfix.topic")； String img = imgDiv.attr("src"); ...
爬虫获取的图片尺寸不对 html5 python 爬虫
2022-10-22 14:15

回答 1 已采纳在浏览器里f12看一下你抓取的那个原图是不是跟你下载下来的一样。如果一样，有没有可能是网站知道你非正常访问，给你转到一个裁剪后的图片地址。
爬虫 POST请求获取网页标题内容 python 爬虫
2022-10-26 16:35

回答 1 已采纳 post和get方法的使用不是你决定的，二十接口使用的是什么请求方式，如果它是get请求那就只能用get请求，是post就只能用post
python爬虫获取内容不全是怎么回事？ python 爬虫
2023-03-01 15:21

回答 2 已采纳你访问的这个接口就只有五千多条数据，您可以在返回的数据中看到，你可以把获取到的数据输出下resp.json()：totalCount': 5860, 'totalPages': 59因此，如果要爬取更
【技术应用】java通过url爬虫获取公众号文章内容
2022-12-01 21:54

Dylan～～～的博客 java通过url爬虫获取公众号文章内容，同时涉及CSDN文章内容爬取，基于开源工具mlunit实现
Python爬虫动态页面获取问题 python 爬虫
2021-12-08 16:12

回答 1 已采纳爬错了，是这个https://wax.alcor.exchange/api/markets
Python selenium的爬虫无法完整爬取整个页面的内容 python selenium 爬虫
2021-10-24 09:44

回答 1 已采纳爬取内容不完整，应该是文档的更多内容，要往下滑动页面才会出现这个不太清楚，应该不是什么反爬，就是类似于中途给你弹出个广告，要具体分析怎么弄VIP内容肯定是需要你的账号是VIP才能看得到的，与selen
爬虫关于获取标签内容的问题 python 大数据
2022-09-05 23:42

回答 2 已采纳 import re from urllib.request import urlopen from bs4 import BeautifulSoup html = urlopen('https:
Python爬虫了解Web前端——HTML
2022-07-21 01:23

He.ZaoCha的博客了解Web前端——HTML HTML语言标签、元素、结构概述 HTML 标签元素 HTML 文件结构 HTML 的基本标签文件开始标签文件头部标签文件标题标签 </a></li><li><a href="#_ltmeta_122">元信息标签 <meta></a></li><li>...
Python爬虫遇到获取不了页面数据 python
2022-11-15 23:10

回答 1 已采纳可以查看请求目标地址头的时候，是否有加密参数这一点很重要
java 爬虫 js_JAVA 爬虫获取js动态生成的网页数据
2021-02-12 22:04

褚召鹏的博客问题：有些网页数据是由js动态生成的，一般我们抓包可以看出真正的数据实体是由哪一个异步请求获取到的，但是获取数据的请求链接也可能由其他js产生，这个时候我们希望直接拿到js加载后的最终网页数据。解决方法：...
JAVA爬虫+jsoup+Kibana+Elasticsearch+vue爬取JD搜索页面
2022-08-18 18:51

程序猿Ada的博客 JAVA爬虫+高亮搜索+jsoup+Kibana+vue界面
没有解决我的问题, 去提问

悬赏问题

¥15 多电路系统共用电源的串扰问题
¥15 shape_predictor_68_face_landmarks.dat
¥15 slam rangenet++配置
¥15 有没有研究水声通信方面的帮我改俩matlab代码
¥15 对于相关问题的求解与代码
¥15 ubuntu子系统密码忘记
¥15 信号傅里叶变换在matlab上遇到的小问题请求帮助
¥15 保护模式-系统加载-段寄存器
¥15 电脑桌面设定一个区域禁止鼠标操作
¥15 求NPF226060磁芯的详细资料