请问一下各位大神， java爬虫可以爬取插件数据么？ 求各位大神指点一下。 可以的话能把思路告诉我么？
2条回答 默认 最新
qq_40748991 2017-10-23 02:51关注两个办法，一个找到中间内容ajax的链接，直接请求该链接来获取内容。
一个通过phantomjs，也就是浏览器方式，页面完全加载了，通过浏览器API获取网页内容解决 无用评论 打赏举报
分享
- 2017-09-26 09:29回答 4 已采纳 除了非正常方式登录，无解
- 2017-03-07 09:27回答 1 已采纳 http://blog.csdn.net/u014571011/article/details/51357066 另外知乎最近改版了，用fiddler看下
- 2017-11-13 06:31回答 8 已采纳 他是用的 font-family: stonefont; 这个字体。 具体啥字体不重要 。 你解析他的字符串。 . 这个看着是乱码。 实际 java能读出来 "\uE
- 2023-06-08 21:44坚持不懈的大白的博客 最简单的爬虫代码 也就是各位最常使用的，直接利用requests模块访问当前网站链接，利用相关解析模块从而获取得到自己想要的数据，如下(利用python爬虫爬取自己csdn个人主页的简介数据)： # -*- coding: utf-8 -*- ...
- 2017-06-30 01:53回答 2 已采纳 请参考我发的一个帖子[完整的小说站点爬虫-spring-mybatis-jsoup-http-client ](http://www.52pojie.cn/thread-542306-1-1.html
- 2022-02-09 17:25回答 3 已采纳 我遇到过两种网站是这养的,1.第一种是需要加cookie参数,加上了就可以 2.第二种就是直接使用selenium模拟浏览器
- 2018-09-29 03:13回答 1 已采纳 最好能上个样例.自己寻找规律自定义吧.一般现在的网站为了防止非法抓取数据都是做一些防护的.
- 2023-04-17 09:57pyspider 是一个用python实现的功能强大的网络爬虫系统，能在浏览器界面上进行脚本的编写，功能的调度和爬取结果的实时查看，后端使用常用的数据库进行爬取结果的存储，还能定时设置任务与任务优先级等。 优点： 1...
- 2021-12-03 10:39回答 4 已采纳 不同类型的表数据，后台一次性查询出来，封装在map集合中。前端再去遍历map集合，渲染数据。map的key可以用来表示不同的对象类型。
- 2021-12-31 16:57回答 2 已采纳 小程序授权并调用登录成功后，后台生成一个Token（UUID,JWT）每次请求前端都需要带上TokenToken保存在Redis并记录小程序会话密钥与当前用户ID请求进入时按照以下流程：检查是否存在T
- 2022-04-29 01:25回答 5 已采纳 分析思路：在前端有数据，到后台就没数据。 可能是前后端数据结构不一样，或者变量名称不一样。比如说你用int接受object类型等数据类型不同都有可能接受不到数据，或者会报错
- 2023-09-26 16:04一只会写程序的猫的博客 WebMagic是一个基于Java的开源爬虫框架，它提供了一个灵活且易于使用的API，可以帮助开发人员快速开发爬虫程序。你可以从Apache HttpClient的官方网站上下载最新的jar包，并将其添加到你的项目中。Jsoup是一个用于...
- 2018-04-10 08:23回答 3 已采纳 https://blog.csdn.net/a812919698/article/details/52243080
- 2021-03-14 20:501 Byte的博客 //返回后端数据给前台 public ResultJson(){} public ResultJson(Integer status, String message, Object data) { this.status = status; this.message = message; this.data = data; } public static ...
- 2021-11-22 11:08米兔-miny的博客 爬虫之解析数据的4种方式：XPath解析数据、BeautifulSoup解析数据、正则表达式、pyquery解析数据。
- 没有解决我的问题, 去提问
