做爬虫得时候遇到一个比较难搞定的网站,同事介绍说可以用webkit试下,我的具体需求是
模拟真实浏览器,取出登录之后的页面内容。
不知道webkit能否实现,有没有大神对webkit熟悉的。。。
webKit 实现爬虫 java
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
- 邀请回答
-
4条回答
- threenewbee 2018-05-28 10:50关注
webkit和ie是两种浏览器的内核。
要模拟访问网站,我们一般不直接用浏览器内核(你又不是开发浏览器)
我们可以用webbrowser(C#、VB)、selenium(python)、JxBrowser(java)等。
因为上面说的就是在你的程序里调用真实的浏览器,除了验证码比较麻烦一点,别的和人操作都没有区别,人能做的,程序肯定能做。解决 无用评论 打赏 举报
悬赏问题
- ¥15 delta降尺度计算的一些细节,有偿
- ¥15 Arduino红外遥控代码有问题
- ¥15 数值计算离散正交多项式
- ¥30 数值计算均差系数编程
- ¥15 redis-full-check比较 两个集群的数据出错
- ¥15 Matlab编程问题
- ¥15 训练的多模态特征融合模型准确度很低怎么办
- ¥15 kylin启动报错log4j类冲突
- ¥15 超声波模块测距控制点灯,灯的闪烁很不稳定,经过调试发现测的距离偏大
- ¥15 import arcpy出现importing _arcgisscripting 找不到相关程序