1.经百度查了之后说需要安装一个xvfb
可是这玩意启动报错
2.而且我找chrome驱动也找了很长时间，这玩意在中国的资料太少了
3.因为很多网页都是通过js效果来进行反扒，大牛们对我这个有什么建议，或者对linux比较了解的也可以帮我看看
使用selenium在linux无界面搭建web爬虫
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
3条回答 默认 最新
关注selenium 应该很智能化的啊，毕竟都做了这么久了。
如果还是不行的话，我也比较建议用Python环境来做，BeautifulSoup，神箭手什么的，以及正则规则都非常的酷。
希望对你有用 :-)
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报 分享
- 2016-08-22 08:30回答 3 已采纳 selenium 应该很智能化的啊，毕竟都做了这么久了。 如果还是不行的话，我也比较建议用Python环境来做，BeautifulSoup，神箭手什么的，以及正则规则都非常的酷。 希望对你
- 2018-04-09 06:42回答 2 已采纳 你没有安装插件，无法调用到插件
- 2022-03-18 12:30回答 2 已采纳 driver.swith_to.window(driver.window_handles[1]),函数名写错了，不是swith是switch，少写了个c，改成：driver.switch_to.win
- 2019-04-25 16:48平平同学爱学习的博客 《Java 中使用 selenium 和 chrome 浏览器下载动态网页》 一文中，演示了如何在 window 环境下通过 selenium 和 chrome 来下载动态网页。但是我们的爬虫一般是运行在 linux 服务器上的。服务器上一般是没有 GUI 环境...
- 2022-01-20 15:43回答 1 已采纳 大概看了逻辑， 感觉是 红框部分的层次错了。全部往左移动4格红框部分是爬完1页（for 语句）后， 点击下一页吧？
- 2022-04-27 18:29回答 1 已采纳 使用session发送请求；获取验证码图片，以及发送验证码数据应该在同一个session请求中： 发送URL请求，得到验证码图片URL访问图片URL，下载验证码图片发送验证码数据 ----------
- 2022-11-09 18:59回答 3 已采纳
- 2023-05-16 18:32轻烟飘荡的博客 Python爬虫进阶（1),Django+Selenium+Mysql+SimpleUI从零搭建自己的爬虫后台，实现可视化监控爬虫内容信息
- 2022-05-05 22:19回答 1 已采纳 不建议使用自动化的selenium，慢
- 2022-10-21 12:35回答 2 已采纳 可以看下xpath语法，还有个插件（xPath Finder）在firefox浏览器里可以一键定位到 元素并复制xpath路径，如果插件给出的xpath路径定位不到，可以尝试自己写相对路径
- 2021-10-24 09:44回答 1 已采纳 爬取内容不完整，应该是文档的更多内容，要往下滑动页面才会出现这个不太清楚，应该不是什么反爬，就是类似于中途给你弹出个广告，要具体分析怎么弄VIP内容肯定是需要你的账号是VIP才能看得到的，与selen
- 2022-07-11 07:35「已注销」的博客 1. Selenium 中式读法：【瑟林捏幕 】 Selenium( selenium 中文网：http://www.selenium.org.cn/ )是一个强大的网络数据采集工具，最初是为了网站自动...Selenium 不带浏览器，它需要与第三方浏览器结合在一起使用...
- 2023-03-23 15:30回答 4 已采纳 参考GPT：搭建Selenium Hub/Node集群在Kubernetes集群上是一种常见的做法，但是确实存在一些潜在的风险和挑战。以下是一些需要注意的事项： 1 数据丢失：如果运行Hub的Pod
- 2021-07-02 02:13攻城狮崔同学的博客 文章目录一、自动化测试1.1 概念1.2 介绍1.3 分类1.4 Selenium二、环境2.1 Python、Pycharm2.2 Selenium2.2.1 pip2.2.2 验证2.3 Browser driver2.4 Non-GUI 无头模式（无界面）三、Selenium API3.1 WebDriver3.1.1 ...
- 2022-11-21 12:35管程序猿的博客 1爬虫是什么 2名词解释 2.1 Webmagic： 2.2 webmagic的总体架构： 2.3 webmagic的总体架构的四大组件 2.3.1 Downloader 2.3.2 PageProcessor 2.3.3 Scheduler 2.3.4 Pipeline 2.4代理IP： 2.4.1代理IP类型： 2.5 ...
- 没有解决我的问题, 去提问
