爬取社交App的信息，如注册用户的昵称、头像、评论等，语言不限，只要能抓取到即可。
应用场景：就是用一部手机，开始爬取，可在手机上安装插件。
爬虫 抓取APP上的 信息，可行性？
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
3条回答 默认 最新
xiaoshujun123 2015-01-23 03:18关注应该不行，爬虫一般应用于网页的内容爬取，app类怕爬取不到吧，而且爬虫都是爬取到网页然后进行网页分析获取到数据的。。
解决 无用评论 打赏举报 分享
- 2015-01-23 02:04回答 3 已采纳 项目已完成，基于scrapy 改造的分布式爬虫。
- 2023-04-13 13:18回答 1 已采纳 爬虫严格来讲并不算一个大方向，更偏向于js逆向，python的话推荐走后端方向至于系统学习的话，推荐去blibili找一些路线，然后根据路线去找bilibili上播放量比较高的视频进行系统学习
- 2021-07-06 07:10回答 2 已采纳 不登陆的情况下不可以爬数据，网站会自动验证登录状态，你可以cookies去做，实际上也是已经登录了用户。如果跳过登录直接拿数据，就是入侵了，一般技术是做不到，而且难度大也是违法。如果对你有帮助，可以点
- 2024-04-22 15:13网安猫叔的博客 ① Python所有方向的学习...爬虫与反爬虫攻防教程包，含15个大型网站迫解⑥ 爬虫APP逆向实战教程包，含45项绝密技术详解⑦ 超300本Python电子好书，从入门到高阶应有尽有⑧ 华为出品独家Python漫画教程，手机也能学习。
- 2022-08-01 12:49回答 3 已采纳 爬虫之类的，涉及到各个平台的用户协议，如果违规使用爬虫或者是逆向js之类的，是要进去喝茶的，并且做爬虫大多数都是黑灰产，并且自从19年3月份开始的净网行动，有很多人因为涉及到爬虫之类的，被请去喝茶了，
- 2021-09-06 00:23回答 2 已采纳 可以用meta累计请求次数，在后续的请求中获取请求次数。 def parse(self, response): meta = {'crawlCnt': 0} if response.met
- 2021-08-14 09:34回答 4 已采纳 f 在字符串外面 a = input() url = f'https://movie.douban.com/top250?start={a}&filter=' 或者 a = 'abc' b = '
- 2020-04-07 18:36吴秋霖的博客 但是只要爬虫开发人员针对性的来扫，还是十分容易被检测出来的 做爬虫就注定着要走上反反爬的这条道路，在我们职业生涯中走过最长的路，就是反爬的套路。之前我碰到一个网站，它是一个国外的航空网站vietjetair...
- 2021-11-19 14:39回答 1 已采纳 第一个问题，你用html.xpath('//div[@class="co_content8"]/ul/table')找不到，是因为在table那一类，有很多分支标签，所以定位不到具体的元素。第二个问题
- 2022-08-15 18:55回答 2 已采纳 你这样去爬天猫肯定是要被反爬的，代理都不加上，如果数据量小，可以加上代理跑一跑，但是如果数据量比较大的话，你是绕不开滑块验证码的，而出不出现验证码是根据你的cookie来决定的，提供一个大批量跑的思路
- 2023-01-17 13:25回答 5 已采纳 你把res打印出来看下。应该是request.get方法没有获取到数据，或者获取的数据格式和你想要的不一致，所以报错了。如果是获取的数据不对，检查下您的请求参数是否正确。
- 2020-11-29 13:00weixin_39682511的博客 裸睡的猪：六月分享主题：爬虫zhuanlan.zhihu.com裸睡的猪：HTTP详解zhuanlan.zhihu.com裸睡的猪：网页简介zhuanlan.zhihu.com一文带你了解爬虫zhuanlan.zhihu.com大家好，本期将为大家来采访一位爬虫工程师...
- 2022-09-21 15:18回答 2 已采纳 被反爬了，headers里加上cookie试试，有帮助的话采纳一下哦！
- 2021-01-10 21:52Vax_Loves_1314的博客 作为冷数据启动和丰富数据的重要工具，爬虫在业务发展中承担着重要的作用，我们业务在发展过程中积累了不少爬虫使用的经验，在此分享给大家，希望能对之后的业务发展提供一些技术选型方向上的思路,以更好地促进业务...
- 2023-09-18 21:50黑夜开发者的博客 华为云云耀云服务器L实例评测｜用Python的Flask框架加Nginx实现一个通用的爬虫项目实践。本篇文章通过华为云云耀云服务器L实例进行支持开发，实现了一个五脏俱全的前后端一起的完整爬虫小项目。所有的代码都在文章中...
- 没有解决我的问题, 去提问
悬赏问题
- ¥50 导入文件到网吧的电脑并且在重启之后不会被恢复
- ¥15 （希望可以解决问题）ma和mb文件无法正常打开，打开后是空白，但是有正常内存占用，但可以在打开Maya应用程序后打开场景ma和mb格式。
- ¥15 绘制多分类任务的roc曲线时只画出了一类的roc，其它的auc显示为nan
- ¥20 ML307A在使用AT命令连接EMQX平台的MQTT时被拒绝
- ¥20 腾讯企业邮箱邮件可以恢复么
- ¥15 有人知道怎么将自己的迁移策略布到edgecloudsim上使用吗？
- ¥15 错误 LNK2001 无法解析的外部符号
- ¥50 安装pyaudiokits失败
- ¥15 计组这些题应该咋做呀
- ¥60 更换迈创SOL6M4AE卡的时候，驱动要重新装才能使用，怎么解决？