想要爬取一些平台上有关康养旅游的评价，不知道从何下手，有没有人能给一些思路？
比如：从哪些网站爬取？爬虫的基本流程？第一次尝试爬虫技术，不知道正常的操作方法？不想一个个去百度上看
python 爬虫，如何爬取相关数据
- 写回答
- 好问题 0 提建议
- 关注问题
分享- 邀请回答
-
1条回答 默认 最新
CSDN专家-黄老师 2021-11-11 11:20关注先确定需要爬取的网站，然后分析网站的数据来源，是后端生成数据还是ajax生成数据，确定数据来源方式就根据HTTP请求编写代码，这个涉及一些请求参数的加密、转换等等处理，然后清洗数据和数据入库
本回答被题主选为最佳回答 , 对您是否有帮助呢?解决 无用评论 打赏举报 分享
- 2021-05-22 21:34回答 1 已采纳 这里我们以爬取淘宝评论为例子讲解一下如何去做到的。 这里主要分为了四步： 一 获取淘宝评论时，ajax请求链接（url） 二 获取该ajax请求返回的json数据 三 使用python解析js
- 2022-10-18 21:52回答 1 已采纳 图片是从cdn上过来的，做了防盗链。在headers中添加Refer，指向该网站就行了。 import re import requests import os if not os.path.ex
- 2021-11-27 22:00回答 2 已采纳 你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。 或者是通
- 2023-09-18 13:26BUG再也不见的博客 对爬取的数据进行可视化
- 2021-11-27 11:36回答 3 已采纳 你爬虫应该是用requests发送http请求的吧，这个是无法从elements找到，你要在network的doc分析网页，你找不到的数据很大可能是ajax请求渲染前端的
- 2022-02-28 22:22回答 1 已采纳 看你想怎么处理了，可以放到一行，可以放到word里，可以用Excel，你选一个，我教你另外你的代码需要看一下，要不不好改
- 2022-08-12 12:20回答 3 已采纳 不如换用requests库和bs4库吧。 from bs4 import BeautifulSoup as bs import requests as r url = 'https://fanqie
- 2020-03-21 20:58运行即可 生成数据库插入数据 insert into province(name,code,type,parent_code) values (北京市,110000000000,1,000000000000); 最好分线程下载
- 2022-08-17 17:07回答 3 已采纳 因为元素里的你要的内容是通过 ajax 请求动态加载的，可以浏览器抓包去看下，你想要的这条数据到底是哪个请求返回的，找到真正的请求，然后模拟发送就行了
- 2021-10-21 15:16回答 1 已采纳 该页面信息通过用户选择选项，js动态渲染加载数据的，比如在选项框中输入name,在XHR中就可以看到name的动态加载链接，对其进行请求可获取相关信息的json数据信息。
- 2022-06-06 20:12回答 4 已采纳 你题目的解答代码如下： #coding=gbk import requests from io import BytesIO from PIL import Image from selenium
- 2022-10-17 16:35资源包含文件：lunwen文档word+项目源码+项目截图 IDE：pycharm ...利用python进行数据分析，将数据以可视化的形式展现出来。详细介绍参考：https://blog.csdn.net/sheziqiong/article/details/126687991
- 2024-04-03 16:03网络安全学习规划的博客 python爬虫爬取网页数据
- 2022-06-13 17:03基于python的网络爬虫爬取天气数据及可视化分析 python程序设计报告 源代码+csv文件+设计报告 python期末简单大作业（自己写的，重复率低） 利用python爬取了网站上的城市天气，并用利用可视化展示，有参考文献有...
- 没有解决我的问题, 去提问
问题事件
系统已结题
11月19日
已采纳回答
11月11日-
创建了问题
11月11日