怎么把爬取到的数据放到自己的网页上实现同步数据?

怎么把爬取到的数据放到自己的网页上实现同步数据?再实现数据分析处理

写回答
好问题 0 提建议
追加酬金
关注问题
分享
邀请回答
编辑收藏删除结题
收藏举报

2条回答

关注

码龄粉丝数原力等级 --

被采纳

被点赞

采纳率
gammey 2019-01-28 17:37
关注
逻辑上是
1.后端进行爬虫抓取，将数据保存到后端数据库
2.后端实现数据接口，提供数据库的查询功能
3.通过前端js获取后端抓取的数据并进行展示
4.通过AJAX轮训刷新，反复请求查询接口实现实时更新

解决 3
无用
评论打赏
分享
举报

评论

按下Enter换行，Ctrl+Enter发表内容

报告相同问题？

关注问题

爬取网页表格数据到excel后，excel上没有数据？ python
2023-04-10 02:32

回答 4 已采纳结论：1、你的url是错误的。至少格式上来就错了。（https://liansai.500.com/zuqiu-6296/jifen-17831/2023-04-10&page=1）；2、col2之后
如何把request爬取的数据弄到SQL server数据库里面(语言-python) python sqlserver
2022-04-18 10:01

回答 2 已采纳 1、清洗你爬取的数据，使其符合数据库中表对数据的规则要求；2、 import pymssql3、连接你的数据库，执行写入，如下：
怎么把爬取下来的数据输出为CSV文化呀？自己弄老是不成功 python
2021-10-11 13:33

回答 2 已采纳 import pandas as pd r = pd.DataFrame(positions, columns=['职位名字', '薪水', '职位诱惑', '职位详情', '工作地址', '公司名
基于Python热门旅游景点数据分析系统设计与实现
2023-06-28 09:12

java李杨勇的博客 Python的应用场合非常广泛，在科研领域中，可以用Python训练人工智能模型，也可以对实验数据进行数据分析。在生活中，Python提供了很多优秀的、开源的Web开发框架，例如Django、Flask、Pyramid、Tornado等。知乎、...
怎么把爬取的数据保存到MongoDB中 python 有问必答
2021-11-18 23:03

回答 2 已采纳 tree =etree.HTML(data)这代码错了，你data=response.json()返回的是json数据，，，如果你确定网页是html代码，应该是data=response.text
如何将爬虫爬取的数据进行排版 python 数据挖掘爬虫
2022-02-28 22:22

回答 1 已采纳看你想怎么处理了，可以放到一行，可以放到word里，可以用Excel，你选一个，我教你另外你的代码需要看一下，要不不好改
Python：如何爬取到该数据？ python
2020-09-07 10:20

回答 2 已采纳首先 f12 抓包，看看 ajax 的 json 请求的实际地址是什么，然后用 r = requests.get(request_url) obj = r.json() print(obj.学
成千上万个站点，日数据过亿的大规模爬虫是怎么实现的？
2020-12-05 10:03

菜鸟学Python的博客我们身边接触最频繁、同时也是最大的爬虫莫过于几大搜索引擎。但是搜索引擎的爬取方式和我们爬虫工程师接触的方式差异比较大，没有太大的参考价值，我们今天要讲的是舆情方向的爬虫（架构以及关键技术...
使用selenium爬取数据时，数据没展开提取不到怎么办？ python
2021-03-07 15:54

回答 2 已采纳两个方法一个是找到后端接口，直接请求后端接口另一个是操作selenium点击加载
为什么用python 爬取数据到excel中300多行只剩下一行？ python vscode 开发语言有问必答
2021-08-01 12:32

回答 4 已采纳将写入文件语句放到循环外，加上列名并逐行写入，后面的代码可以这样写： #code with open('data/51job.csv','w') as f: f.write(','.join(
为什么爬取到的内容和网页上的不一样呢？求解决方法 python 爬虫
2022-05-12 17:10

回答 2 已采纳因为他是异步加载的。解决方法：1、一般爬取到的内容和网页上的不一样，可能是请求异常或者是异步加载导致的，需要去定位数据来源。2、打开控制台全局搜索151.4，发现没结果，那么继续搜索1514，发现有
python爬虫新闻百万数据量_成千上万个站点，日数据过亿的大规模爬虫是怎么实现的？...
2020-12-03 22:00

weixin_39756416的博客但是搜索引擎的爬取方式和我们爬虫工程师接触的方式差异比较大，没有太大的参考价值，我们今天要讲的是舆情方向的爬虫(架构以及关键技术原理)，主要涉及：网页文本智能提取；分布式爬虫；爬虫 DATA/URL 去重；爬虫...
python爬取软科排名,匹配不到数据 python 数据挖掘爬虫
2022-03-24 21:35

回答 1 已采纳我这里是可以正常运行的
智能 BI 数据分析平台
2023-09-25 10:00

猫十二懿的博客数据分析者只需要导入最原始的数据集，输入想要进行分析的目标，就能利用AI自动生成一个符合...只需输入分析目标、原始数据和原始问题，利用AI就能一键生成可视化图表、分析结论和问题解答，大幅降低人工数据分析成本。
【python】websocket原理详细剖析，如何使用python爬取ws协议数据？
2024-03-23 08:15

景天科技苑的博客 WebSocket的出现，使得浏览器具备了实时双向通信的能力。本文由浅入深，介绍了WebSocket如何建立连接、交换数据的细节，以及数据帧的格式。...源代码奉上如何建立websocket协议连接，如何通过python爬取ws协议数据。
没有解决我的问题, 去提问

悬赏问题

¥15 我想在一个软件里添加一个优惠弹窗，应该怎么写代码
¥15 fluent的在模拟压强时使用希望得到一些建议
¥15 STM32驱动继电器
¥15 Windows server update services
¥15 关于#c语言#的问题：我现在在做一个墨水屏设计，2.9英寸的小屏怎么换4.2英寸大屏
¥15 模糊pid与pid仿真结果几乎一样
¥15 java的GUI的运用
¥15 Web.config连不上数据库
¥15 我想付费需要AKM公司DSP开发资料及相关开发。
¥15 怎么配置广告联盟瀑布流