坦桑尼亚奥杜威峡谷能人
2018-06-05 07:13
采纳率: 13.3%
浏览 3.1k
已采纳

python爬虫制作接口怎么做

python爬虫， 需要包装成接口，提供一个 url 给 别人用，效果是 打开 这个 url 就自动运行爬虫了。请教下怎么搞， 希望可以说的稍微具体，详细点

  • 点赞
  • 写回答
  • 关注问题
  • 收藏
  • 邀请回答

2条回答 默认 最新

  • blownewbee 2018-06-05 08:04
    已采纳

    你做一个简单的web网站，部署到云服务器上，有一个公网ip，把这个地址给别人。
    开发简单的web网站可以用现成的框架，代码很简单，参考：https://www.cnblogs.com/sunshine-1/p/7372934.html
    你也可以google下其中提到的内容。

    点赞 打赏 评论
  • MadHades 2018-06-12 17:58

    你可以看一下基于tornado的爬虫, http://www.tornadoweb.org/en/stable/guide/queues.html

    点赞 打赏 评论

报告相同问题？

提交

相关推荐 更多相似问题

  • python爬虫制作接口怎么做 python爬虫
    2018-06-05 07:13
    回答 2 已采纳 你做一个简单的web网站，部署到云服务器上，有一个公网ip，把这个地址给别人。 开发简单的web网站可以用现成的框架，代码很简单，参考：https://www.cnblogs.com/sunshin
  • python 爬虫爬取网易云音乐 python
    2019-04-17 19:04
    回答 2 已采纳 搜索“防盗链” 把request headers信息完善一下 越完整，就越像真的浏览器请求
  • 关于爬虫获取接口数据的问题 python
    2020-08-24 23:29
    回答 3 已采纳 您好： 对于这个网页，他的数据应该就在你发的url里，我在源码的第181行看到了疑似数据的内容 应该是用json写在了标签里 ![图片说明](https://img-a
  • Qt+python+爬虫
    2020-12-22 13:36
    爬虫API腾讯疫情接口QT显示 自己一个做的一个小东西，很多部分不太完善，不喜勿喷！ 如果大神有小建议和指点的话，欢迎欢迎欢迎!!! 原理介绍 通过request请求，获得数据用Json解析数据，对数据提取，将这个写成一个...
  • 利用flask构造爬虫接口（python初级）
    2018-08-23 17:17
    许雪凯的博客 爬虫很多时候除了能够做成项目在服务器上跑以外，还可以做成接口的形式够其他语言调用，即爬虫可以实时的镶嵌到app，web或者其他场景下，当有客户调用时就会启动，无人调用时，就静静的待着。下面说一下利用python中...
  • python爬虫Scrapy框架详解！
    2019-09-06 15:26
    Python中一股清流的博客 Scrapy 是用纯 Python 实现一个为了爬取网站数据、提取结构性数据而编写的应用框架， 用途非常广泛。 框架的力量，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页 内容以及各种图片，非常之...
  • Python爬虫下载图片 python
    2021-04-01 22:12
    回答 2 已采纳  
  • python爬虫scrapy python有问必答
    2021-07-22 10:03
    回答 2 已采纳 看下数据是否是动态加载的，多抓几次包，分析下；可能需要通过添加page参数，进行爬取！
  • python爬虫去哪网热门景点 python爬虫
    2018-06-22 07:53
    回答 1 已采纳 用fiddler抓包看下，要么是第三页的地址或者参数没有对，要么是服务器有反爬虫的机制（比如频繁访问，返回错误页面、验证码）。
  • python 制作简单网站_新手小白 做python爬虫 爬什么网站比较简单？
    2020-11-27 19:46
    weixin_39680154的博客 现学现卖，看完再自己操作操作就会了~我就是这么学的，分享给想用python爬虫的小伙伴：放个懒人目录：网络爬虫的行径URL初步的概念python与urllib2合理爬数据的身份以贴吧为例的小爬虫python爬虫学习相关视频和配套...
  • python3.6 简单爬虫爬取天气，flask在线查询接口制作
    2018-02-12 11:39
    这个世界太神奇的博客 据说以后是API的天下，不如弄个天气查询的API玩玩看~首先，需要解决天气数据源的问题，第一个想法就是弄个小爬虫，去比较权威的气象网站爬下来，存到自己的库里，当日，配上个定时器，定时发动爬虫技能自动完成就好...
  • Python爬虫知识点精梳理，请自觉对号入座
    2019-07-11 15:23
    千锋python和唐唐的博客 做数据分析和任何一门技术都是一样的，都应该带着目标去学习，目标就像一座灯塔，指引你前进，我看过很多伙伴学着学着...不过可以肯定的是，学会了Python爬虫能给你的工作提供很多便利。 小白入门必读 如果你是Pyth...
  • python 爬虫XHR获取失败 python爬虫
    2017-10-22 15:00
    回答 2 已采纳 你要用post去请求，我使用的是request库 import requests url = 'http://www.bjbus.com/home/ajax_news_list.php' hea
  • python爬虫如何用for循环翻页 python有问必答
    2021-07-04 16:59
    回答 2 已采纳 重点还是从网页上分析翻页的网址构造情况，即baseurl及请求的url要写准确,另外可能需要补充一些请求参数。
  • python爬虫爬取腾讯新闻评论 jsonpython爬虫
    2017-11-23 05:47
    回答 3 已采纳 需要先把内容的mainComment()去掉，它里面是一个json，然后就可以处理，\u是表示unicode的字符。 ``` In [24]: sess = requests.Session(
  • Python爬虫，还可以制作高逼格的进度条？
    2020-01-09 13:50
    pythonadiou的博客 一般情况下，运维或是开发会用Python爬虫来进行数据抓取，或是监控事件等，这都是很稀松平的。可是怎么有效的监控任务的进度，一种方法是在任务中加入log，除此之外，还有其他方法能掌握任务进度的吗？ 接下来就和...
  • 采坑Python制作全国疫情地图
    2021-01-07 13:43
    1）安装常用的python爬虫工具：beautifulsoup4、requests pip install requests pip install beautifulsoup4 2）找一个数据源 网址：https://news.qq.com/zt2020/page/feiyan.htm 这里取到最终的接口getOnsInfo url...
  • 史上最详细Python爬虫基础教学（一）
    2020-03-17 21:11
    毒兽Le的博客 首先，我也是个爬虫小白，也在努力的学习中，当然，接触python也不只是为了去学爬虫，数据分析啊，机器学习和深度学习啊，都是我努力的目标。我开始写这个爬虫教程也是想和我一样想学好爬虫的小白在边自己去写教程的...
  • 用python做爬虫遇到的问题 python爬虫
    2021-09-11 14:26
    回答 2 已采纳
  • python爬虫实验——爬取网页图片+网页源代码
    2020-07-07 17:04
    小怪兽655的博客 本实验将利用python程序抓取网络图片，完成可以批量下载一个网站的照片。所谓网页抓取，就是把URL地址中指定的网络资源从网络流中读取出来，保存到本地。 原理 1、网络爬虫 即Web Spider，网络蜘蛛是通过网页的链接...
  • 没有解决我的问题, 去提问