favomj 2019-04-23 09:13 采纳率: 50%
浏览 2187
已采纳

requests返回为空的问题

学生党,弄着玩
爬取微舆情
头文件,data都已更改,allow_redirects设置为False,但requests返回的值为空
代码如下

import json
import requests
import datetime
import urllib3
from urllib3.exceptions import InsecureRequestWarning
urllib3.disable_warnings(InsecureRequestWarning)
sess = requests.session()

def run(keyword):
    headers = {
        'Content-Type': 'application/x-www-form-urlencoded; charset=UTF-8',
        'Host': 'www.wrd.cn',
        'Origin': 'http://www.wrd.cn',
        'Referer': 'http://www.wrd.cn/goSearch.shtml',
        'User-Agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36',
        'X-Requested-With': 'XMLHttpRequest',
    }

    endTime = datetime.datetime.now()
    startTime = endTime + datetime.timedelta(days=-1)
    data = {
        'title': '%s' % (keyword),
        'keyword': '%s' % (keyword),
        'filterKeyword': '',
        'categoryId': '',
        'categoryType': '',
        'secondCategory': '',
        'date': '24',
        'categoryLevel': '',
        'startTime' : startTime.strftime("%Y-%m-%d %H:%M:%S"),
        'endTime':endTime.strftime("%Y-%m-%d %H:%M:%S"),
        'secondClassifyName': '',
        'threeClassifyName':'',
        'isAll':'',
        'shareCode':''
    }

    url = 'http://www.wrd.cn/view/openTools/goHotWorthOTChart.action'
    res = sess.post(headers=headers, data=data, url=url,allow_redirects=False)
    print(res.text)


run('千佛山')




展开全部

  • 写回答

2条回答 默认 最新

  • threenewbee 2019-04-23 09:25
    关注

    下载安装fiddler,先在浏览器里操作,抓包得到请求的报文
    然后运行你的程序,也抓包
    两个对比下,看看有什么不同。你照着修改

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)
编辑
预览

报告相同问题?

手机看
程序员都在用的中文IT技术交流社区

程序员都在用的中文IT技术交流社区

专业的中文 IT 技术社区,与千万技术人共成长

专业的中文 IT 技术社区,与千万技术人共成长

关注【CSDN】视频号,行业资讯、技术分享精彩不断,直播好礼送不停!

关注【CSDN】视频号,行业资讯、技术分享精彩不断,直播好礼送不停!

客服 返回
顶部