favomj 2019-04-23 17:13 采纳率: 50%
浏览 2183
已采纳

requests返回为空的问题

学生党,弄着玩
爬取微舆情
头文件,data都已更改,allow_redirects设置为False,但requests返回的值为空
代码如下

import json
import requests
import datetime
import urllib3
from urllib3.exceptions import InsecureRequestWarning
urllib3.disable_warnings(InsecureRequestWarning)
sess = requests.session()

def run(keyword):
    headers = {
        'Content-Type': 'application/x-www-form-urlencoded; charset=UTF-8',
        'Host': 'www.wrd.cn',
        'Origin': 'http://www.wrd.cn',
        'Referer': 'http://www.wrd.cn/goSearch.shtml',
        'User-Agent': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/63.0.3239.132 Safari/537.36',
        'X-Requested-With': 'XMLHttpRequest',
    }

    endTime = datetime.datetime.now()
    startTime = endTime + datetime.timedelta(days=-1)
    data = {
        'title': '%s' % (keyword),
        'keyword': '%s' % (keyword),
        'filterKeyword': '',
        'categoryId': '',
        'categoryType': '',
        'secondCategory': '',
        'date': '24',
        'categoryLevel': '',
        'startTime' : startTime.strftime("%Y-%m-%d %H:%M:%S"),
        'endTime':endTime.strftime("%Y-%m-%d %H:%M:%S"),
        'secondClassifyName': '',
        'threeClassifyName':'',
        'isAll':'',
        'shareCode':''
    }

    url = 'http://www.wrd.cn/view/openTools/goHotWorthOTChart.action'
    res = sess.post(headers=headers, data=data, url=url,allow_redirects=False)
    print(res.text)


run('千佛山')




  • 写回答

2条回答 默认 最新

  • threenewbee 2019-04-23 17:25
    关注

    下载安装fiddler,先在浏览器里操作,抓包得到请求的报文
    然后运行你的程序,也抓包
    两个对比下,看看有什么不同。你照着修改

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 没有证书,nginx怎么反向代理到只能接受https的公网网站
  • ¥50 成都蓉城足球俱乐部小程序抢票
  • ¥15 yolov7训练自己的数据集
  • ¥15 esp8266与51单片机连接问题(标签-单片机|关键词-串口)(相关搜索:51单片机|单片机|测试代码)
  • ¥15 电力市场出清matlab yalmip kkt 双层优化问题
  • ¥30 ros小车路径规划实现不了,如何解决?(操作系统-ubuntu)
  • ¥20 matlab yalmip kkt 双层优化问题
  • ¥15 如何在3D高斯飞溅的渲染的场景中获得一个可控的旋转物体
  • ¥88 实在没有想法,需要个思路
  • ¥15 MATLAB报错输入参数太多