gengzhh 2021-05-11 13:49 采纳率: 100%
浏览 312
已采纳

刚接触python爬虫,尝试爬取网页在xhr中找到url但是返回值是""

初次使用python,想尝试获取http://cbwx.bjcaibai.com.cn/wbap/#/中的黄金价格

在XHR中找到想要的内容:

  1. 请求 URL:

    https://translate.googleapis.com/translate_a/t?anno=3&client=te_lib&format=html&v=1.0&key=AIzaSyBOti4mM-6x9WDnZIjIeyEU21OpBXqWBgw&logld=vTE_20210224_00&sl=en&tl=zh-CN&tc=1&sr=1&tk=344411.237513&mode=1

  2. 请求方法:POST

但是尝试获取却返回空白内容

import requests
url='https://translate.googleapis.com/translate_a/t?anno=3&client=te_lib&format=html&v=1.0&key=AIzaSyBOti4mM-6x9WDnZIjIeyEU21OpBXqWBgw&logld=vTE_20210224_00&sl=en&tl=zh-CN&tc=1&dom=1&sr=1&tk=836365.662943&mode=1'

headers={
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/86.0.4240.198 Safari/537.36',
'accept': '*/*',
'accept-encoding': 'gzip, deflate, br',
'accept-language': 'zh-CN,zh;q=0.9',
'content-length': '1715',
'origin': 'http://cbwx.bjcaibai.com.cn',
'referer': 'http://cbwx.bjcaibai.com.cn/wbap/',
'sec-fetch-dest': 'empty',
'sec-fetch-mode': 'cors',
'sec-fetch-site': 'cross-site',
'content-type': 'application/x-www-form-urlencoded'
}

data={
'anno': '3',
'client': 'te_lib',
'format': 'html',
'v': '1.0',
'key': 'AIzaSyBOti4mM-6x9WDnZIjIeyEU21OpBXqWBgw',
'logld': 'vTE_20210224_00',
'sl': 'en',
'tl': 'zh-CN',
'tc': '1',
'sr': '1',
'tk': '344411.237513',
'mode': '1'
}
response=requests.post(url=url,headers=headers,data=data)

print(response.text)

把所有data和headers都加上还是不行,获取的值就是“”

""
>>> 

后来我尝试在网页中打开此URL地址,提示下载txt,下载下来发现里面的内容是“”,求大神解答

  • 写回答

2条回答 默认 最新

  • 澈丹丶 2021-05-11 14:37
    关注

    接口找的不对吧,你看下这是不是你要的结果:

    import requests
    import json
    
    url = "http://111.198.86.222/BAP/OpenApi"
    
    payload = json.dumps({
      "Context": {
        "token": "",
        "version": "",
        "from": "2",
        "mchid": "",
        "appid": "",
        "timestamp": ""
      },
      "SQLBuilderItem": [
        {
          "SQLBuilderID": "{005A5001-B9AD-41CB-8409-8F7675D19143}",
          "TableName": "BS_POS_GP_MA",
          "Caption": "每日金价",
          "Enabled": True,
          "Save": [],
          "Execute": [],
          "Select": {
            "FMID": "{5F551F5A-87E5-9BC2-6D3E-FC0EA322E245}",
            "FPID": "{5F551F5A-87E5-9BC2-6D3E-FC0EA322E245}",
            "FTID": "",
            "FUID": "",
            "FOID": "{7D77D027-9824-4156-A25E-12FC59527DDE}",
            "FWID": "",
            "FORG_STORE_ID": ""
          }
        },
        {
          "SQLBuilderID": "{539BF364-32C3-4DE5-A34C-EFC354BD2A55}",
          "TableName": "BS_POS_GP_MA",
          "Caption": "历史金价",
          "Enabled": True,
          "Save": [],
          "Execute": [],
          "Select": {
            "FMID": "{5F551F5A-87E5-9BC2-6D3E-FC0EA322E245}",
            "FPID": "{5F551F5A-87E5-9BC2-6D3E-FC0EA322E245}",
            "FTID": "",
            "FUID": "",
            "FOID": "{7D77D027-9824-4156-A25E-12FC59527DDE}",
            "FWID": "",
            "FORG_STORE_ID": ""
          }
        }
      ]
    })
    headers = {
      'Content-Type': 'application/json'
    }
    
    response = requests.request("POST", url, headers=headers, data=payload)
    
    print(response.text)
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 三菱伺服电机按启动按钮有使能但不动作
  • ¥20 为什么我写出来的绘图程序是这样的,有没有lao哥改一下
  • ¥15 js,页面2返回页面1时定位进入的设备
  • ¥200 关于#c++#的问题,请各位专家解答!网站的邀请码
  • ¥50 导入文件到网吧的电脑并且在重启之后不会被恢复
  • ¥15 (希望可以解决问题)ma和mb文件无法正常打开,打开后是空白,但是有正常内存占用,但可以在打开Maya应用程序后打开场景ma和mb格式。
  • ¥20 ML307A在使用AT命令连接EMQX平台的MQTT时被拒绝
  • ¥20 腾讯企业邮箱邮件可以恢复么
  • ¥15 有人知道怎么将自己的迁移策略布到edgecloudsim上使用吗?
  • ¥15 错误 LNK2001 无法解析的外部符号