gjfvip123 2018-04-13 08:01 采纳率: 0%
浏览 2757
已采纳

python selenium与js 的数据交互问题

通过selenium的executeScrpit()可以执行js代码,
我用js代码获取数据后把它存到cookie中,然后通过python再获取cookie的值,但是值取不到,也不打印,但是也没有报错,代码如下,请高手指点一下,谢谢!

用python获取cookie的代码如下:
图片说明


#!/usr/bin/env python
# -*- coding: utf-8 -*-

from selenium import webdriver
import time
import urllib
import http.cookiejar
import requests

from urllib import request
from http import cookiejar

def capture(url, save_fn="capture.png"):
  browser = webdriver.Chrome() # Get local session of firefox
  browser.set_window_size(1200, 900)
  browser.get(url) # Load page
  browser.execute_script("""
    (function () {
      var y = 0;
      var step = 100;
      window.scroll(0, 0);
      var height = document.body.scrollHeight;  
      document.cookie = "scrollHeight="+height;


      function f() {
        if (y < document.body.scrollHeight) {
          y += step;
          window.scroll(0, y);
          setTimeout(f, 50);
        } else {
          window.scroll(0, 0);
          document.title += "scroll-done";
        }
      }

      setTimeout(f, 1000);
    })();
  """)

  for i in range(30):
    if "scroll-done" in browser.title:
      break
    time.sleep(1) 


  cookie = cookiejar.CookieJar()
  #利用urllib.request库的HTTPCookieProcessor对象来创建cookie处理器,也就CookieHandler
  handler=request.HTTPCookieProcessor(cookie)
  #通过CookieHandler创建opener
  opener = request.build_opener(handler)
  #此处的open方法打开网页
  #response = opener.open('http://www.jb51.net')
  #打印cookie信息
  for item in cookie:
      print('Name = %s' % item.name)
      print('Value = %s' % item.value)  


  browser.save_screenshot(save_fn)
  browser.close()


if __name__ == "__main__":

  capture("http://www.jb51.net")

  • 写回答

2条回答 默认 最新

  • 阳光彩虹小白狗 2018-04-16 01:58
    关注

    怎么说呢 selenium打开的页面跟 你用requests设置cookie的页面不是同一个

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 R语言Rstudio突然无法启动
  • ¥15 关于#matlab#的问题:提取2个图像的变量作为另外一个图像像元的移动量,计算新的位置创建新的图像并提取第二个图像的变量到新的图像
  • ¥15 改算法,照着压缩包里边,参考其他代码封装的格式 写到main函数里
  • ¥15 用windows做服务的同志有吗
  • ¥60 求一个简单的网页(标签-安全|关键词-上传)
  • ¥35 lstm时间序列共享单车预测,loss值优化,参数优化算法
  • ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
  • ¥100 为什么这个恒流源电路不能恒流?
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值