SarinaDu 2018-08-23 09:33 采纳率: 44.4%
浏览 2670
已采纳

python3爬取的内容可以print但是写入本地文件失败,但测试发现写入语句没有问题

python3

源码如下


import os # 调用系统变量
import re # 正则表达式相关
import urllib
import urllib.request
import urllib.error
import urllib.parse

import json
import socket

import time

class ImoocSpider:

    headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36'}
    def getPythonInfo(self,keyWord):
        myKeyWord = urllib.parse.quote(keyWord)
        searchUrl='https://www.imooc.com/search/?words='+myKeyWord
        try:
            request = urllib.request.Request(url=searchUrl, headers=self.headers)
            page = urllib.request.urlopen(request)
            rsp = page.read().decode('unicode_escape')
        except UnicodeDecodeError as e:
                print(e)
                print('-----UnicodeDecodeErrorurl:', searchUrl)
        except urllib.error.URLError as e:
                print(e)
                print("-----urlErrorurl:", searchUrl)
        except socket.timeout as e:
                print(e)
                print("-----socket timout:", searchUrl)
        else:
                myres=rsp
                self.saveFile(myres,keyWord)
        finally:
                page.close()
                print("get_finally")

    def saveFile(self,res,keyWord):
            b="./" + keyWord +'.txt'
            if not os.path.exists(b): # 判断路径指定下是否存在文件/文件夹
                try :
                    fp=open(b,'w') 
                    print(res,file=fp) #print到文件
                except :
                    # print (e)
                    print('文件写入有误')
                finally :
                   fp.close()
                   print('save_finally')



    def start (self, keyWord):
        self.getPythonInfo(keyWord) 


if __name__ == '__main__':
    imoocInfo = ImoocSpider()
    imoocInfo.start('python')

  • 写回答

2条回答

  • underthesun2008 2018-08-23 10:32
    关注

    测试了一下,就是编码的问题,open里面加一个参数

     encoding='utf-8'
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 寻一个支付宝扫码远程授权登录的软件助手app
  • ¥15 解riccati方程组
  • ¥15 display:none;样式在嵌套结构中的已设置了display样式的元素上不起作用?
  • ¥15 使用rabbitMQ 消息队列作为url源进行多线程爬取时,总有几个url没有处理的问题。
  • ¥15 Ubuntu在安装序列比对软件STAR时出现报错如何解决
  • ¥50 树莓派安卓APK系统签名
  • ¥65 汇编语言除法溢出问题
  • ¥15 Visual Studio问题
  • ¥20 求一个html代码,有偿
  • ¥100 关于使用MATLAB中copularnd函数的问题