SarinaDu 2018-08-23 09:33 采纳率: 44.4%
浏览 2670
已采纳

python3爬取的内容可以print但是写入本地文件失败,但测试发现写入语句没有问题

python3

源码如下


import os # 调用系统变量
import re # 正则表达式相关
import urllib
import urllib.request
import urllib.error
import urllib.parse

import json
import socket

import time

class ImoocSpider:

    headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36'}
    def getPythonInfo(self,keyWord):
        myKeyWord = urllib.parse.quote(keyWord)
        searchUrl='https://www.imooc.com/search/?words='+myKeyWord
        try:
            request = urllib.request.Request(url=searchUrl, headers=self.headers)
            page = urllib.request.urlopen(request)
            rsp = page.read().decode('unicode_escape')
        except UnicodeDecodeError as e:
                print(e)
                print('-----UnicodeDecodeErrorurl:', searchUrl)
        except urllib.error.URLError as e:
                print(e)
                print("-----urlErrorurl:", searchUrl)
        except socket.timeout as e:
                print(e)
                print("-----socket timout:", searchUrl)
        else:
                myres=rsp
                self.saveFile(myres,keyWord)
        finally:
                page.close()
                print("get_finally")

    def saveFile(self,res,keyWord):
            b="./" + keyWord +'.txt'
            if not os.path.exists(b): # 判断路径指定下是否存在文件/文件夹
                try :
                    fp=open(b,'w') 
                    print(res,file=fp) #print到文件
                except :
                    # print (e)
                    print('文件写入有误')
                finally :
                   fp.close()
                   print('save_finally')



    def start (self, keyWord):
        self.getPythonInfo(keyWord) 


if __name__ == '__main__':
    imoocInfo = ImoocSpider()
    imoocInfo.start('python')

  • 写回答

2条回答 默认 最新

  • underthesun2008 2018-08-23 10:32
    关注

    测试了一下,就是编码的问题,open里面加一个参数

     encoding='utf-8'
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 基于卷积神经网络的声纹识别
  • ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
  • ¥100 为什么这个恒流源电路不能恒流?
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值
  • ¥15 我想咨询一下路面纹理三维点云数据处理的一些问题,上传的坐标文件里是怎么对无序点进行编号的,以及xy坐标在处理的时候是进行整体模型分片处理的吗
  • ¥15 CSAPPattacklab
  • ¥15 一直显示正在等待HID—ISP
  • ¥15 Python turtle 画图
  • ¥15 stm32开发clion时遇到的编译问题