SarinaDu 2018-08-23 09:33 采纳率: 44.4%
浏览 2670
已采纳

python3爬取的内容可以print但是写入本地文件失败,但测试发现写入语句没有问题

python3

源码如下


import os # 调用系统变量
import re # 正则表达式相关
import urllib
import urllib.request
import urllib.error
import urllib.parse

import json
import socket

import time

class ImoocSpider:

    headers={'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/68.0.3440.106 Safari/537.36'}
    def getPythonInfo(self,keyWord):
        myKeyWord = urllib.parse.quote(keyWord)
        searchUrl='https://www.imooc.com/search/?words='+myKeyWord
        try:
            request = urllib.request.Request(url=searchUrl, headers=self.headers)
            page = urllib.request.urlopen(request)
            rsp = page.read().decode('unicode_escape')
        except UnicodeDecodeError as e:
                print(e)
                print('-----UnicodeDecodeErrorurl:', searchUrl)
        except urllib.error.URLError as e:
                print(e)
                print("-----urlErrorurl:", searchUrl)
        except socket.timeout as e:
                print(e)
                print("-----socket timout:", searchUrl)
        else:
                myres=rsp
                self.saveFile(myres,keyWord)
        finally:
                page.close()
                print("get_finally")

    def saveFile(self,res,keyWord):
            b="./" + keyWord +'.txt'
            if not os.path.exists(b): # 判断路径指定下是否存在文件/文件夹
                try :
                    fp=open(b,'w') 
                    print(res,file=fp) #print到文件
                except :
                    # print (e)
                    print('文件写入有误')
                finally :
                   fp.close()
                   print('save_finally')



    def start (self, keyWord):
        self.getPythonInfo(keyWord) 


if __name__ == '__main__':
    imoocInfo = ImoocSpider()
    imoocInfo.start('python')

  • 写回答

2条回答 默认 最新

  • underthesun2008 2018-08-23 10:32
    关注

    测试了一下,就是编码的问题,open里面加一个参数

     encoding='utf-8'
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 R语言Rstudio突然无法启动
  • ¥15 关于#matlab#的问题:提取2个图像的变量作为另外一个图像像元的移动量,计算新的位置创建新的图像并提取第二个图像的变量到新的图像
  • ¥15 改算法,照着压缩包里边,参考其他代码封装的格式 写到main函数里
  • ¥15 用windows做服务的同志有吗
  • ¥60 求一个简单的网页(标签-安全|关键词-上传)
  • ¥35 lstm时间序列共享单车预测,loss值优化,参数优化算法
  • ¥15 Python中的request,如何使用ssr节点,通过代理requests网页。本人在泰国,需要用大陆ip才能玩网页游戏,合法合规。
  • ¥100 为什么这个恒流源电路不能恒流?
  • ¥15 有偿求跨组件数据流路径图
  • ¥15 写一个方法checkPerson,入参实体类Person,出参布尔值