chf2015005328
chf2015005328
采纳率100%
2017-08-14 13:17 阅读 3.6k

python爬虫问题出错原因求助

import requests
from bs4 import BeautifulSoup
import bs4

def getHTMLText(url):
try:
r = requests.get(url, timeout=30)
r.raise_for_status()
r.encoding = r.apparent_encoding
return r.text
except:
return ""

def fillUnivList(ulist, html):
soup = BeautifulSoup(html, "html.parser")
for tr in soup.find('tbody').children:
if isinstance(tr, bs4.element.Tag):
tds = tr('td')
ulist.append([tds[0].string, tds[1].string, tds[3].string])

def printUnivList(ulist, num):
print("{:^10}\t{:^6}\t{:^10}".format("排名","学校名称","总分"))
for i in range(num):
u=ulist[i]
print("{:^10}\t{:^6}\t{:^10}".format(u[0],u[1],u[2]))

def main():
uinfo = []
url = 'http://www.zuihaodaxue.cn/zuihaodaxuepaiming2017.html'
html = getHTMLText(url)
fillUnivList(uinfo, html)
printUnivList(uinfo, 20) # 20 univs
main()

出错为:Traceback (most recent call last):
File "D:/python02/01/11.py", line 34, in
main()
File "D:/python02/01/11.py", line 33, in main
printUnivList(uinfo, 20) # 20 univs
File "D:/python02/01/11.py", line 26, in printUnivList
print("{:^10}\t{:^6}\t{:^10}".format(u[0],u[1],u[2]))
TypeError: unsupported format string passed to NoneType.__format__
第一次爬虫,不是很能理解出错原因。求指教

  • 点赞
  • 写回答
  • 关注问题
  • 收藏
  • 复制链接分享

4条回答 默认 最新

  • 已采纳
    Runner__1 T_world 2017-08-15 00:20

    python的爬虫经常会爬取到none这种节点,当你获取的节点是none,还要继续对它进行操作的时候就会报错,这种问题只能是小心翼翼地判断每个读到的节点是什么类型,建议你对照要爬的页面的结构并且在代码中打印获取到的节点类型以及内容等,结合起来判断会比较有帮助

    点赞 1 评论 复制链接分享
  • caozhy 从今以后生命中的每一秒都属于我爱的人 2017-08-14 16:15
  • u014307117 JNSimba 2017-08-15 00:00

    加个str()强制转换?

    点赞 1 评论 复制链接分享
  • weixin_40941966 学不会coding的程序员 2018-12-29 09:55

    在执行这个语句

    print("{:^10}\t{:^6}\t{:^10}".format(u[0],u[1],u[2]))
    

    之前,可以先打印一下u看看打印出的内容是否正确

    点赞 1 评论 复制链接分享

相关推荐