淮左青衣 2017-08-05 06:31 采纳率: 0%
浏览 3588

爬虫网页使用Beautifulsoup遍历网页时 总是 没有'children'模块

import requests
import bs4
from bs4 import BeautifulSoup
import re

def getHTMLText(url):
try:
r = requests.get(url, timrout = 30)
r.raise_for_status()
r.encoding = r.apparent_encoding
return r.text
except:
return ""

def fillUnivList(ulist, html):
soup = BeautifulSoup(html, "html.parser")
for tr in soup.find('tbody').children:
if isinstance(tr, bs4.element.Tag):
tds = tr('td')
ulist.append([tds[0].string,tds[1].string,tds[2].string])

def printUnivList(ulist, num):
print("{:^10}\t{:^10}\t{:^10}".format("排名","大学名称","总分"))
for i in range(num):
u = ulist[i]
print("{:^10}\t{:^10}\t{:^10}".format(u[0],u[1],u[2]))

def main():
#num = int(raw_input("请输入您要查询的大学数:"))
unifo = []
url = "http://www.gaokaopai.com/paihang-otype-2.html?f=1&ly=bd&city=&cate=&batch_type="
html = getHTMLText(url)
fillUnivList(unifo, html)
printUnivList(unifo,10)
main()

错误提示:AttributeError: 'NoneType' object has no attribute 'children'

  • 写回答

3条回答 默认 最新

  • 淮左青衣 2017-08-05 13:48
    关注

    已解决,原来是getHTMLText()中出错了,连最基本的网页都没有获取到,soup.find('tbody')返回的对象肯定是空的,也就不可能有children属性

    评论

报告相同问题?

悬赏问题

  • ¥50 导入文件到网吧的电脑并且在重启之后不会被恢复
  • ¥15 (希望可以解决问题)ma和mb文件无法正常打开,打开后是空白,但是有正常内存占用,但可以在打开Maya应用程序后打开场景ma和mb格式。
  • ¥20 ML307A在使用AT命令连接EMQX平台的MQTT时被拒绝
  • ¥20 腾讯企业邮箱邮件可以恢复么
  • ¥15 有人知道怎么将自己的迁移策略布到edgecloudsim上使用吗?
  • ¥15 错误 LNK2001 无法解析的外部符号
  • ¥50 安装pyaudiokits失败
  • ¥15 计组这些题应该咋做呀
  • ¥60 更换迈创SOL6M4AE卡的时候,驱动要重新装才能使用,怎么解决?
  • ¥15 让node服务器有自动加载文件的功能