跪求大神帮忙写一个非常简单的爬虫程序,爬取网页上的表格信息!
网页网址为:https://mp.weixin.qq.com/s/li7BbNrZy-eOm79D6Eh-mA
网页上的内容特别简单,就是一个一个的表格,表格里面都是固定的房产出租售的信息,希望能用爬虫爬取出来,然后汇总导出到excel表格中。
希望大神有空了能帮忙给写一些代码,非常感谢!
跪求大神帮忙写一个非常简单的爬虫程序,爬取网页上的表格信息!
网页网址为:https://mp.weixin.qq.com/s/li7BbNrZy-eOm79D6Eh-mA
网页上的内容特别简单,就是一个一个的表格,表格里面都是固定的房产出租售的信息,希望能用爬虫爬取出来,然后汇总导出到excel表格中。
希望大神有空了能帮忙给写一些代码,非常感谢!
import requests
from bs4 import BeautifulSoup
import pandas as pd
url="https://mp.weixin.qq.com/s/li7BbNrZy-eOm79D6Eh-mA"
req=requests.get(url)
mylist=[["跳蚤属性"],["房源小区名字"],["具体位置"],["组团区域"],["户型"],["面积(㎡)"],["价格(元)"],["楼层"],["装修情况"],["其他信息"],["联系人"],["联系电话"]]
soup=BeautifulSoup(req.content,"html.parser")
for it in soup.find_all('tbody',attrs={"style":"box-sizing: border-box;"}):
for i in range(len(it.contents)):
print()
mylist[i].append(it.contents[i].contents[1].text)
out=pd.DataFrame(mylist)
out.to_excel(r'1.xls')