qq_43539912 2020-11-18 02:52 采纳率: 50%
浏览 6
已采纳

我想问一下什么保存到mysql

import time
from selenium import webdriver


class YunSpider (object):
    def __init__(self,url):
        self.url = url
        self.driver = webdriver.Chrome()

    def getConnect(self):
        #打开网址
        self.driver.get(self.url)
        #先进入IFrame
        self.driver.switch_to_frame(0)

        js = 'window.scrollBy(0,8000)'
        self.driver.execute_script(js)

        #翻页
        for page in range(20):

            selectors = self.driver.find_elements_by_xpath('//div[@class="cmmts j-flag"]/div')
            for selector in selectors:
                text = selector.find_element_by_xpath('.//div[@class="cnt f-brk"]').text
                print(text)

                #self.saveData(text)
                YunSpider.saveData(text)

            #找到下一页,然后点击
            nextPage = self.driver.find_element_by_partial_link_text('下一页')
            #点击下一页
            nextPage.click()
            time.sleep(0.5)

    @staticmethod
    def saveData(item):
    	#将爬取的评论保存在txt中
        with open('wyypl.txt','a',encoding='utf-8') as f:
            #f.write(item+'\n')
            print(item,file=f)

if  __name__ == '__main__':
	#这首歌的网页播放地址
    url = 'https://music.163.com/#/song?id=558071673'
    yunSpider = YunSpider(url)
    yunSpider.getConnect()

 

  • 写回答

2条回答 默认 最新

  • 考古学家lx(李玺) python领域优质创作者 2020-11-18 09:03
    关注

    pymysql

    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(1条)

报告相同问题?

悬赏问题

  • ¥15 本题的答案是不是有问题
  • ¥15 关于#r语言#的问题:(svydesign)为什么在一个大的数据集中抽取了一个小数据集
  • ¥15 C++使用Gunplot
  • ¥15 这个电路是如何实现路灯控制器的,原理是什么,怎么求解灯亮起后熄灭的时间如图?
  • ¥15 matlab数字图像处理频率域滤波
  • ¥15 在abaqus做了二维正交切削模型,给刀具添加了超声振动条件后输出切削力为什么比普通切削增大这么多
  • ¥15 ELGamal和paillier计算效率谁快?
  • ¥15 蓝桥杯单片机第十三届第一场,整点继电器吸合,5s后断开出现了问题
  • ¥15 file converter 转换格式失败 报错 Error marking filters as finished,如何解决?
  • ¥15 Arcgis相交分析无法绘制一个或多个图形