Python新手，最近学习Python做了一个爬取豆瓣电影的小项目，在爬取导演、主演的时候结果不是理想，请问分别爬取导演、主演的程序怎么写？
下面是网页的程序：
导演: 弗兰克·德拉邦特 Frank Darabont 主演: 蒂姆·罗宾斯 Tim Robbins /...
1994 / 美国 / 犯罪 剧情
Python爬虫爬取豆瓣电影
- 写回答
- 好问题 0 提建议
- 追加酬金
- 关注问题
分享- 邀请回答
-
3条回答 默认 最新
- 2021-08-10 16:43回答 2 已采纳 Process(target = parse_url,args = url) 这里的args 参数需要是一个元组形式，可以写成args=（url，）
- 2022-10-18 21:52回答 1 已采纳 图片是从cdn上过来的，做了防盗链。在headers中添加Refer，指向该网站就行了。 import re import requests import os if not os.path.ex
- 2021-11-11 11:15回答 1 已采纳 先确定需要爬取的网站，然后分析网站的数据来源，是后端生成数据还是ajax生成数据，确定数据来源方式就根据HTTP请求编写代码，这个涉及一些请求参数的加密、转换等等处理，然后清洗数据和数据入库
- 2022-01-20 23:30在本项目中，我们主要探讨的是使用Python编程语言进行网络爬虫来抓取豆瓣电影TOP250的数据，并对其进行后续的数据分析。这个过程涉及到多个关键的IT知识点，包括Python的基础语法、网络爬虫的实现、数据处理以及数据...
- 2021-11-27 22:00回答 2 已采纳 你检查下这个网页中的内容是不是通过js代码读取外部json数据来动态更新的。requests只能获取网页的静态源代码，动态更新的内容取不到。对于动态更新的内容要用selenium 来爬取。 或者是通
- 2021-05-22 21:34回答 1 已采纳 这里我们以爬取淘宝评论为例子讲解一下如何去做到的。 这里主要分为了四步： 一 获取淘宝评论时，ajax请求链接（url） 二 获取该ajax请求返回的json数据 三 使用python解析js
- 2022-06-06 20:12回答 4 已采纳 你题目的解答代码如下： #coding=gbk import requests from io import BytesIO from PIL import Image from selenium
- 2024-08-14 11:44黄小耶@的博客 豆瓣这个网站相信大家并不陌生，大家一定想知道哪些电影类型是比较好看的，哪些电影是评分高的，今天的主题就是教大家爬取豆瓣电影的电影数据。
- 2022-08-17 17:07回答 3 已采纳 因为元素里的你要的内容是通过 ajax 请求动态加载的，可以浏览器抓包去看下，你想要的这条数据到底是哪个请求返回的，找到真正的请求，然后模拟发送就行了
- 2021-10-21 15:16回答 1 已采纳 该页面信息通过用户选择选项，js动态渲染加载数据的，比如在选项框中输入name,在XHR中就可以看到name的动态加载链接，对其进行请求可获取相关信息的json数据信息。
- 2022-08-12 12:20回答 3 已采纳 不如换用requests库和bs4库吧。 from bs4 import BeautifulSoup as bs import requests as r url = 'https://fanqie
- 2023-07-16 23:12鱼弦的博客 最后，我们可以调用这两个函数，先爬取信息并...接下来，我们可以编写一个函数，用于爬取豆瓣电视剧页面的信息，并将其整合到一个excel文件中。实现两层网页的信息爬取，并将爬取的信息进行整合保存到 excel 文件中。
- 2021-11-27 11:36回答 3 已采纳 你爬虫应该是用requests发送http请求的吧，这个是无法从elements找到，你要在network的doc分析网页，你找不到的数据很大可能是ajax请求渲染前端的
- 2019-04-18 11:43Makesths的博客 爬豆瓣实例 第一步: 新建项目 首先要去到 Linux中创建一个scrapy项目框架：到期望的目录中，使用命令创建项目 scrapy startproject padouban，padouban为项目名称，创建完成后会自动生成下列文件： padouban __...
- 2022-02-15 17:40木瞳的博客 Python - 爬取豆瓣短评评论 import requests from bs4 import BeautifulSoup import re import time # 保存豆瓣评分 source_douban_score = r'e:/test/txt/douban_book_score.txt' # 获取书名 def get_book_...
- 没有解决我的问题, 去提问
悬赏问题
- ¥15 openwrt双栈NAT
- ¥15 部分网页页面无法显示！
- ¥15 怎样解决power bi 中设置管理聚合，详细信息表和详细信息列显示灰色，而不能选择相应的内容呢？
- ¥15 QTOF MSE数据分析
- ¥15 平板录音机录音问题解决
- ¥15 请问维特智能的安卓APP在手机上存储传感器数据后，如何找到它的存储路径?
- ¥15 (SQL语句|查询结果翻了4倍)
- ¥15 Odoo17操作下面代码的模块时出现没有'读取'来访问
- ¥50 .net core 并发调用接口问题
- ¥15 网上各种方法试过了，pip还是无法使用