爬虫采集 瀑布流网页数据，有啥子好用的方法嘛？

Question

网页 ：https://car.yiche.com/zhongdaxingche/paihang/

Answer 1

如果是php可以使用querylist爬虫类库
安装

composer require jaeger/querylist

demo

<?php

use QL\QueryList;

//DOM解析某页面所有的图片
$data = QueryList::get('http://cms.querylist.cc/bizhi/453.html')->find('img')->attrs('src');
//打印结果
print_r($data->all());

//DOM解析某页面所有的超链接和超链接文本内容
//可以先手动获取要DOM解析的页面源码
$html = file_get_contents('http://cms.querylist.cc/google/list_1.html');
//然后可以把页面源码或者HTML片段传给QueryList
$data = QueryList::html($html)->rules([  //设置DOM解析规则
    // DOM解析所有a标签的href属性
    'link' => ['a','href'],
    // DOM解析所有a标签的文本内容
    'text' => ['a','text']
])->range('li')->query()->getData();
//打印结果
print_r($data->all());

/**
 * 在线测试DOM解析并查看DOM解析结果:http://querylist.cc/querylist-test
 */

具体你可以去看官网：http://www.querylist.cc/