csdnJFZ 2018-11-26 11:18 采纳率: 50%
浏览 961

.net core spider【爬虫】如何进行点击页面某个控件再进行获取数据?

.net core spider【爬虫】如何进行点击页面某个控件再进行获取数据?
最好能用如下代码实例进行改造说明一下或其它方式(processor里实现)

            Spider spider = Spider.Create(site,
                    // use memoery queue scheduler. 使用内存调度
                    new QueueDuplicateRemovedScheduler(),
                    // use custmize processor for youku 为优酷自定义的 Processor
                    new YoukuPageProcessor())
                    // use custmize pipeline for youku 为优酷自定义的 Pipeline
                    .AddPipeline(new YoukuPipeline());
            spider.Downloader = new HttpClientDownloader();
            spider.ThreadNum = 1;
            spider.EmptySleepTime = 3000;

            // Start crawler 启动爬虫
            spider.Run();
  • 写回答

0条回答 默认 最新

    报告相同问题?

    悬赏问题

    • ¥15 C#读写EXCEL文件,不同编译
    • ¥15 如何提取csv文件中需要的列,将其整合为一篇完整文档,并进行jieba分词(语言-python)
    • ¥15 MapReduce结果输出到HBase,一直连接不上MySQL
    • ¥15 扩散模型sd.webui使用时报错“Nonetype”
    • ¥15 stm32流水灯+呼吸灯+外部中断按键
    • ¥15 将二维数组,按照假设的规定,如0/1/0 == "4",把对应列位置写成一个字符并打印输出该字符
    • ¥15 NX MCD仿真与博途通讯不了啥情况
    • ¥15 win11家庭中文版安装docker遇到Hyper-V启用失败解决办法整理
    • ¥15 gradio的web端页面格式不对的问题
    • ¥15 求大家看看Nonce如何配置