xixixixixixixi1231 2023-02-10 15:01 采纳率: 17.6%
浏览 174
已结题

nodejs批量发起请求的问题

我利用nodejs在,批量请求一个接口并处理返回的数据。先要从excel里读取1000个身份证,然后通过请求接口得到返回数据,全部请求完后,将返回的数据存入excel并导出。现在我想问怎么批量请求1000次,最快?请求用的是superagent插件。我的语句里面有很多promise的方法,对应的不同接口,要求是每个身份证都跑一遍接口,获得的数据根据身份证统一整理

  • 写回答

10条回答 默认 最新

  • 社区专家-Monster-XH 2023-02-10 16:00
    关注
    const superagent = require('superagent');
    const exceljs = require('exceljs');
    
    function getData1(id) {
    return new Promise((resolve, reject) => {
    superagent
    .get(https://example.com/api/data1/${id})
    .then(res => {
    resolve(res.body);
    })
    .catch(err => {
    reject(err);
    });
    });
    }
    
    function getData2(id) {
    return new Promise((resolve, reject) => {
    superagent
    .get(https://example.com/api/data2/${id})
    .then(res => {
    resolve(res.body);
    })
    .catch(err => {
    reject(err);
    });
    });
    }
    
    function getData3(id) {
    return new Promise((resolve, reject) => {
    superagent
    .get(https://example.com/api/data3/${id})
    .then(res => {
    resolve(res.body);
    })
    .catch(err => {
    reject(err);
    });
    });
    }
    
    async function processBatch(ids, startIndex) {
    // 为每个身份证号码发送请求
    const data = await Promise.all(
    ids
    .slice(startIndex, startIndex + 10)
    .map(async id => {
    const [data1, data2, data3] = await Promise.all([
    getData1(id),
    getData2(id),
    getData3(id)
    ]);
        return {
          id,
          data1,
          data2,
          data3
        };
      })
    );
    
    // 将数据写入 Excel
    data.forEach(d => {
    sheet.addRow([d.id, d.data1, d.data2, d.data3]);
    });
    }
    
    async function main() {
    const workbook = new exceljs.Workbook();
    const sheet = workbook.addWorksheet('Sheet 1');
    
    // 读取 Excel 文件中的身份证号码
    const ids = // ...
    
    let startIndex = 0;
    while (startIndex < ids.length) {
    await processBatch(ids, startIndex);
    startIndex += 10;
    }
    
    await workbook.xlsx.writeFile('output.xlsx');
    }
    
    main();
    
    
    本回答被题主选为最佳回答 , 对您是否有帮助呢?
    评论
查看更多回答(9条)

报告相同问题?

问题事件

  • 系统已结题 2月19日
  • 已采纳回答 2月11日
  • 修改了问题 2月10日
  • 修改了问题 2月10日
  • 展开全部

悬赏问题

  • ¥15 时域内插或抽取、时频变换
  • ¥50 关于多次提交POST数据后,无法获取到POST数据参数的问题
  • ¥15 win10,这种情况怎么办
  • ¥15 如何在配置使用Prettier的VSCode中通过Better Align插件来对齐等式?(相关搜索:格式化)
  • ¥100 在连接内网VPN时,如何同时保持互联网连接
  • ¥15 MATLAB中使用parfor,矩阵Removal的有效索引在parfor循环中受限制
  • ¥20 Win 10 LTSC 1809版本如何无损提升到20H1版本
  • ¥50 win10 LTSC 虚拟键盘不弹出
  • ¥30 微信小程序请求失败,网页能正常带锁访问
  • ¥30 德飞莱51单片机实现C4炸弹