Node如何實現(xiàn)批量下載文件到本地

這篇文章主要介紹了Node如何實現(xiàn)批量下載文件到本地，具有一定借鑒價值，需要的朋友可以參考下。希望大家閱讀完這篇文章后大有收獲。下面讓小編帶著大家一起了解一下。

多文件分別處理

如果文件數(shù)量可控，對于下載出來的文件格式無要求，可以用最簡單的辦法，直接遍歷文件，分別給每個下載鏈接創(chuàng)建一個單文件的download或者iframe下載鏈接。

zip包批量下載

雖然說可以遍歷所有文件，然后去批量下載單個文件，但是這種體驗畢竟不太好，最常見的做法是把批量的文件下載并打包到zip中。

所以首先的一個實現(xiàn)思路是：在代理服務(wù)里，先去遍歷所有的文件去請求文件數(shù)據(jù),然后壓縮到zip包中，然后再把zip包返回給客戶端。

這么做對于下載量數(shù)據(jù)比較小時ok，但是如果批量文件特別多特別大時，用戶要等后臺把所有的數(shù)據(jù)都請求到并且都打包都壓縮包里，前端才能有反饋，這個時間可能會耗時很長，用戶體驗可能很差。

在同事的前期調(diào)研時，有說這里可以做一個流式的邊壓縮邊下載的能力，大致的思路是，chunk回包，加流式壓縮。

......

let fileCounter = 0;
const zippedFilename = encodeURIComponent(downloadData.name);
const list = downloadData.list || [];
const header = {
  'Content-Type': 'application/x-zip',
  'Pragma': 'public',
  'Expires': '0',
  'Cache-Control': 'private, must-revalidate, post-check=0, pre-check=0',
  'Content-disposition': 'attachment; filename="' + zippedFilename + '"',
  'Transfer-Encoding': 'chunked',
  'Content-Transfer-Encoding': 'binary'
};
res.writeHead(200, header);
archive.store = true;
archive.pipe(res);
list.map(item => {
  fileCounter++;
  let inStream = request.get(item.downLoadUrl);
  let name = item.fileName;
  let length = 0;
  inStream.on('response', function(awsData) {
    archive.append(inStream, {
      name: name
    });
  }).on('data', function(data) {
    length += data.length;
  }).on('error', function(e) {
    console.error(name + '-error', e);
  }).on('end', function(endData) {
    fileCounter--;
    if (fileCounter < 1) {
      archive.finalize();
    }
  });
});
archive.on('error', function(err) {
  throw err;
});
archive.on('finish', function(err) {
  return res.end();
});

......

當(dāng)然中間還有些細(xì)節(jié)需要處理：比如中文文件名的問題，是否需要下載文件總大小做限制，是否會出現(xiàn)文件不存在等等情況。

感謝你能夠認(rèn)真閱讀完這篇文章，希望小編分享Node如何實現(xiàn)批量下載文件到本地內(nèi)容對大家有幫助，同時也希望大家多多支持億速云，關(guān)注億速云行業(yè)資訊頻道，遇到問題就找億速云，詳細(xì)的解決方法等著你來學(xué)習(xí)!