AWS S3 Node.js SDK：需要一次下載一個桶中的所有文件

Question

目前，我可以迭代桶中的所有文件並逐個下載， 使用node.js sdk。 我需要一次下載S3存儲桶中的所有文件。然後從桶中刪除它。

Answer 1

這種更高級別的節點S3庫具有downloadDir函數同步遠程S3桶的本地目錄。

https://github.com/andrewrk/node-s3-client#clientdownloaddirparams

Answer 2

假設您有一個函數listFiles，它返回要下載的存儲區中的密鑰數組，以及接受文件密鑰（名稱）並下載並刪除它的函數downloadFile。

你想對listFiles返回的所有文件同時調用downloadFile對不對？使用async庫。

function listFiles(cb) { 
    s3.stuff(params, cb); 
} 
function downlaodFile(key, cb) { 
    s3.stuff(key, cb); 
} 
listFiles(function (err, fileKeys) { 
    if (err) { 
     throw err;//don't really but this is just an example 
    } 
    async.each(fileKeys, downloadFile, function done(err) { 
     if (err) { 
      throw err; 
     } 
    }); 
}); 

Answer 3

可以使用下面的命令中使用aws cli：

aws s3 sync s3://yourbucket . 

如果你必須使用node那麼你可以使用exec或spwan。

const exec = require('child_process').exec; 
exec('aws s3 sync s3://yourbucket .', (err, stdout, stderr) => {});