AWS上傳文件超過5MB -

的NodeJS

我使用這個模塊上傳文件到AmazonAWS上傳文件超過5MB -

https://www.npmjs.com/package/streaming-s3，這是工作的罰款，如果文件大於5 MB小於或等於。

我試圖上傳大小爲6 MB的PDF文件。它顯示上傳成功，但當我試圖通過aws打開該文件。

它示出失敗當我在AWS檢查大小它顯示5 MB加載PDF文檔

。

我使用下面的代碼在AWS上

var options = { 
     concurrentParts: 2, 
     waitTime: 20000, 
     retries: 2, 
     maxPartSize: 10 * 1024 * 1024 
    }; 
    //call stream function to upload the file to s3 
    var uploader = new streamingS3(fileReadStream, config.aws.accessKey, config.aws.secretKey, awsHeader, options); 
    //start uploading 
    uploader.begin();// important if callback not provided. 

    // handle these functions 
    uploader.on('data', function (bytesRead) { 
     console.log(bytesRead, ' bytes read.'); 
    }); 

    uploader.on('part', function (number) { 
     console.log('Part ', number, ' uploaded.'); 
    }); 

    // All parts uploaded, but upload not yet acknowledged. 
    uploader.on('uploaded', function (stats) { 
     console.log('Upload stats: ', stats); 
    }); 

    uploader.on('finished', function (response, stats) { 
     console.log(response); 
     logger.log('info', "UPLOAD ", response); 
     cb(null, response); 
    }); 

    uploader.on('error', function (err) { 
     console.log('Upload error: ', err); 
     logger.log('error', "UPLOAD Error: ", err); 
     cb(err); 
    });

這是不到5個MB的文件工作正常上傳。

有什麼想法？是否有我需要在AWS上做的任何設置？

感謝

來源

2015-10-05 Hitu Bansal

你在控制檯中得到了什麼？你爲什麼改變maxPartSize？ – Mircea

上傳數據：{downloadSpeed：5242880000， uploadSpeed：66365570， downloadTime：1， uploadTime：79，大小：5242880} 沒有錯誤 –

你看到完成的消息？ – Mircea

這是需要的功能用於輸送通過多文件上傳API內容到S3，您可以對已GB大小流操作時保持內存佔用低，甚至。該流通過將流清空爲5 MB部分中的S3來避免高內存使用量，使得它一次只能存儲5 MB的流數據。

我們在這裏面臨的問題是，下一個部分沒有添加到流中。

請參閱此鏈接，端到端的細節 https://www.npmjs.com/package/s3-upload-stream

您還可以跟蹤上傳進度，調試使用

/* Handle progress. Example details object: 
    { ETag: '"f9ef956c83756a80ad62f54ae5e7d34b"', 
    PartNumber: 5, 
    receivedSize: 29671068, 
    uploadedSize: 29671068 } 
*/ 
upload.on('part', function (details) { 
    console.log(details); 
});

問題即使在完成完整的文件上傳。

upload.on('uploaded', function (details) { 
    console.log(details); 
});

來源

2015-10-05 06:01:45 Nishant

你想讓我使用s3-upload-stream這個模塊嗎？ –

嘗試使用它，我用它在過去，這是非常有前途的 – Nishant

似乎不適合我 –

AWS上傳文件超過5MB -

回答

相關問題