通过 Node.js 将 base64 编码的图像上传到 Amazon S3

IT技术 javascript node.js amazon-s3 coffeescript
2021-02-15 22:48:57

昨天我做了一个深夜编码会议并创建了一个小的 node.js/JS(实际上是 CoffeeScript,但 CoffeeScript 只是 JavaScript,所以可以说是 JS)应用程序。

目标是什么:

  1. 客户端将画布数据(png)发送到服务器(通过 socket.io)
  2. 服务器将图像上传到亚马逊 s3

步骤1完成。

服务器现在有一个字符串 a la

data:image/png;base64,iVBORw0KGgoAAAANSUhEUgAAAMgAAADICAYAAACt...

我的问题是:下一步将这些数据“流式传输”/上传到 Amazon S3 并在那里创建实际图像是什么?

knox https://github.com/LearnBoost/knox似乎是一个很棒的库,可以将某些内容放入 S3,但我缺少的是 base64-encoded-image-string 和实际上传操作之间的胶水

欢迎任何想法、指示和反馈。

4个回答

对于仍在为这个问题而苦苦挣扎的人。这是我在原生 aws-sdk 中使用的方法:

var AWS = require('aws-sdk');
AWS.config.loadFromPath('./s3_config.json');
var s3Bucket = new AWS.S3( { params: {Bucket: 'myBucket'} } );

在路由器方法中(ContentType 应设置为图像文件的内容类型):

  buf = Buffer.from(req.body.imageBinary.replace(/^data:image\/\w+;base64,/, ""),'base64')
  var data = {
    Key: req.body.userId, 
    Body: buf,
    ContentEncoding: 'base64',
    ContentType: 'image/jpeg'
  };
  s3Bucket.putObject(data, function(err, data){
      if (err) { 
        console.log(err);
        console.log('Error uploading data: ', data); 
      } else {
        console.log('successfully uploaded the image!');
      }
  });

s3_config.json 文件:

{
  "accessKeyId":"xxxxxxxxxxxxxxxx",
  "secretAccessKey":"xxxxxxxxxxxxxx",
  "region":"us-east-1"
}
@Marklar 位置路径基本上是关键-例如,如果您的存储桶名称是-bucketone 并且关键名称是 xyz.png,那么文件路径将是bucketone.s3.amazonaws.com/xyz.png
2021-04-24 22:48:57
键:req.body.userId 我在发布数据中使用 userId 作为键......很久以前......但是你可以将任何字符串声明为键。为确保已存在的文件不被覆盖,请保持密钥唯一。
2021-04-30 22:48:57
@Divyanshu 感谢您的精彩回答!这对我帮助很大。但是,我认为这ContentEncoding: 'base64'是不正确的,因为将new Buffer(..., 'base64')base64 编码的字符串解码为其二进制表示。
2021-04-30 22:48:57
对我有用,非常感谢
2021-04-30 22:48:57
[MissingRequiredParameter:参数中缺少必需的键'Key']
2021-05-08 22:48:57

好的,这是如何将画布数据保存到文件的答案

基本上它在我的代码中是这样的

buf = new Buffer(data.dataurl.replace(/^data:image\/\w+;base64,/, ""),'base64')


req = knoxClient.put('/images/'+filename, {
             'Content-Length': buf.length,
             'Content-Type':'image/png'
  })

req.on('response', (res) ->
  if res.statusCode is 200
      console.log('saved to %s', req.url)
      socket.emit('upload success', imgurl: req.url)
  else
      console.log('error %d', req.statusCode)
  )

req.end(buf)
缓冲区对象会抛出错误“缓冲区未定义”,你能给我解决方案吗?
2021-04-20 22:48:57
@NaveenG 这是一个节点示例,也许您使用的是纯 JS?
2021-04-23 22:48:57
我也收到同样的错误。你有没有解决办法
2021-05-10 22:48:57

这是我遇到的一篇文章中的代码,贴在下面:

const imageUpload = async (base64) => {

  const AWS = require('aws-sdk');

  const { ACCESS_KEY_ID, SECRET_ACCESS_KEY, AWS_REGION, S3_BUCKET } = process.env;

  AWS.config.setPromisesDependency(require('bluebird'));
  AWS.config.update({ accessKeyId: ACCESS_KEY_ID, secretAccessKey: SECRET_ACCESS_KEY, region: AWS_REGION });

  const s3 = new AWS.S3();

  const base64Data = new Buffer.from(base64.replace(/^data:image\/\w+;base64,/, ""), 'base64');

  const type = base64.split(';')[0].split('/')[1];

  const userId = 1;

  const params = {
    Bucket: S3_BUCKET,
    Key: `${userId}.${type}`, // type is not required
    Body: base64Data,
    ACL: 'public-read',
    ContentEncoding: 'base64', // required
    ContentType: `image/${type}` // required. Notice the back ticks
  }

  let location = '';
  let key = '';
  try {
    const { Location, Key } = await s3.upload(params).promise();
    location = Location;
    key = Key;
  } catch (error) {
  }

  console.log(location, key);

  return location;

}

module.exports = imageUpload;

阅读更多:http : //docs.aws.amazon.com/AWSJavaScriptSDK/latest/AWS/S3.html#upload-property

学分:https : //medium.com/@mayneweb/upload-a-base64-image-data-from-nodejs-to-aws-s3-bucket-6c1bd945420f

“new”关键字不应出现在 Buffer.from 之前
2021-04-29 22:48:57

接受的答案效果很好,但如果有人需要接受任何文件而不仅仅是图像,则此正则表达式效果很好:

/^data:.+;base64,/