草庐IT

s3-graphite

全部标签

javascript - 当指定的键不存在时,为什么 S3.deleteObject 不会失败?

使用AWSSDKforNode,为什么我在尝试删除不存在的对象(即S3key错误)时没有收到错误消息?另一方面,如果我指定一个不存在的存储桶,则会产生错误。如果你考虑下面的Node程序,Key参数列出了一个在桶中不存在的键,但是回调的error参数是null:varaws=require('aws-sdk')functiongetSetting(name){varvalue=process.env[name]if(value==null){thrownewError('Youmustsettheenvironmentvariable'+name)}returnvalue}vars3Cl

node.js - 使用强大的和(knox 或 aws-sdk)在 Node.js 上将文件流式上传到 S3

我正在尝试将通过表单提交的文件直接上传到AmazonS3存储桶,使用aws-sdk或knox.表单处理由formidable完成.我的问题是:如何使用这些库处理流的最新功能正确使用aws-sdk(或knox)的强大功能?我知道这个话题已经在这里以不同的方式提出过,即:Howtoreceiveanuploadedfileusingnode.jsformidablelibraryandsaveittoAmazonS3usingknox?nodeapplicationstreamfileuploaddirectlytoamazons3Accessingtherawfilestreamfrom

javascript - 在 Node js 中使用 AWS sdk 将整个目录树上传到 S3

我目前使用如下方式将单个对象上传到S3:varoptions={Bucket:bucket,Key:s3Path,Body:body,ACL:s3FilePermissions};S3.putObject(options,function(err,data){//console.log(data);});但是,例如,当我有一个大型资源文件夹时,我使用AWSCLI工具。我想知道,有没有一种本地方法可以用awssdk做同样的事情(将整个文件夹上传到s3)? 最佳答案 老派递归方式我匆匆忙忙起来。仅使用核心Node模块和标准AWSsdk。

javascript - s3.getObject().createReadStream() : How to catch the error?

我正在尝试编写一个程序来从s3获取一个zip文件,解压缩它,然后将其上传到S3。但是我发现了两个我无法捕捉到的异常。1.StreamContentLengthMismatch:流内容长度不匹配。收到980323883个字节,共5770104761个字节。这种情况不规律地发生。2.NoSuchKey:指定的键不存在。当我输入错误的键时会出现这种情况。当这两个异常发生时,这个程序就会崩溃。我想正确地捕捉和处理这两个异常。我想防止崩溃。constunzipUpload=()=>{returnnewPromise((resolve,reject)=>{letrStream=s3.getObje

javascript - 通过 AWS 开发工具包创建签名的 S3 和 Cloudfront URL

是否有人成功地使用AWS开发工具包为S3存储桶中的对象生成签名URL,这些对象也可以在CloudFront上运行?我正在使用JavaScriptAWSSDK通过S3链接生成签名URL非常简单。我刚刚创建了一个私有(private)存储桶并使用以下代码生成URL:varAWS=require('aws-sdk'),s3=newAWS.S3(),params={Bucket:'my-bucket',Key:'path/to/key',Expiration:20}s3.getSignedUrl('getObject',params,function(err,url){console.log(

node.js - Node JS AWS S3 文件上传。如何获取公共(public) URL 响应

我正在使用NodeSDK将文件上传到AmazonS3。文件上传工作正常,但我想获取文件的公共(public)url以发送回客户端。目前我得到的回复是:Successfullyuploadeddata{ETag:'"957cd1a335adf5b4000a5101ec1f52bf"'}这是我的代码。我正在使用NodeExpress服务器和Multer来处理上传。app.use(multer({//https://github.com/expressjs/multerdest:'./public/uploads/',limits:{fileSize:100000},rename:funct

node.js - 在 express/nodejs 应用程序中提供存储在 S3 中的文件

我有一个应用程序,其中用户的照片是私密的。我将照片(也包括缩略图)存储在AWSs3中。网站中有一个页面,用户可以在其中查看他的照片(即缩略图)。现在我的问题是如何提供这些文件。我评估过的一些选项是:使用签名URL生成从CloudFront(或AWS)提供文件。但问题是每次用户刷新页面时,我都必须再次创建这么多签名的url并加载它。因此,我将无法在浏览器中缓存图像,这将是一个不错的选择。无论如何仍然在javascript中做吗?由于安全问题,我无法让这些网址的有效期更长。其次,在该时间范围内,如果有人掌握了该网址,他可以查看该文件,而无需通过应用程序进行身份验证。其他选项是在从S3服务器

node.js - 使用 StatsD(通过 etsy)和 Graphite 跟踪指标,graphite graph 似乎并没有绘制所有数据

每当用户在我们的网站上执行特定操作时,我们都会增加一个指标,但图表似乎并不准确。因此,出于这种预感,我们投入了carbon的更新日志,发现该操作今天已经发生了4000多次(使用grep和wc),但根据图表的积分结果,它仅返回220次。这可能是什么原因?正在使用statsdphp库将数据报告给statsd,并调用statsd::increment('metric');并且如上所述,日志确认今天对该key进行了4,000多次更新。我们正在使用:带有statsD(etsy)的Graphite0.9.6 最佳答案 在对文档进行一些研究并与其

javascript - 从 url 下载文件并将其上传到 AWS S3 而不保存 - node.js

我正在编写一个应用程序,它从url下载图像,然后使用aws-sdk将其上传到S3存储桶。.以前我只是像这样下载图像并将它们保存到磁盘。request.head(url,function(err,res,body){request(url).pipe(fs.createWriteStream(image_path));});然后像这样将图像上传到AWSS3fs.readFile(image_path,function(err,data){s3.client.putObject({Bucket:'myBucket',Key:image_path,Body:dataACL:'public-r

node.js - 如何使用 AWS SDK for Node.js 在 s3 上创建文件夹或 key ?

我正在使用AWSSDKforNode.js在s3上创建文件夹或key。我在谷歌上搜索,但我一无所获。有人知道如何使用AWSSDKforNode.js在我的存储桶下创建一个文件夹吗?以及如何检查此文件夹是否已存在于您的存储桶中?如果您使用console.aws.amazon.com,您可以轻松地在您的存储桶中创建一个文件夹。似乎我没有弄清楚如何使用AWSSDKforNode.js创建它? 最佳答案 S3不是典型的文件系统。这是一个对象存储。它有桶和对象。桶用于存储对象,对象包括数据(基本上是文件)和元数据(有关文件的信息)。与传统文件