草庐IT

s3_direct_upload

全部标签

ruby-on-rails - 将 CSV 流从 Ruby 上传到 S3

我正在处理潜在的巨大CSV文件,我想从我的Rails应用程序导出这些文件,并且由于它在Heroku上运行,我的想法是在生成这些CSV文件时将它们直接流式传输到S3。现在,我遇到了一个问题,因为Aws::S3需要一个文件才能执行上传,而在我的Rails应用程序中我想做类似的事情:S3.bucket('my-bucket').object('my-csv')我怎样才能做到这一点? 最佳答案 您可以使用s3分段上传,允许通过将大对象拆分为多个block来上传。https://docs.aws.amazon.com/AmazonS3/lat

ruby-on-rails - 将 ACL 设置为 public_read 的文件上传到 AWS S3

在我的Rails应用中,我在创建时将客户RMA运输标签保存到S3存储桶中。我刚刚更新到aws-sdkgem的V2,现在我设置ACL的代码不起作用。在V1.X中有效的代码:#SaveslabeltoS3buckets3=AWS::S3.newobj=s3.buckets[ENV['S3_BUCKET_NAME']].objects["#{shippinglabel_filename}"]obj.write(open(label.label('pdf').postage_label.label_pdf_url,'rb'),:acl=>:public_read).write似乎已被弃用,所以

ruby-on-rails - 使用 Paperclip 拒绝访问 S3

我正在熟悉使用带有ruby​​的S3将文件上传到AmazonWebService。我最近遇到了以下错误:AWS::S3::Errors::AccessDeniedAccessDenied。在谷歌上四处寻找,我发现thispost关于错误。它声称存储桶策略不足以允许通过网络应用程序进行访问,并且还必须为用户提供“管理员访问权限”。我已经尝试过了,它工作正常,但我觉得这表明我没有做对,因为我读过的任何其他文档都没有提到管理员访问权限。我正在使用aws-sdkgem。谁能权衡是否需要管理员访问权限?非常感谢! 最佳答案 现有的答案都没有真

upload-labs通关

最近,我有个朋友老是反映部署的网站老是被黑客攻击,我看了下就是普通的PHP框架搭建的网站,经过一番排除也清除了木马。为此我专门花1天时间研究一下文件上传漏洞,知己知彼方能百战百胜。这里我选择了一个开源的靶场upload-labs。测试环境部署游览器插件下载地址Cookie-Editor:https://chrome.google.com/webstore/detail/hlkenndednhfkekhgcdicdfddnkalmdmHackBar:https://hackbar.herokuapp.com/使用everything搜索hackbar-panel.js文件的位置,注释或删除以下代

ruby - 如何通过一次 Fog 调用在存储桶中创建 S3 对象?

这是Fogwalkthroughofcreatingafile(anS3object)inadirectory(anS3bucket):connection=Fog::Storage.new({:provider=>'AWS',:aws_access_key_id=>YOUR_AWS_ACCESS_KEY_ID,:aws_secret_access_key=>YOUR_AWS_SECRET_ACCESS_KEY})directory=connection.directories.create(:key=>"fog-demo-#{Time.now.to_i}",#globallyuniq

ruby-on-rails - 从本地回形针存储迁移到 S3

我们最近搬到了一个提供有限存储空间的新虚拟主机,因此我们试图将所有通过Paperclipgem上传的用户上传(头像、文件等)移动到AmazonS3。我有数百个文件,它们都对应于我现在正尝试整体迁移的不同模型。我找到了thisdocument介绍了一个漂亮的回形针rake任务:rake回形针:refresh:missing_styles这个命令为我做了一些工作,但是,我注意到它只是设置文件结构而不发送任何数据-此外它没有设置任何使用:styles散列定义的缩略图在has_attached_file调用中。即,我在我的一个模型上设置了以下回形针:classUser{:thumb=>"100

ruby - AWS::S3 重命名文件夹

我看到有一个AWS::S3::S3Object.rename但我不能用folders做:AWS::S3::Base.establish_connection!(:access_key_id=>APP_CONFIG[:s3_access_key_id],:secret_access_key=>APP_CONFIG[:s3_secret_access_key])AWS::S3::S3Object.rename("assets/old_name_folder","assets/new_name_folder",APP_CONFIG[:s3_bucket])old_name_folder包含文

ruby - Amazon 基于前缀的 S3 策略不起作用(AWS、IAM、STS、Ruby)

我正在构建一个应用程序,该应用程序使用亚马逊的安全token服务来创建临时用户以访问S3存储桶上的子目录。用户由IAM用户创建,该用户对存储桶具有完全读/写访问权限(以及创建用户所需的权限)。我创建的用户与session过期等完美配合,但我在制定正确的策略以允许基于前缀的key列表方面遇到问题。我希望最终用户拥有的权限是:读取某个已定义前缀中的对象将对象写入相同定义的前缀列出驻留在定义的前缀中的所有对象我设法让读写正常工作,但无论我尝试什么,列表访问都无法正常工作。这是我最接近时使用的Ruby代码:AWS::STS::Policy.newdo|policy|policy.allow(a

ruby-on-rails - 验证失败 : Upload file has an extension that does not match its contents

我正在使用回形针gem上传文件。我的回形针gem版本是paperclip-4.1.1。上传文件时抛出Validationfailed:Uploadfilehasanextensionthatdoesnotmatchitscontents.我正在尝试上传xlsx文件。而且我已经在模型content_type中提到了这一点。validates_attachment_content_type:upload_file,:content_type=>%w(application/mswordapplication/vnd.ms-officeapplication/vnd.ms-excelappl

ruby - 如何使用 ruby​​ 更新一批 S3 对象的元数据?

我需要更改S3上成百上千个对象的一些元数据(内容类型)。用ruby​​做这个的好方法是什么?据我所知,无法使用fog.io仅保存元数据,必须重新保存整个对象。好像在用theofficialsdklibrary将需要我为这一项任务滚动一个包装器环境。 最佳答案 没错,官方SDK可以修改对象元数据,无需重新上传。它的作用是copytheobject但那是在服务器上,所以你不需要下载文件并重新上传。包装器很容易实现,比如bucket.objects.eachdo|object|object.metadata['content-type']