S3是Amazon S3的简称，s3cmd是一款命令行工具用来管理s3，同时还有一款图形化的管理工具：s3 browser。
因为绝大多数用户都是在linux下管理s3，而我们的打包机是在windows上，所以需要在windows下管理s3，本文记录一下踩坑。
s3的官方文档：https://s3tools.org/s3cmd
s3cmd下载：https://github.com/s3tools/s3cmd
有两个选项必须要配置对否则会一直报301错误，导致无法上传和下载，但是s3 ls这条命令是可以用的
就是这两个选项：
signature_v2 = True 这个加密选项如果是False每次上传或下载文件都会报301错误
host_bucket = %(bucket)s.s3.nie.xxx.com ，这个选项如果不对，无法上传或下载
linux下的示例配置文件(windows下的ini配置文件大体类型)
[default]
access_key =
secret_key =
default_mime_type = binary/octet-stream
enable_multipart = True
encoding = UTF-8
encrypt = False
host_base = s3.nie.xxx.com
host_bucket = %(bucket)s.s3.nie.xxx.com
multipart_chunk_size_mb = 30
socket_timeout = 300
stop_on_error = False
use_https = False
use_mime_magic = True
verbosity = WARNING
signature_v2 = True
windows上的s3配置文件在这个目录下（不同于linux）：
Configuration saved to 'C:\Users\zhaoqingqing01\AppData\Roaming\s3cmd.ini'
use_mime_magic = True #自动判断上传文件的mime类型
signature_v2 = True # 需要加密
更加详细的解释：https://www.bilibili.com/read/cv6012754
安装步骤：
从github下载s3cmd，需要安装python2，并把python添加到环境变量中
cd到s3cmd所在的目录下，执行：python setup.py install
等待安装完成后，所有的s3cmd命令都可以使用了，但需要cd到s3cmd目录下
注意：在所有命令前都需要加上python，因为是通过python来执行的。
示例：
cd c:\
cd c:\s3cmd
python s3 ls
参考文档：https://docs.e2enetworks.com/guides/s3cmdwindows.html（windows上可以不用安装Gpg4win(加密软件)）
可用的命令列表，见这里的commands部分：https://s3tools.org/usage
上传/同步某个目录 ： s3cmd sync LOCAL_DIR s3://BUCKET[/PREFIX] or s3://BUCKET[/PREFIX] LOCAL_DIR，例子：python s3cmd sync "c:/test_res" s3://xxx-dev/game_rsync_res/res
查询桶下面所有的文件： s3cmd ls s3://BUCKET[/PREFIX]，例子：s3cmd ls s3://xxx-dev
上传某个文件：python s3cmd put "E:/Temp/test_s3.txt" s3://xxx-dev/
下载某个文件：python s3cmd get s3://xxx-dev/test_s3.txt
Q：如何新增文件？
A：往文件夹中新增加文件，然后在同步文件夹时，就会把新文件上传过去
Q：如何删除文件？
A：试过先在文件夹下删除某个文件，然后调用sync，看看远程是否已删除这张图片？
Q：如何更新某张图片？
A：sync指令替换本地的图片就能更到最新
Q：如何切换不同的key?因为开发环境和正式环境的key不一样
A：像linux那样，在每条命结尾使用 -c“xx.ini”
通过s3cmd del 删除某个目录后，还可以下载到，不知是否因为有缓存？
把文件夹下的某个文件删除后，通过sync同步文件，还可以下载到删除掉的文件
除了命令行的方式，在windows下还有一个可视化的的软件，它可以列出某个桶及目录下的所有文件，并且提供可视化的上传和下载操作
使用文档：https://docs.e2enetworks.com/guides/s3browser_windows.html
使用方法如下：
新建一个Account，每项配置如下
Account Type：S3 Compatible Storage
REST Endpoint：s3.nie.xxx.com
不要勾选SSL/TLS和 Encrypt Access Keys
点击左下角打开高级设置，修改Addressing model为Virtual hosted style，然后点击 Save changes
S3 Browser可以保存每次操作的日志，日志保存位置：%APPDATA%\S3Browser\logs
首先本地磁盘的路径符需要是\，否则会报Exception
如果连接时报错误：Unable to perform requested action，在Edit Account中打开高级设置，修改Addressing model为Virtual hosted style
我需要在客户计算机上运行Ruby应用程序。通常需要几天才能完成(复制大备份文件)。问题是如果启用sleep，它会中断应用程序。否则，计算机将持续运行数周，直到我下次访问为止。有什么方法可以防止执行期间休眠并让Windows在执行后休眠吗？欢迎任何疯狂的想法;-) 最佳答案 Here建议使用SetThreadExecutionStateWinAPI函数，使应用程序能够通知系统它正在使用中，从而防止系统在应用程序运行时进入休眠状态或关闭显示。像这样的东西:require'Win32API'ES_AWAYMODE_REQUIRED=0x0
从给定URL下载文件并立即将其上传到AmazonS3的更直接的方法是什么(+将有关文件的一些信息保存到数据库中，例如名称、大小等)？现在，我既不使用Paperclip，也不使用Carrierwave。谢谢 最佳答案 简单明了:require'open-uri'require's3'amazon=S3::Service.new(access_key_id:'KEY',secret_access_key:'KEY')bucket=amazon.buckets.find('image_storage')url='http://www.ex
我正在编写一个小脚本来定位aws存储桶中的特定文件，并创建一个临时验证的url以发送给同事。(理想情况下，这将创建类似于在控制台上右键单击存储桶中的文件并复制链接地址的结果)。我研究过回形针，它似乎不符合这个标准，但我可能只是不知道它的全部功能。我尝试了以下方法:defauthenticated_url(file_name,bucket)AWS::S3::S3Object.url_for(file_name,bucket,:secure=>true,:expires=>20*60)end产生这种类型的结果:...-1.amazonaws.com/file_path/file.zip.A
我发现ActiveRecord::Base.transaction在复杂方法中非常有效。我想知道是否可以在如下事务中从AWSS3上传/删除文件:S3Object.transactiondo#writeintofiles#raiseanexceptionend引发异常后，每个操作都应在S3上回滚。S3Object这可能吗？？ 最佳答案 虽然S3API具有批量删除功能，但它不支持事务，因为每个删除操作都可以独立于其他操作成功/失败。该API不提供任何批量上传功能(通过PUT或POST)，因此每个上传操作都是通过一个独立的API调用完成的
在Rails4.0.2中，我使用s3_direct_upload和aws-sdkgems直接为s3存储桶上传文件。在开发环境中它工作正常，但在生产环境中它会抛出如下错误，ActionView::Template::Error(noimplicitconversionofnilintoString)在View中，create_cv_url,:id=>"s3_uploader",:key=>"cv_uploads/{unique_id}/${filename}",:key_starts_with=>"cv_uploads/",:callback_param=>"cv[direct_uplo
我正在尝试编写一个将文件上传到AWS并公开该文件的Ruby脚本。我做了以下事情:s3=Aws::S3::Resource.new(credentials:Aws::Credentials.new(KEY,SECRET),region:'us-west-2')obj=s3.bucket('stg-db').object('key')obj.upload_file(filename)这似乎工作正常，除了该文件不是公开可用的，而且我无法获得它的公共(public)URL。但是当我登录到S3时，我可以正常查看我的文件。为了使其公开可用，我将最后一行更改为obj.upload_file(file
这似乎非常适得其反，因为太多的gem会在window上破裂。我一直在处理很多mysql和ruby-mysqlgem问题(gem本身发生段错误，一个名为UnixSocket的类显然在Windows机器上不能正常工作，等等)。我只是在浪费时间吗？我应该转向不同的脚本语言吗？ 最佳答案 我在Windows上使用Ruby的经验很少，但是当我开始使用Ruby时，我是在Windows上，我的总体印象是它不是Windows原生系统。因此，在主要使用Windows多年之后，开始使用Ruby促使我切换回原来的系统Unix，这次是Linux。Rub
我有一个应用程序可以读取文件的内容并为其编制索引。我将它们存储在磁盘本身中，但现在我使用的是AmazonS3，因此以下方法不再适用。事情是这样的:defperform(docId)@document=Document.find(docId)if@document.file?#Youshould'tcreateanewversion@document.versionlessdo|doc|@document.file_content=Cloudoc::Extractor.new.extract(@document.file.file)@document.saveendendend@docu
之前在培训新生的时候，windows环境下配置opencv环境一直教的都是网上主流的vsstudio配置属性表，但是这个似乎对新生来说难度略高(虽然个人觉得完全是他们自己的问题)，加之暑假之后对cmake实在是爱不释手，且这样配置确实十分简单(其实都不需要配置)，故斗胆妄言vscode下配置CV之法。其实极为简单，图比较多所以很长。如果你看此文还配不好，你应该思考一下是不是自己的问题。闲话少说，直接开始。0.CMkae简介有的人到大二了都不知道cmake是什么，我不说是谁。CMake是一个开源免费并且跨平台的构建工具，可以用简单的语句来描述所有平台的编译过程。它能够根据当前所在平台输出对应的m
目录前言滤波电路科普主要分类实际情况单位的概念常用评价参数函数型滤波器简单分析滤波电路构成低通滤波器RC低通滤波器RL低通滤波器高通滤波器RC高通滤波器RL高通滤波器部分摘自《LC滤波器设计与制作》，侵权删。前言最近需要学习放大电路和滤波电路，但是由于只在之前做音乐频谱分析仪的时候简单了解过一点点运放，所以也是相当从零开始学习了。滤波电路科普主要分类滤波器：主要是从不同频率的成分中提取出特定频率的信号。有源滤波器：由RC元件与运算放大器组成的滤波器。可滤除某一次或多次谐波，最普通易于采用的无源滤波器结构是将电感与电容串联，可对主要次谐波（3、5、7）构成低阻抗旁路。无源滤波器：无源滤波器，又称