草庐IT

Minio

惰立 2023-04-21 原文

Minio

文章目录

minio-server

点击下载: minio

# 下载二进制文件
cd /usr/local/bin/ && wget https://dl.min.io/server/minio/release/linux-amd64/minio && chmod +x minio
# 创建目录
mkdir -p /data/minio && touch /data/minio/minio.log
# 设置ak、sk
export MINIO_ACCESS_KEY=minioadmin
export MINIO_SECRET_KEY=minioadmin
# 启动
nohup minio server --address 172.10.10.10:9005 --console-address 172.10.10.10:9006 /data/minio > /data/minio/minio.log 2>&1 &

minio-client

点击下载:mc

# 下载二进制文件
cd /usr/local/bin/ && wget https://dl.min.io/client/mc/release/linux-amd64/mc && chmod +x mc
# 查看 mc 版本
mc version

minio-client 命令

ls       列出文件和文件夹
mb       创建一个存储桶或一个文件夹
cat      显示文件和对象内容
pipe     将一个STDIN重定向到一个对象或者文件或者STDOUT
share    生成用于共享的URL
cp       拷贝文件和对象
mirror   给存储桶和文件夹做镜像
find     基于参数查找文件
diff     对两个文件夹或者存储桶比较差异
rm       删除文件和对象
events   管理对象通知
watch    监听文件和对象的事件
policy   管理访问策略
session  为cp命令管理保存的会话
config   管理mc配置文件
update   检查软件更新
version  输出版本信息

config

config host 命令提供了一个方便地管理~/.mc/config.json配置文件中的主机信息的方式,也可以用文本编辑器手动修改这个配置文件

用法:
  mc config host COMMAND [COMMAND FLAGS | -h] [ARGUMENTS...]

COMMANDS:
  add, a      添加一个新的主机到配置文件
  remove, rm  从配置文件中删除一个主机
  list, ls    列出配置文件中的主机

FLAGS:
  --help, -h                       显示帮助

添加 server 节点,名称为 minio1

# 添加server,名称为minio1 (shell的history特性可能会记录这些信息,从而带来安全隐患。在bash shell,使用set -o和set +o来关闭和开启history特性)
set +o history
mc config host add minio1 http://192.168.0.220:9005 minioadmin minioadmin --api s3v4
set -o history

mb

创建存储桶。MinIO对每个用户创建的存储桶数量没有限制。 在Amazon S3上,每个帐户被限制为100个存储桶

用法:
   mc mb [FLAGS] TARGET [TARGET...]

FLAGS:
  --help, -h                   显示帮助
  --region "us-east-1"         指定存储桶的region,默认是‘us-east-1’

在 minio1 上创建一个名为“bucket”的存储桶

mc mb minio1/bucket

ls

列出存储桶、对象

用法:
   mc ls [FLAGS] TARGET [TARGET ...]

FLAGS:
  --help, -h               显示帮助
  --recursive, -r          递归
  --incomplete, -I         列出未完整上传的对象

列出 minio1 所有桶

mc ls minio1

列出 minio1 上的存储桶 bucket 下的文件

mc ls minio1/bucket/

cp

拷贝本地的一个或多个源文件到对象存储。所有到对象存储的拷贝操作都进行了MD4SUM checkSUM校验。可以从故障点恢复中断或失败的复制操作

用法:
   mc cp [FLAGS] SOURCE [SOURCE...] TARGET
FLAGS:
  --help, -h               显示帮助
  --recursive, -r          递归拷贝

拷贝一个本地文件 test.txt 到 minio1/bucket

mc cp test.txt minio1/bucket/

pipe

pipe到对象。pipe命令拷贝stdin里的内容到目标输出,如果没有指定目标输出,则输出到stdout

用法:
   mc pipe [FLAGS] [TARGET]

FLAGS:
  --help, -h                    显示帮助

将MySQL数据库dump文件输出到Amazon S3

mysqldump -u root -p ******* accountsdb | mc pipe s3/sql-backups/backups/accountsdb-oct-9-2015.sql

rm

删除文件对象或存储桶

用法:
   mc rm [FLAGS] TARGET [TARGET ...]

FLAGS:
  --help, -h            显示帮助
  --recursive, -r       递归删除
  --force               强制执行删除操作
  --prefix              删除批配这个前缀的对象
  --incomplete, -I      删除未完整上传的对象
  --fake                模拟一个假的删除操作
  --stdin               从STDIN中读对象列表
  --older-than value    删除N天前的对象(默认是0天)

删除 minio1 下的 bucket 桶

mc rm minio1/bucket

删除 minio1 下的 bucket 桶中的 test.txt 文件

mc rm minio1/bucket/test.txt

递归删除 minio1 下的 bucket 桶中的所有内容

mc rm --recursive --force minio1/bucket/

从 bucket 里删除未完整上传的对象

mc rm  --incomplete --recursive --force minio1/bucket/

删除1天前的对象

mc rm --force --older-than=1 minio1/bucket/

recursive --force minio1/bucket/


从 bucket 里删除未完整上传的对象

```shell
mc rm  --incomplete --recursive --force minio1/bucket/

删除1天前的对象

mc rm --force --older-than=1 minio1/bucket/

有关Minio的更多相关文章

  1. python 连接配置SSL证书的Minio服务 - 2

    python连接配置SSL证书的Minio服务1.需求我配置好了ssl证书给Minio服务,如何使用pythonAPI访问呢?很多同学使用以下代码连接时会报错的importminioMINIO_CONF={'endpoint':'10.0.0.2:9000','access_key':'gdzs','secret_key':'gdzs','secure':True}client=minio.Minio(**MINIO_CONF)------------------报错信息:urllib3.exceptions.MaxRetryError:HTTPSConnectionPool(host='10

  2. Helm部署minio\nginx\mongodb\elasticsearch - 2

    minioappVersion:2022-06-25chartVersion:11.7.7一、独立模式auth:auth:rootPassword:"12345678rtt"#密码长度需>=8位rootUser:"root"mode:standalone#默认为单机模式persistence:storageClass:minio-data#存储类,必填size:8Giservice:type:NodePort#暴露端口port:9000nodePort:31311二、分布式模式auth:auth:rootPassword:"12345678rtt"#密码长度需>=8位rootUser:"roo

  3. go - 如何在 Minio SDK 中设置 Content-MD5 header 以上传到 IBM Cloud Object Storage? - 2

    当我使用MinioGolangSDK将文件上传到S3时,我试图设置Content-MD5header。我可以在不设置Content-MD5的情况下成功将文件上传到AWS,但上传到IBMCloudObjectStorage失败并出现以下错误:ERR:Objectwritefailed,reason:Missingrequiredheaderforthisrequest:Content-MD5根据MinioSDK,https://docs.minio.io/docs/golang-client-api-reference#FPutObject我使用minio.PutObjectOption

  4. go - 如何使用 minio-go api 从 s3 存储桶中获取按最后修改时间戳排序的对象列表? - 2

    我浏览了minio-go-api.的文档但是没有得到任何解决方案,因为对象是根据字母顺序排序的。一种hack方式,将首先读取所有对象,然后从每个对象中获取最后修改日期并形成新列表,这对于生产根本不可行 最佳答案 @SiddhantaRath,处理此问题的一种方法是使用mc工具。命令mcfind--newer和mcfind--older将处理此问题。但在内部,它会执行listObjects并为您进行排序。另一种方法是订阅通知并确保数据库中有一个已上传对象的列表。 关于go-如何使用mini

  5. elasticsearch7.17 与minio集成,并快照备份与恢复 - 2

    elasticsearch7.6以支持一、monio1、部暑miniomkdir-p/data/minio/{data,config}cat>/data/minio/start.sh'EOF'dockerrun-d\-p9000:9000\-p9001:9001\--nameminio\--restart=always\-e"MINIO_ROOT_USER=admin"\-e"MINIO_ROOT_PASSWORD=admin123456"\-e"MINIO_PROMETHEUS_AUTH_TYPE=public"\-v/data/minio/data:/data/minio/data\-v/

  6. 多集群thanos sidecar+MinIO监控告警实践 - 2

    环境简介项目环境为保障业务高可用,业务使用了多个网络运营商的机房线路,每个机房均部署一套k8s环境,故而有多个k8s集群,每个k8s集群环境上运行的服务基本一致。原来监控体系存在以下问题:配置管理混乱先前使用Prometheus-operator部署管理监控告警,但是每个集群存在个别差异,导致每次调整告警时需要逐个修改集群配置,创建ServiceMonitor对象,才能完成Prometheus监控项添加。操作较为繁琐,没有统一管理。无法统一查询每个集群部署一套Prometheus,当需要查询数据时,只能在特定集群的Prometheus上查询数据。或者在grafana创建多个Prometheus

  7. 初识MINIO及springboot整合minio - 2

    一、minio简介minio是一款高性能、分布式的对象存储系统。minio一开始就是针对性能要求更高的私有云标准进行软件架构设计的,所以它采用了更易用的方式进行设计,它实现对象存储所需要的全部功能,在性能上也更加强劲,更易用、高效。二、特性1.高性能MinIO是全球领先的对象存储先锋,目前在全世界有数百万的用户.在标准硬件上,读/写速度上高达183GB/秒和171GB/秒。对象存储可以充当主存储层,以处理Spark、Presto、TensorFlow、H2O.ai等各种复杂工作负载以及成为HadoopHDFS的替代品。MinIO用作云原生应用程序的主要存储,与传统对象存储相比,云原生应用程序需

  8. minio分片上传 - 2

    oss文件服务一、前言​Minio是一个对象存储服务OSS(ObjectStorageService)。是⼀种海量、安全、低成本、⾼可靠的云存储服务。本身的应用的并不复杂。但是Minio的APi在对于大于5m的文件,自动采用了分片上传,它的分片上传我们无法得知上传的分片后的序号,也就是说,没上传一个分片,我们都需要自己去记录已上传分片的序号。这将导致一个文件一个文件分片5个,那么同样还需要调用5次后端接口去记录这5个分片的信息。这个无疑大大浪费了性能,且无法做到并发上传。​因此基于Minio的javaAPI,我们采用另一种方案去替代。二、初步流程:前端服务进行大文件分片处理,将分片信息传递给文

  9. Minio基本使用(Java) - 2

    1Minio简介MinIO是一个基于ApacheLicensev2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口,非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小,从几kb到最大5T不等。官方地址https://min.io/1.1支持非结构化的数据存储1.2分布式部署分布式Minio可以让你将多块硬盘(甚至在不同的机器上)组成一个对象存储服务。由于硬盘分布在不同的节点上,分布式Minio避免了单点故障。在大数据领域,通常的设计理念都是无中心和分布式。Minio分布式模式可以帮助你搭建一个高可用的对象存储服务,

  10. MinIO未授权SSRF漏洞复现(CVE-2021-21287) - 2

    1、漏洞简介MinIO是一款基于Go语言发开的高性能、分布式的对象存储系统。客户端支持Java,Net,Python,Javacript,Golang语言。由于MinIO组件中LoginSTS接口设计不当,导致存在服务器端请求伪造漏洞。攻击者可以通过构造URL来发起服务器端请求伪造攻击成功利用此漏洞的攻击者能够通过利用服务器上的功能来读取、更新内部资源或执行任意命令。2、影响版本MinIO3、漏洞分析MinIO组件中LoginSTS接口其实是AWSSTS登录接口的一个代理,用于将发送到JsonRPC的请求转变成STS的方式转发给本地的9000端口。由于逻辑设计不当,MinIO会将用户发送的HT

随机推荐