在服务器下载minio上的文件

[Valdanitooooo]

ChatCPT:

Minio 是一个开源的对象存储服务器，它兼容 Amazon S3 服务的 API。它允许您在自己的基础设施上构建和部署分布式存储服务，类似于 Amazon S3，但具有更简单的部署和管理方式。

Minio 设计用于在私有云环境中存储大规模的非结构化数据，例如图像、视频、日志文件等。它提供了高可用性、高性能和可扩展性，可以轻松地适应不断增长的存储需求。

下面是一些 Minio 的关键特性：

1. 对象存储：Minio 以对象的形式存储数据，每个对象都包含数据、元数据和唯一的键（Key）。

2. 分布式架构：Minio 可以在多个服务器上进行部署，构建一个分布式存储集群。数据会在集群中自动复制和分片存储，以提供高可用性和数据冗余。

3. 高可用性：Minio 提供了故障转移和数据复制的机制，以确保数据的持久性和高可用性。即使其中一台服务器发生故障，数据仍然可用。

4. 可扩展性：您可以根据需要轻松地扩展 Minio 集群的规模，无需停机或中断服务。

5. 安全性：Minio 支持数据的加密和身份验证机制，确保数据的机密性和完整性。

6. 兼容性：Minio 使用 Amazon S3 的 API，这意味着您可以使用现有的 S3 客户端和应用程序与 Minio 进行交互，而无需修改代码。

7. 自我修复：Minio 可以自动检测和修复损坏或丢失的数据块，以确保数据的一致性和可靠性。

Minio 是一个非常受欢迎的开源项目，广泛用于构建私有云存储、备份和归档解决方案。它提供了简单易用的界面和丰富的功能，使用户能够轻松地管理和访问大规模的数据。无论是个人用户还是企业，都可以使用 Minio 来构建高性能的存储基础设施。

安装minio client

之前已经部署过minio了，在服务器只需要装个客户端工具就可以了，因为兼容s3，所以支持minio的客户端很多，这里我选择的 https://github.com/minio/mc

1. 下载mc二进制文件： https://dl.min.io/client/mc/release/linux-amd64/mc
2. sudo mv /usr/local/bin/
3. sudo chmod +x /usr/local/bin/mc

使用minio client

#配置minio服务

mc config  --insecure host add minio1(起个名字) minio地址 用户名 密码
Added `minio1` successfully.
#查看根目录
mc ls minio1

# 找到要下载的文件
mc ls ****/****
# 后台下载文件到当前目录
nohup mc cp ****/****/*** . &

之前传过52GB的世界地图，还是容易失败的，最好存的时候就分割一下

nohup tar -czf - osm-2017-07-03-v3.6.1-planet.mbtiles | split -b 1024m -d - osm_word.tar.gz &

参考资料

• https://min.io/docs/minio/linux/reference/minio-mc.html

[Valdanitooooo]

使用 aws-cli 连接和操作minio

参考文档 https://min.io/docs/minio/linux/integrations/aws-cli-with-minio.html

安装aws-cli

pip3 install awscli

配置

第一步:
➜ aws configure
AWS Access Key ID [None]: ******
AWS Secret Access Key [None]: **********
Default region name [None]: cn-northwest-1
Default output format [None]:

第二步
➜ aws configure set default.s3.signature_version s3v4

region name在China里有两个可选, 参考 https://docs.aws.amazon.com/general/latest/gr/rande.html

使用

查询

aws --endpoint-url http://**minio_adress** s3 ls

查到的结果没有问题

为方便使用, 可以设置alias
在 ~/.zshrc中追加alias minio="aws --endpoint-url http://**minio_adress** s3"

source ~/.zshrc
minio ls

得到同样结果

创建目录

mb命令只能创建顶级目录

aws --endpoint-url https://**minio_adress** s3 mb s3://mybucket
make_bucket: s3://mybucket/

要创建子目录，需要不同的命令，这个minio的文档里没提，参考Create Sub folder in S3 Bucket?

aws --endpoint-url **minio_adress** s3api put-object --bucket root-bucket-name --key current-sub-dir/new-sub-dir-name/