乐趣区

关于express:FastDFS收藏起来现在开始用Minio吧

一、Minio 介绍
MinIO 是寰球当先的对象存储先锋,目前在全世界有数百万的用户。

高性能,在规范硬件上,读 / 写速度上高达 183GB/ 秒和 171GB/ 秒,领有更高的吞吐量和更低的提早
可扩展性,为对象存储带来了简略的缩放模型,通过增加更多集群能够扩大空间
简略,极简主义是 MinIO 的指导性设计准则,即可在几分钟内装置和配置
与 Amazon S3 兼容,亚马逊云的 S3 API(接口协议)是在寰球范畴内达到共识的对象存储的协定,是全世界内大家都认可的规范
数据安全,应用纠删码来爱护数据免受硬件故障和无声数据损坏

纠删码
纠删码是一种复原失落和损坏数据的数学算法,Minio 默认采纳 Reed-Solomon code 将数据拆分成 N / 2 个数据块和 N / 2 个奇偶校验块。这就意味着如果是 16 块盘,一个对象会被分成 8 个数据块、8 个奇偶校验块,你能够失落任意 8 块盘(不论其是寄存的数据块还是校验块),你仍能够从剩下的盘中的数据进行复原。
docs.minio.org.cn/docs/master…
Minio 和 FastDFS 的比照

装置难度
文档
性能
容器化反对
SDK 反对

二、Minio 装置
  为了疾速搞定 Minio 的部署工作。咱们通过 Docker-Compose 来一键疾速部署操作
1. 装置 DockerCompose
  装置 DockerCompose 的前提是先装置一个 Docker 环境,如果还没装置的参考波哥的博客地址:blog.csdn.net/qq_38526573…
  Compose 是用于定义和运行多容器 Docker 应用程序的工具。通过 Compose,您能够应用 YML 文件来配置应用程序须要的所有服务。而后,应用一个命令,就能够从 YML 文件配置中创立并启动所有服务。

一键启动所有的服务

DockerCompose 的应用步骤

创立对应的 DockerFile 文件
创立 yml 文件,在 yml 文件中编排咱们的服务
通过 docker-compose up 命令 一键运行咱们的容器

官网地址:docs.docker.com/compose
下载地址:
curl -L https://get.daocloud.io/docker/compose/releases/download/1.25…uname -suname -m > /usr/local/bin/docker-compose
复制代码
批改文件夹权限
chmod +x /usr/local/bin/docker-compose
复制代码
建设软连贯
ln -s /usr/local/bin/docker-compose /usr/bin/docker-compose
复制代码
查看是否装置胜利
docker-compose –version
复制代码
2. 装置 Minio 集群
官网举荐 docker-compose.yaml:
稍加批改,内容如下:
version: ‘3.7’

所有容器通用的设置和配置

x-minio-common: &minio-common
image: minio/minio
command: server –console-address “:9001” http://minio{1…4}/data
expose:

- "9000"

# environment:

# MINIO_ROOT_USER: minioadmin
# MINIO_ROOT_PASSWORD: minioadmin

healthcheck:

test: ["CMD", "curl", "-f", "http://localhost:9000/minio/health/live"]
interval: 30s
timeout: 20s
retries: 3

启动 4 个 docker 容器运行 minio 服务器实例

应用 nginx 反向代理 9000 端口,负载平衡, 你能够通过 9001、9002、9003、9004 端口拜访它们的 web console

services:
minio1:

<<: *minio-common
hostname: minio1
ports:
  - "9001:9001"
volumes:
  - ./data/data1:/data

minio2:

<<: *minio-common
hostname: minio2
ports:
  - "9002:9001"
volumes:
  - ./data/data2:/data

minio3:

<<: *minio-common
hostname: minio3
ports:
  - "9003:9001"
volumes:
  - ./data/data3:/data

minio4:

<<: *minio-common
hostname: minio4
ports:
  - "9004:9001"
volumes:
  - ./data/data4:/data

nginx:

image: nginx:1.19.2-alpine
hostname: nginx
volumes:
  - ./config/nginx.conf:/etc/nginx/nginx.conf:ro
ports:
  - "9000:9000"
depends_on:
  - minio1
  - minio2
  - minio3
  - minio4

复制代码
接着新建文件夹 config,新建配置 nginx.conf
user nginx;
worker_processes auto;

error_log /var/log/nginx/error.log warn;
pid /var/run/nginx.pid;

events {

worker_connections  4096;

}

http {

include       /etc/nginx/mime.types;
default_type  application/octet-stream;

log_format  main  '$remote_addr - $remote_user [$time_local]"$request"''$status $body_bytes_sent "$http_referer" ''"$http_user_agent""$http_x_forwarded_for"';

access_log  /var/log/nginx/access.log  main;
sendfile        on;
keepalive_timeout  65;

# include /etc/nginx/conf.d/*.conf;

upstream minio {
    server minio1:9000;
    server minio2:9000;
    server minio3:9000;
    server minio4:9000;
}

server {
    listen       9000;
    listen  [::]:9000;
    server_name  localhost;

    # To allow special characters in headers
    ignore_invalid_headers off;
    # Allow any size file to be uploaded.
    # Set to a value such as 1000m; to restrict file size to a specific value
    client_max_body_size 0;
    # To disable buffering
    proxy_buffering off;

    location / {
        proxy_set_header Host $http_host;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header X-Forwarded-Proto $scheme;

        proxy_connect_timeout 300;
        # Default is HTTP/1, keepalive is only enabled in HTTP/1.1
        proxy_http_version 1.1;
        proxy_set_header Connection "";
        chunked_transfer_encoding off;

        proxy_pass http://minio;
    }
}

}
复制代码
而后执行对应的命令
docker-compose up -d
复制代码

image.png
拜访控制台:http://192.168.56.100:9000

image.png
账号密码为:minioadmin

image.png
三、Minio 客户端
  而后咱们能够创立一个 Java 我的项目来操作文件上传下载操作。
1.Bucket
  Bucket 是桶的意思。咱们创立一个 Bucket

image.png

image.png
咱们还能够间接上传图片文件等

image.png

image.png
2. 用户治理
  针对客户端的操作,咱们须要保护相干的账号来治理。

image.png
间接点击创立相干的用户即可

image.png
用户创立实现后咱们就能够通过客户端工具来操作了。

  1. Java 我的项目
      而后咱们来看看如何在 Java 我的项目中来操作了。
    首先增加必要的依赖
    <dependency>

         <groupId>io.minio</groupId>
         <artifactId>minio</artifactId>
         <version>7.0.2</version>
     </dependency>
     <!-- https://mvnrepository.com/artifact/commons-io/commons-io -->
     <dependency>
         <groupId>commons-io</groupId>
         <artifactId>commons-io</artifactId>
         <version>2.8.0</version>
     </dependency>

    复制代码
    而后通过相干的 API 操作即可

    private String endpoint = “http://192.168.56.100:9000”;
    private String accessKey = “dpb”;
    private String secretKey = “12345678”;

    @Test
    void contextLoads() throws Exception{

     // 1. 应用 MinIo 服务的 URL,端口 账号和明码 创立一个 MinIoClient 对象
     MinioClient minioClient = new MinioClient(endpoint, accessKey, secretKey);
     boolean isExists = minioClient.bucketExists("test");
     if(isExists){System.out.println("曾经存在了 test 这个 Bucket");
     }else{minioClient.makeBucket("test");
     }
     // 存储文件到 存储桶中
     minioClient.putObject("test","/group1/UserMapper.xml","d:/UserMapper.xml",null);
     System.out.println("文件上传胜利...");
     // 下载文件
     InputStream in = minioClient.getObject("test", "/group1/UserMapper.xml");
     List<String> strings = IOUtils.readLines(in, "UTF-8");
     strings.stream().forEach(s -> System.out.println(s));

    }
    复制代码
    执行后胜利:

image.png

image.png
搞定
4. 获取图片地址
  如果上传的是一般文件咱们能够获取对应的字节流来操作,然而如果咱们须要获取的是图片。只有拜访就能够了,这时咱们能够通过对应的 API 来获取图片的 URL 地址就能够了

image.png
然而在拜访的时候缺提醒拜访不了

image.png
起因是咱们须要设置下 Bucket 的策略

image.png

image.png
拜访就能够了

退出移动版