docker搭建minio及java sdk使用过程详解

本站所有内容来自互联网收集,仅供学习和交流,请勿用于商业用途。如有侵权、不妥之处,请第一时间联系我们删除!Q群:迪思分享
免费资源网 – https://freexyz.cn/

目录1minio简洁2 docker搭建minio2.1 单节点2.2 多节点部署3 java sdk使用minio

1minio简洁

MinIO 是一款高性能、分布式的对象存储系统. 它是一款软件产品, 可以100%的运行在标准硬件。即X86等低成本机器也能够很好的运行MinIO。

docker搭建minio及java sdk使用过程详解插图

MinIO与传统的存储和其他的对象存储不同的是:它一开始就针对性能要求更高的私有云标准进行软件架构设计。因为MinIO一开始就只为对象存储而设计。所以他采用了更易用的方式进行设计,它能实现对象存储所需要的全部功能,在性能上也更加强劲,它不会为了更多的业务功能而妥协,失去MinIO的易用性、高效性。 这样的结果所带来的好处是:它能够更简单的实现局有弹性伸缩能力的原生对象存储服务。

docker搭建minio及java sdk使用过程详解插图1

MinIO在传统对象存储用例(例如辅助存储,灾难恢复和归档)方面表现出色。同时,它在机器学习、大数据、私有云、混合云等方面的存储技术上也独树一帜。当然,也不排除数据分析、高性能应用负载、原生云的支持。

minio社区版本开源免费,在没有预算使用oss的时候可以考虑使用。

2 docker搭建minio

minio是支持云原生的,所以直接讲使用docker来搭建,当然也可以使用k8s,直接下载官方的chart使用即可。

docker搭建minio及java sdk使用过程详解插图2

2.1 单节点

单节点可以直接使用docker run启动即可

docker run

-p 9000:9000

-p 9001:9001

minio/minio server /data –console-address “:9001”

也可以使用docker-compose来运行。

编写docker-compose.yaml

version: 3
services:
minio:
image: minio/minio
hostname: “minio”
ports:
– 9000:9000
– 9001:9001
environment:
MINIO_ACCESS_KEY: admin #控制台登录账号
MINIO_SECRET_KEY: 12345678 #控制台登录密码
volumes:
– ./data:/data #存储路径
– ./config:/root/.minio/ #配置文件
command: server –console-address :9001 /data
privileged: true
restart: always

创建挂载的文件目录,运行docker-compos启动。

docker-compser up -d

输入ip:9001 输入admin/12345678进入控制台

docker搭建minio及java sdk使用过程详解插图3

控制台:

docker搭建minio及java sdk使用过程详解插图4

创建bucket,就可以上传文件了。

docker搭建minio及java sdk使用过程详解插图5

输入名称保存。

docker搭建minio及java sdk使用过程详解插图6

可以配置,相关策略,这里就不说明了。

docker搭建minio及java sdk使用过程详解插图7

可以上传下载操对象文件。

docker搭建minio及java sdk使用过程详解插图8

2.2 多节点部署

多节点部署使用docker-compse来模拟。创建4个节点,每个节点挂载两份数据。

编写docker-compose.yaml

version: 3

# starts 4 docker containers running minio server instances.
# using nginx reverse proxy, load balancing, you can access
# it through port 9000.
services:
minio1:
image: minio/minio
hostname: minio1
volumes:
– ./data1-1:/data1
– ./data1-2:/data2
expose:
– “9000”
– “9001”
environment:
MINIO_ROOT_USER: minio
MINIO_ROOT_PASSWORD: minio123
command: server –console-address “:9001” http://minio{1…4}/data{1…2}
healthcheck:
test: [“CMD”, “curl”, “-f”, “http://localhost:9000/minio/health/live”]
interval: 30s
timeout: 20s
retries: 3

minio2:
image: minio/minio
hostname: minio2
volumes:
– ./data2-1:/data1
– ./data2-2:/data2
expose:
– “9000”
– “9001”
environment:
MINIO_ROOT_USER: minio
MINIO_ROOT_PASSWORD: minio123
command: server –console-address “:9001” http://minio{1…4}/data{1…2}
healthcheck:
test: [“CMD”, “curl”, “-f”, “http://localhost:9000/minio/health/live”]
interval: 30s
timeout: 20s
retries: 3

minio3:
image: minio/minio
hostname: minio3
volumes:
– ./data3-1:/data1
– ./data3-2:/data2
expose:
– “9000”
– “9001”
environment:
MINIO_ROOT_USER: minio
MINIO_ROOT_PASSWORD: minio123
command: server –console-address “:9001” http://minio{1…4}/data{1…2}
healthcheck:
test: [“CMD”, “curl”, “-f”, “http://localhost:9000/minio/health/live”]
interval: 30s
timeout: 20s
retries: 3

minio4:
image: minio/minio
hostname: minio4
volumes:
– ./data4-1:/data1
– ./data4-2:/data2
expose:
– “9000”
– “9001”
environment:
MINIO_ROOT_USER: minio
MINIO_ROOT_PASSWORD: minio123
command: server –console-address “:9001” http://minio{1…4}/data{1…2}
healthcheck:
test: [“CMD”, “curl”, “-f”, “http://localhost:9000/minio/health/live”]
interval: 30s
timeout: 20s
retries: 3

nginx:
image: nginx:1.19.2-alpine
hostname: nginx
volumes:
– ./nginx.conf:/etc/nginx/nginx.conf:ro
ports:
– “9000:9000”
– “9001:9001”
depends_on:
– minio1
– minio2
– minio3
– minio4

创建挂载的对应的data目录和nginx目录。

使用nginx负载均衡4个节点,创建nginx.conf。

user nginx;
worker_processes auto;

error_log /var/log/nginx/error.log warn;
pid /var/run/nginx.pid;

events {
worker_connections 4096;
}

http {
include /etc/nginx/mime.types;
default_type application/octet-stream;

log_format main $remote_addr – $remote_user [$time_local] “$request”
$status $body_bytes_sent “$http_referer”
“$http_user_agent” “$http_x_forwarded_for”;

access_log /var/log/nginx/access.log main;
sendfile on;
keepalive_timeout 65;

# include /etc/nginx/conf.d/*.conf;

upstream minio {
server minio1:9000;
server minio2:9000;
server minio3:9000;
server minio4:9000;
}

upstream console {
ip_hash;
server minio1:9001;
server minio2:9001;
server minio3:9001;
server minio4:9001;
}

server {
listen 9000;
listen [::]:9000;
server_name localhost;

# To allow special characters in headers
ignore_invalid_headers off;
# Allow any size file to be uploaded.
# Set to a value such as 1000m; to restrict file size to a specific value
client_max_body_size 0;
# To disable buffering
proxy_buffering off;

location / {
proxy_set_header Host $http_host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;

proxy_connect_timeout 300;
# Default is HTTP/1, keepalive is only enabled in HTTP/1.1
proxy_http_version 1.1;
proxy_set_header Connection “”;
chunked_transfer_encoding off;

proxy_pass http://minio;
}
}

server {
listen 9001;
listen [::]:9001;
server_name localhost;

# To allow special characters in headers
ignore_invalid_headers off;
# Allow any size file to be uploaded.
# Set to a value such as 1000m; to restrict file size to a specific value
client_max_body_size 0;
# To disable buffering
proxy_buffering off;

location / {
proxy_set_header Host $http_host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_set_header X-Forwarded-Proto $scheme;
proxy_set_header X-NginX-Proxy true;

# This is necessary to pass the correct IP to be hashed
real_ip_header X-Real-IP;

proxy_connect_timeout 300;

# To support websocket
proxy_http_version 1.1;
proxy_set_header Upgrade $http_upgrade;
proxy_set_header Connection “upgrade”;

chunked_transfer_encoding off;

proxy_pass http://console;
}
}
}

运行。

docker-compser up -d

然后进入控制台,操作和单节点一样。

3 java sdk使用minio

sdk使用minio要先获取AccessKey和SecretKey。

在控制台生成。

docker搭建minio及java sdk使用过程详解插图9

docker搭建minio及java sdk使用过程详解插图10

docker搭建minio及java sdk使用过程详解插图11

项目pom文件引入。


© 版权声明
THE END
★喜欢这篇文章吗?喜欢的话,麻烦动动手指支持一下!★
点赞11 分享
评论 抢沙发

请登录后发表评论

    暂无评论内容