FastDFS收藏起来,现在开始用Minio吧

一、Minio介绍

MinIO是全球领先的对象存储先锋,目前在全世界有数百万的用户。

高性能 ,在标准硬件上,读/写速度上高达183GB/秒和171GB/秒,拥有更高的吞吐量和更低的延迟

可扩展性 ,为对象存储带来了简单的缩放模型,通过添加更多集群可以扩展空间

简单 ,极简主义是MinIO的指导性设计原则,即可在几分钟内安装和配置

与Amazon S3兼容 ,亚马逊云的 S3 API(接口协议)是在全球范围内达到共识的对象存储的协议,是全世界内大家都认可的标准

数据安全 ,使用纠删码来保护数据免受硬件故障和无声数据损坏

纠删码

  纠删码是一种恢复丢失和损坏数据的数学算法, Minio默认采用 Reed-Solomon code将数据拆分成N/2个数据块和N/2个奇偶校验块。这就意味着如果是16块盘,一个对象会被分成8个数据块、8个奇偶校验块,你可以丢失任意8块盘(不管其是存放的数据块还是校验块),你仍可以从剩下的盘中的数据进行恢复。

http://docs.minio.org.cn/docs/master/java-client-quickstart-guide

Minio和FastDFS的对比

安装难度

文档

性能

容器化支持

SDK支持

二、Minio安装

  为了快速搞定Minio的部署工作。我们通过Docker-Compose来一键快速部署操作

1.安装DockerCompose

  安装DockerCompose的前提是先安装一个Docker环境,如果还没安装的参考波哥的博客地址:https://blog.csdn.net/qq_38526573/category_9619681.html

  Compose 是用于定义和运行多容器 Docker 应用程序的工具。通过 Compose,您可以使用 YML 文件来配置应用程序需要的所有服务。然后,使用一个命令,就可以从 YML 文件配置中创建并启动所有服务。

一键启动所有的服务

DockerCompose的使用步骤

创建对应的DockerFile文件

创建yml文件,在yml文件中编排我们的服务

通过 docker-compose up命令 一键运行我们的容器

官网地址:https://docs.docker.com/compose

下载地址:

curl -Lhttps://get.daocloud.io/docker/compose/releases/download/1.25.0/docker-compose-`uname -s`-`uname -m`>/usr/local/bin/docker-compose

修改文件夹权限

chmod+x/usr/local/bin/docker-compose

建立软连接

ln -s /usr/local/bin/docker-compose /usr/bin/docker-compose

检查是否安装成功

docker-compose--version

2.安装Minio集群

官方推荐 docker-compose.yaml:

稍加修改,内容如下:

version: '3.7'# 所有容器通用的设置和配置x-minio-common:&minio-commonimage:minio/miniocommand:server--console-address":9001"http://minio{1...4}/dataexpose:-"9000"# environment:# MINIO_ROOT_USER: minioadmin# MINIO_ROOT_PASSWORD: minioadminhealthcheck:test:["CMD","curl","-f","http://localhost:9000/minio/health/live"]interval:30stimeout:20sretries:3# 启动4个docker容器运行minio服务器实例# 使用nginx反向代理9000端口,负载均衡, 你可以通过9001、9002、9003、9004端口访问它们的web consoleservices:minio1:<<:*minio-commonhostname:minio1ports:-"9001:9001"volumes:-./data/data1:/dataminio2:<<:*minio-commonhostname:minio2ports:-"9002:9001"volumes:-./data/data2:/dataminio3:<<:*minio-commonhostname:minio3ports:-"9003:9001"volumes:-./data/data3:/dataminio4:<<:*minio-commonhostname:minio4ports:-"9004:9001"volumes:-./data/data4:/datanginx:image:nginx:1.19.2-alpinehostname:nginxvolumes:-./config/nginx.conf:/etc/nginx/nginx.conf:roports:-"9000:9000"depends_on:-minio1-minio2-minio3-minio4

接着新建文件夹 config,新建配置 nginx.conf

usernginx;worker_processesauto;error_log/var/log/nginx/error.logwarn;pid/var/run/nginx.pid;events{worker_connections4096;}http{include/etc/nginx/mime.types;default_typeapplication/octet-stream;log_formatmain'$remote_addr-$remote_user[$time_local] "$request" ''$status$body_bytes_sent"$http_referer" ''"$http_user_agent" "$http_x_forwarded_for"';access_log/var/log/nginx/access.log  main;sendfileon;keepalive_timeout65;# include /etc/nginx/conf.d/*.conf;upstreamminio {serverminio1:9000;serverminio2:9000;serverminio3:9000;serverminio4:9000;    }server{listen9000;listen[::]:9000;server_namelocalhost;# To allow special characters in headersignore_invalid_headersoff;# Allow any size file to be uploaded.# Set to a value such as 1000m; to restrict file size to a specific valueclient_max_body_size0;# To disable bufferingproxy_bufferingoff;location/ {proxy_set_headerHost$http_host;proxy_set_headerX-Real-IP$remote_addr;proxy_set_headerX-Forwarded-For$proxy_add_x_forwarded_for;proxy_set_headerX-Forwarded-Proto$scheme;proxy_connect_timeout300;# Default is HTTP/1, keepalive is only enabled in HTTP/1.1proxy_http_version1.1;proxy_set_headerConnection"";chunked_transfer_encodingoff;proxy_passhttp://minio;        }    }}

然后执行对应的命令

docker-compose up -d


image.png

访问控制台:http://192.168.56.100:9000


image.png

账号密码为:minioadmin


image.png

三、Minio客户端

  然后我们可以创建一个Java项目来操作文件上传下载操作。

1.Bucket

  Bucket是桶的意思。我们创建一个Bucket


image.png


image.png

我们还可以直接上传图片文件等


image.png


image.png

2.用户管理

  针对客户端的操作,我们需要维护相关的账号来管理。


image.png

直接点击创建相关的用户即可


image.png

用户创建完成后我们就可以通过客户端工具来操作了。

3. Java项目

  然后我们来看看如何在Java项目中来操作了。

首先添加必要的依赖

io.miniominio7.0.2<!-- https://mvnrepository.com/artifact/commons-io/commons-io -->commons-iocommons-io2.8.0

然后通过相关的API操作即可

privateStringendpoint ="http://192.168.56.100:9000";privateStringaccessKey ="dpb";privateStringsecretKey ="12345678";@TestvoidcontextLoads() throws Exception{// 1.使用MinIo服务的URL,端口 账号和密码 创建一个 MinIoClient对象MinioClient minioClient =newMinioClient(endpoint, accessKey, secretKey);booleanisExists = minioClient.bucketExists("test");if(isExists){            System.out.println("已经存在了 test 这个 Bucket");        }else{            minioClient.makeBucket("test");        }// 存储文件到 存储桶中minioClient.putObject("test","/group1/UserMapper.xml","d:/UserMapper.xml",null);        System.out.println("文件上传成功...");// 下载文件InputStreamin= minioClient.getObject("test","/group1/UserMapper.xml");        List strings = IOUtils.readLines(in,"UTF-8");        strings.stream().forEach(s -> System.out.println(s));    }

执行后成功:


image.png


image.png

搞定

4.获取图片地址

  如果上传的是普通文件我们可以获取对应的字节流来操作,但是如果我们需要获取的是图片。只要访问就可以了,这时我们可以通过对应的API来获取图片的URL地址就可以了


image.png

但是在访问的时候缺提示访问不了


image.png

原因是我们需要设置下Bucket的策略


image.png


image.png

访问就可以了


©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,772评论 6 477
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,458评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,610评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,640评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,657评论 5 365
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,590评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,962评论 3 395
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,631评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,870评论 1 297
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,611评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,704评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,386评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,969评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,944评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,179评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,742评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,440评论 2 342

推荐阅读更多精彩内容