Swarm系列7--存储介绍

Hello陈然

2018-04-11

与docker一样，在使用swarm服务级别的时候可以定义服务的存储需求，
docker存储介绍参考： Docker之应用数据管理(volume/bind mount/tmpfs)，该文翻译自官网，介绍了三种存储方式。
操作参考：Swarm中使用Volume（挂载目录，mount），该文第6段介绍了使用创建volume的方式挂载卷来使用的操作。
官网关于存储引擎的介绍：About storage drivers.。这是关于宿主机如何存储镜像的问题。
中文翻译：Docker系统八：Docker的存储驱动
关于存储引擎的原理：Docker 使用的 AUFS 文件系统
官网关于存储插件的介绍：Docker volume plugins，介绍在创建volume的时候自定义存储驱动的情况：$ docker volume create --driver=flocker volumename
Flocker：容器的分布式存储平台
- 中文解析：窥探docker中的volume plugin内幕
- docker插件使用：使用插件扩展Docker，文末有可用插件。
- docker插件集合：Use Docker Engine plugins

实际使用中，我们要创建多副本的服务，你在单个节点上创建的bind的目录是不能共享的，增加副本数，在其他机器上部署的时候如果没有相应的bin的目录就会挂载失败。这感觉swarm再service级别的概念引入，没有处理好挂载volume的问题。如下在2节点管理节点下发的任务，在20节点上是报错的，差了半天才知道是挂载volume在20节点上不存在。（这里是bind本地目录的问题）
参考：--mount 和 --volume 有一些差异需要注意：
--mount 可以直接使用卷，而无需事先使用 docker volume create 来创建卷，并且可以多组不同驱动的卷；
--mount 如果 type=bind 的话，宿主必须存在指定目录，否则报错。而 --volume 则在宿主不存在该路径时，在宿主创建一个空目录来进行绑定。
这里可以知道bind的话必须存在对应的目录，mount的话会自动创建卷
参考同样的问题和思考：Swarm 如何存储数据？
存储解决方案：参考：如何安装和配置 Rex-Ray

$ docker plugin install --grant-all-permissions vieux/sshfs

使用参考：vieux/sshfs
3.2 存储插件 GlusterFS plugin
GlusterFS plugin插件是一个基于GlusterFS的存储插件，需要安装glasterFS这个网络分布式存储系统。配合插件GlusterFS plugin来在集群内共享存储。
不过该插件已经不再更新。
3.3 存储插件REX-Ray plugin
Rex-ray是一个分布式存储系统，可以使用Rexray CLI创建存储卷，该卷通过docker volume ls可以看到，驱动是rexray。卷可以挂载在容器集群的任何容器上，创建的服务挂载一个目录，服务实例不管在哪个节点上，都可以通过存储插件Rex-ray plugin挂载到该目录。参考操作视频：https://rexray.io/
需要安装Rex-ray存储服务。且提供文件服务的需要是在线存储。
3.4 存储插件Convoy plugin
是一个基于NFS的存储插件，并非分布式存储。NFS也需要在每个节点都提前挂载好。
参考：Convoy--Docker NFS volume plugin 简明使用指南
rancher/convoy项目一年没更新了。
4. K8s的存储
k8s的存储，参考：https://kubernetes.io/docs/concepts/storage/persistent-volumes/
Kubernetes 支持为数众多的云提供商和网络存储方案。
各种支持的方式不尽相同，例如 GlusterFS 需要创建 Endpoint，Ceph/NFS 之流就没这么麻烦了。