这篇文章主要介绍“Kubernetes如何共享Ceph存储”的相关知识,小编通过实际案例向大家展示操作过程,操作方法简单快捷,实用性强,希望这篇“Kubernetes如何共享Ceph存储”文章能帮助大家解决问题。

Kubernetes pod 结合Ceph rbd块设备的使用,让Docker 数据存储在Ceph,重启Docker或k8s RC重新调度pod 不会引起数据来回迁移。

工作原理无非就是拿到ceph集群的key作为认证,远程rbdmap映射挂载使用。那么就要启用一个基于key的secret资源,之后k8s pod指定要用的rbd就可以了。

环境测试

我的OS是ubuntu 14.04,一个master,两个minon 节点,一个镜像仓库服务,这样保证了k8s集群跑起来,这个过程就略过了。

1.内核升级

这里的ceph 版本装的是10.2.2,客户端内核过低会引起挂载失败,主要就是minion节点。

#curl-sSLhttps://get.docker.com|sh&&servicedockerrestart#apt-getinstalllinux-image-4.4.0-22-generic&&reboot

2.安装ceph-common,让minion调用rbd

root@minion2:~#apt-getinstallpython-rbdceph-common

3.保存ceph-keyring和配置文件

root@minion2:~#ll/etc/cephtotal20drwxr-xr-x2rootroot4096Jun222016./drwxr-xr-x93rootroot4096Nov1111:18../-rw-------1rootroot63Apr252016ceph.client.admin.keyring-rw-r--r--1rootroot249Jun222016ceph.conf-rw-r--r--1rootroot92Jun142016rbdmap

4.获取ceph keyring 的base64编码字符串

root@minion2:~#cephauthget-keyclient.adminAQAmnRlX2zrqDRAAOiuOs2sIItGhAP6tNDa3Vg==root@minion2:~#root@minion2:~#grepkey/etc/ceph/ceph.client.admin.keyring|awk'{printf"%s",$NF}'AQAmnRlX2zrqDRAAOiuOs2sIItGhAP6tNDa3Vg==root@minion2:~#grepkey/etc/ceph/ceph.client.admin.keyring|awk'{printf"%s",$NF}'|base64QVFBbW5SbFgyenJxRFJBQU9pdU9zMnNJSXRHaEFQNnRORGEzVmc9PQ==

5.创建基于keyring 的secret资源

root@master:~#catceph-secret.yamlapiVersion:v1kind:Secretmetadata:name:ceph-secretdata:key:QVFBbW5SbFgyenJxRFJBQU9pdU9zMnNJSXRHaEFQNnRORGEzVmc9PQo=root@master:~#kubectlcreate-fceph-secret.yamlroot@master:~#kubectlgetsecretNAMETYPEDATAAGEceph-secretOpaque1187ddefault-token-rk17vkubernetes.io/service-account-token3208d

6.编辑一个可用的ReplicationController 让rbdpod跑起来

#kubectlcreate-frbd-rc.yaml

验证结果

这样的我们在pod就跑起来了,可以看到mount挂载信息,也可以进入容器查看

root@minion2:~#dockerps|greprbd4b8fc04501b1nginx"nginx-g'daemonoff"6monthsagoUp6monthsk8s_rbdpod.b1ab9160_rbpod-k3yxn_default_88540575-3847-11e6-a098-0a6a7c3a684c_f8caa4bc3c9c1240b72egcr.io/google_containers/pause:2.0"/pause"6monthsagoUp6monthsk8s_POD.25c801ab_rbdpod-k3yxn_default_88540575-3847-11e6-a098-0a6a7c3a684c_c38f4ce7root@minion2:~#mount|greprbd/dev/rbd0on/var/lib/kubelet/plugins/kubernetes.io/rbd/rbd/data-image-wxqtypeext4(rw)/var/lib/kubelet/plugins/kubernetes.io/rbd/rbd/data-image-wxqon/var/lib/kubelet/pods/88540575-3847-11e6-a098-0a6a7c3a684c/volumes/kubernetes.io~rbd/rbdpdtypenone(rw)

这样k8s完美的结合了Ceph 块设备,它们又能愉悦的在一起玩耍了,至于有没有真感情且看未来。

关于“Kubernetes如何共享Ceph存储”的内容就介绍到这里了,感谢大家的阅读。如果想了解更多行业相关的知识,可以关注亿速云行业资讯频道,小编每天都会为大家更新不同的知识点。