ceph的quincy是ceph的第17个版本，初始发行时间是2022-04-19，本文将通过cephadm工具来搭建quincy的集群。
在以前吴昊的文章中写过octopus版本的搭建教程https://blog.whsir.com/post-6697.html，总体来说quincy版本和octopus区别并不是很大。
cephadm搭建Ceph集群（离线安装quincy版）见：https://blog.whsir.com/post-7167.html
规划
三台Rocky Linux 8.7服务器，4核CPU，4G内存，根磁盘50GB，数据盘一个100GB（磁盘无需初始化操作，fdisk -l中可见即可）
|
1 2 3 |
10.10.10.161 ceph1 10.10.10.162 ceph2 10.10.10.163 ceph3 |
关闭防火墙关闭selinux，如不关闭，则需要自行放行端口
|
1 2 3 4 |
systemctl stop firewalld systemctl disable firewalld setenforce 0 sed -i 's/^SELINUX=.*/SELINUX=disabled/' /etc/selinux/config |
以下1~4步分别在三台节点中执行
1、同步时间
如果你想使用传统的ntpdate同步时间，可参考https://www.wlnmp.com/post-664.html
建议使用新的时间同步方式chrony，此处不做过多说明，时间同步都不会，后面的教程你也搞不定！
2、分别对应修改三台机器hostname
|
1 2 3 |
hostnamectl set-hostname ceph1 hostnamectl set-hostname ceph2 hostnamectl set-hostname ceph3 |
3、在三台机器分别添加配置hosts
|
1 2 3 |
10.10.10.161 ceph1 10.10.10.162 ceph2 10.10.10.163 ceph3 |
4、在三台机器分别安装配置podman
|
1 |
dnf install yum-utils python3 podman |
以下内容仅在ceph1中执行
5、安装cephadm
|
1 |
curl --silent --remote-name --location https://github.com/ceph/ceph/raw/quincy/src/cephadm/cephadm |
或
|
1 |
curl -o cephadm --silent --remote-name --location http://down.whsir.com/downloads/cephadm17 |
6、给予cephadm执行权限
|
1 |
chmod +x cephadm |
7、安装cephadm到当前节点
|
1 2 |
dnf install --assumeyes centos-release-ceph-quincy dnf install --assumeyes cephadm |
8、引导ceph集群
|
1 |
cephadm bootstrap --mon-ip 10.10.10.161 |
9、安装Ceph CLI
方法一：通过交互模式执行ceph等相关命令
|
1 2 3 4 5 |
[root@ceph1 ~]# cephadm shell Inferring fsid 6174cfc0-e3da-11ed-b6bb-52540079c777 Inferring config /var/lib/ceph/6174cfc0-e3da-11ed-b6bb-52540079c777/mon.ceph1/config quay.io/ceph/ceph@sha256:616a304ce397b8a5001d78436f7899d3507bd1d3b8fbc971e4d89c1555a6ed1f [ceph: root@ceph1 /]# exit |
方法二：非交互模式，每次执行ceph命令都通过cephadm shell --前缀来执行，如
|
1 |
cephadm shell -- ceph -v |
方法三（推荐）：安装工具包组，直接可在宿主机执行ceph等相关命令
|
1 |
dnf install ceph-common |
安装完成后，可直接执行ceph等相关命令。
10、查看ceph集群容器所有组件运行状态
|
1 |
ceph orch ps |
确保STATUS状态全部是running
11、拷贝密钥到另外两台主机上
|
1 |
ssh-copy-id -f -i /etc/ceph/ceph.pub root@ceph2 |
|
1 |
ssh-copy-id -f -i /etc/ceph/ceph.pub root@ceph3 |
12、将另外两个主机添加至集群中
|
1 |
ceph orch host add ceph2 10.10.10.162 |
|
1 |
ceph orch host add ceph3 10.10.10.163 |
13、查看主机
|
1 |
ceph orch host ls |
HOST ADDR LABELS STATUS
ceph1 10.10.10.161 _admin
ceph2 10.10.10.162
ceph3 10.10.10.163
3 hosts in cluster
|
1 |
ceph orch ps |
因为是在线安装，由于网络原因可能会在这一部等好久，确保STATUS状态全部是running，再进行下一步。
|
1 |
ceph orch ls |
14、创建OSD
方法一（推荐）：自动添加所有满足条件的OSD
|
1 |
方法一（推荐）：自动添加所有满足条件的OSD |
方法二：手工指定的方式添加OSD
|
1 2 3 |
ceph orch daemon add osd ceph1:/dev/vdb ceph orch daemon add osd ceph2:/dev/vdb ceph orch daemon add osd ceph3:/dev/vdb |
稍等片刻，通过命令检查，Available显示no，表示OSD创建完成
|
1 |
ceph orch device ls |
此时通过仪表盘可看到集群正常
通过命令看下集群状态正常
|
1 |
ceph -s |
至此ceph version 17.2.6 quincy(stable)集群在线版部署完成
原文链接：cephadm搭建Ceph集群（在线安装quincy版），转载请注明来源！
