CentOS7下yum安装Ceph分布式存储教程

简介

Ceph是一种被广泛使用的分布式存储系统，采用了对象存储、块存储、文件系统等多种存储方式。本教程将介绍如何使用CentOS7下yum安装Ceph分布式存储系统。

步骤

1. 安装EPEL仓库

首先，我们需要安装EPEL仓库，以便使用yum命令来安装Ceph：

$ sudo yum install epel-release

1. 安装Ceph

在安装Ceph之前，你需要先安装一些必备的依赖包：

$ sudo yum install -y centos-release-ceph-nautilus \
https://download.ceph.com/rpm-nautilus/el7/noarch/ceph-release-1-1.el7.noarch.rpm

然后，使用以下命令安装Ceph：

$ sudo yum install -y ceph

安装完成后，你可以使用以下命令查看Ceph的版本信息：

$ ceph -v

示例输出：

ceph version 14.2.1 (b0084d71a74416519f6ad2d739aee465e2f9c643) nautilus (stable)

1. 配置Ceph

在配置Ceph之前，你需要了解Ceph的核心组件：Ceph Monitor、Ceph OSD（对象存储守护进程）和Ceph MDS（元数据服务器）。

配置Ceph通常包括以下步骤：

• 创建集群配置文件

  $ sudo mkdir -p /etc/ceph
$ sudo touch /etc/ceph/ceph.conf

• 编辑配置文件

  编辑配置文件/etc/ceph/ceph.conf，具体内容可以参考Ceph官方文档。以下是一个示例配置文件：

  [global]
fsid = 8a2a0f69-5145-4ee4-9acf-acc3d8a41fca
mon_initial_members = node1,node2,node3
mon_host = 192.168.1.100,192.168.1.101,192.168.1.102
auth_cluster_required = cephx
auth_service_required = cephx
auth_client_required = cephx
osd journal size = 1024
filestore merge threshold = 40
bluestore_min_alloc_size_hdd = 4194304
bluestore_min_alloc_size_ssd = 1048576
osd pool default pg num = 128
osd pool default pgp num = 128
osd pool default size = 2
osd pool default min size = 1
osd pool default crush rule = root
rbd_default_features = 1
mds cache size = 100000
mds memory limit = 8192000
mds cache size limit = 20000
osd heartbeat interval = 5
osd heartbeat grace = 10

• 生成mon的keyring

  $ sudo ceph-authtool --create-keyring /etc/ceph/ceph.mon.keyring --gen-key -n mon. --cap mon 'allow *'

• 配置mon的初始状态

  $ sudo monmaptool --create --add node1 192.168.1.100 --add node2 192.168.1.101 --add node3 192.168.1.102 --print /etc/ceph/monmap

• 启动Ceph Monitor

  $ sudo ceph-mon -i node1 --mkfs --monmap /etc/ceph/monmap --keyring /etc/ceph/ceph.mon.keyring
$ sudo systemctl start ceph-mon@node1
$ sudo systemctl enable ceph-mon@node1

• 启动Ceph OSD

  $ sudo ceph-osd -i 0 --mkfs --osd-uuid `uuidgen`
$ sudo systemctl start ceph-osd@0
$ sudo systemctl enable ceph-osd@0

• 启动Ceph MDS

  $ sudo mkdir /var/lib/ceph/mds/mds0
$ sudo ceph-authtool --create-keyring /var/lib/ceph/mds/mds0/keyring --gen-key -n mds. --cap mds 'allow'
$ sudo ceph fs new cephfs metadata=1 data=2
$ sudo ceph fs set cephfs allow_new_snaps true
$ sudo ceph auth add mds0 -i /var/lib/ceph/mds/mds0/keyring mds 'allow' osd 'allow *' mon 'allow rwx'
$ sudo ceph-mds -i mds0

注意，以上步骤仅是Ceph的基础配置，具体配置内容需根据实际情况而定。

1. 验证Ceph

使用以下命令查看Ceph的状态：

$ sudo ceph status

示例输出：

```
cluster:
id: 8a2a0f69-5145-4ee4-9acf-acc3d8a41fca
health: HEALTH_OK

services:
mon: 3 daemons, quorum node1,node2,node3
mgr: node2(active), standbys: node3, node1
osd: 1 osds: 1 up, 1 in

data:
pools: 0 pools, 0 pgs
objects: 0 objects, 0 B
usage: 1.0 GiB used, 99 GiB / 100 GiB avail
pgs:
```

如果输出中health列的值为HEALTH_OK，则表示Ceph已经成功安装和运行。

结论

通过以上步骤，你已经成功安装和配置了Ceph分布式存储系统。你可以继续深入了解Ceph的更多特性和配置，以满足实际的存储需求。