簡介
Ceph是一個統(tǒng)一的分布式存儲系統(tǒng),設(shè)計初衷是提供較好的性能、可靠性和可擴展性。
Ceph項目最早起源于Sage就讀博士期間的工作(最早的成果于2004年發(fā)表),并隨后貢獻(xiàn)給開源社區(qū)。在經(jīng)過了數(shù)年的發(fā)展之后,目前已得到眾多云計算廠商的支持并被廣泛應(yīng)用。RedHat及OpenStack都可與Ceph整合以支持虛擬機鏡像的后端存儲。
Ceph能夠在一個統(tǒng)一的系統(tǒng)中提供對象,塊和文件存儲。
Ceph特點
1. 高性能
2. 高可用性
3. 高可擴展性
去中心化。
擴展靈活。
隨著節(jié)點增加而線性增長。
4. 特性豐富
Ceph安裝部署
1. 操作系統(tǒng)配置
1)每臺節(jié)點都需要修改主機名
本例三臺主機分別為ceph01、ceph02、ceph03.
hostnamectl set-hostname ceph01
hostnamectl set-hostname ceph02
hostnamectl set-hostname ceph03
每臺/etc/hosts新增如下內(nèi)容
133.xxx.xxx.108 ceph01
133.xxx.xxx.109 ceph02
133.xxx.xxx.110 ceph03
2)每臺安裝ntp服務(wù) 時鐘服務(wù),并同步時鐘
yum install ntp –y
vi /etc/ntp.conf
3)每臺配置ssh 免密登陸認(rèn)證
ssh-keygen -t rsa
ssh-copy-id ceph01
ssh-copy-id ceph02
ssh-copy-id ceph03
4)每個節(jié)點添加 6塊個900G的硬盤
2. ceph安裝
ceph.repo
[ceph]
name=ceph
baseurl=http://mirrors.aliyun.com/ceph/rpm-nautilus/el7/x86_64/
gpgcheck=0
priority =1
[ceph-noarch]
name=cephnoarch
baseurl=http://mirrors.aliyun.com/ceph/rpm-nautilus/el7/noarch/
gpgcheck=0
priority =1
[ceph-source]
name=Ceph source packages
baseurl=http://mirrors.aliyun.com/ceph/rpm-nautilus/el7/SRPMS
gpgcheck=0
priority=1
epel.repo
[epel]
name=Extra Packages for Enterprise Linux 7 - $basearch
baseurl=http://mirrors.aliyun.com/epel/7/$basearch
failovermethod=priority
enabled=1
gpgcheck=0
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-EPEL-7
[epel-debuginfo]
name=Extra Packages for Enterprise Linux 7 - $basearch - Debug
baseurl=http://mirrors.aliyun.com/epel/7/$basearch/debug
failovermethod=priority
enabled=0
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-EPEL-7
gpgcheck=0
[epel-source]
name=Extra Packages for Enterprise Linux 7 - $basearch - Source
baseurl=http://mirrors.aliyun.com/epel/7/SRPMS
failovermethod=priority
enabled=0
gpgkey=file:///etc/pki/rpm-gpg/RPM-GPG-KEY-EPEL-7
gpgcheck=0
【備注:ceph可以在每個節(jié)點分別執(zhí)行yum install ceph*進(jìn)行安裝,也可以方便的使用ceph-deploy安裝工具進(jìn)行安裝,本例采用方法2】.
[root@ceph03 ~]# yum install -y ceph-deploy
3)使用安裝工具安裝ceph組件
[root@ceph03 ~]# ceph-deploy new ceph01 ceph02 ceph03
4) 部署完成后,編輯/etc/ceph/ceph.conf新增主機節(jié)點等配置
[global]
fsid = 5b0ce654-4e7a-4f90-8058-d281781878dd
mon_initial_members = ceph03,ceph02,ceph01
mon_host = 133.xxx.xxx.110,133.xxx.xxx.109,133.xxx.xxx.108
auth_cluster_required = cephx
auth_service_required = cephx
auth_client_required = cephx
osd pool default size = 3
5)配置初始 monitor(s)、并收集所有密鑰
[root@ceph03 ~]# ceph-deploy mon create-initial
把配置信息拷貝到各節(jié)點
[root@ceph03 ~]# ceph-deploy admin ceph01 ceph02 ceph03
6) 配置 osd
分別對每個節(jié)點對每個盤進(jìn)行osd配置初始化
for dev in /dev/sdb /dev/sdc /dev/sdd /dev/sde /dev/sdf /dev/sdg
do
ceph-deploy disk zap ceph01 $dev
ceph-deploy osd create ceph01 --data $dev
ceph-deploy disk zap ceph02 $dev
ceph-deploy osd create ceph02 --data $dev
ceph-deploy disk zap ceph03 $dev
ceph-deploy osd create ceph03 --data $dev
done
7)創(chuàng)建兩個mgr管理節(jié)點做主備,新版無管理節(jié)點狀態(tài)會是warn
ceph-deploy mgr create ceph03 ceph01
8)安裝完成
使用ceph –s命令可查看安裝后的集群狀態(tài)
ceph的使用分為對象存儲、塊存儲和cephfs文件系統(tǒng),本例使用cephfs為例演示ceph的簡單使用
1)安裝mds
本例在ceph02節(jié)點安裝mds服務(wù)
ceph-deploy mds create ceph02
2)創(chuàng)建pool
分別創(chuàng)建cephfs文件系統(tǒng)使用的數(shù)據(jù)池和元數(shù)據(jù)池
ceph osd pool create cephfs_data 512
ceph osd pool create cephfs_metadata 512
3) 使用創(chuàng)建的pool創(chuàng)建fs
ceph fs new cephfs cephfs_metadata cephfs_data
4)mount掛載文件系統(tǒng)
創(chuàng)建完成后,就可以在任意節(jié)點或客戶端(linux7系統(tǒng)以上)使用mount命令來使用此cephfs了。命令如下:
mount -t ceph 133.xxx.xxx.108:6789,133.xxx.xxx.109:6789,133.xxx.xxx.110:6789:/ /cephfs -o name=admin,secret=AQCQp8Rf8*******A2pyAHS1fxAdq0zQ==
【備注】:
-t ceph表示使用的文件系統(tǒng)類型為ceph
IP:port為cephfs節(jié)點的IP和使用的端口,默認(rèn)為6789
/cephfs為在客戶端創(chuàng)建的目錄,用來掛載cephfs
-o name=admin 表示用的admin用戶進(jìn)行掛載
secret=*** 表示的為admin的秘鑰
5) 使用測試
掛載后,就能在客戶端機器df –h看到目錄了
然后可以進(jìn)入/cephfs目錄,寫入文件了進(jìn)行使用了。
更多精彩干貨分享
點擊下方名片關(guān)注
IT那活兒
文章版權(quán)歸作者所有,未經(jīng)允許請勿轉(zhuǎn)載,若此文章存在違規(guī)行為,您可以聯(lián)系管理員刪除。
轉(zhuǎn)載請注明本文地址:http://www.ezyhdfw.cn/yun/129756.html
摘要:層確保數(shù)據(jù)一致性和可靠性。元數(shù)據(jù)服務(wù)器,跟蹤文件層次結(jié)構(gòu)并存儲只供使用的元數(shù)據(jù)。這些文件系統(tǒng)擴展屬性能夠為守護(hù)進(jìn)程提供內(nèi)部對象的狀態(tài)快照元數(shù)據(jù)和等信息這有助于數(shù)據(jù)管理。啟迪云-高級開發(fā)工程師 ?侯玉彬前言前文回顧:《開源社區(qū)的明星項目—Ceph談》上一次簡單的介紹Ceph的過去和未來的發(fā)展。這一節(jié)將詳細(xì)介紹Ceph的構(gòu)件以及組件。Ceph存儲架構(gòu)Ceph 存儲集群由幾個不同的daemon組成...
摘要:層確保數(shù)據(jù)一致性和可靠性。保證集群的相關(guān)組件在同一時刻能夠達(dá)成一致,相當(dāng)于集群的領(lǐng)導(dǎo)層,負(fù)責(zé)收集更新和發(fā)布集群信息。元數(shù)據(jù)服務(wù)器,跟蹤文件層次結(jié)構(gòu)并存儲只供使用的元數(shù)據(jù)。啟迪云-高級開發(fā)工程師 ?侯玉彬前言上一次簡單的介紹Ceph的過去和未來的發(fā)展。這一節(jié)將詳細(xì)介紹Ceph的構(gòu)件以及組件。Ceph存儲架構(gòu)Ceph 存儲集群由幾個不同的daemon組成,每個daemon負(fù)責(zé)Ceph 的一個獨特...
摘要:第一次接觸集群,感謝官方的指導(dǎo)文檔和許多網(wǎng)友提供的教程,糊糊涂涂算是把集群部署起來了。應(yīng)該為每個運行的機器添加一個,否則集群處于狀態(tài)。至此的集群搭建算是完成了,下一步會進(jìn)行塊設(shè)備的搭建。參考分布式存儲部署手冊如何在中安裝存儲集群部署版 第一次接觸ceph集群,感謝官方的指導(dǎo)文檔和許多網(wǎng)友提供的教程,糊糊涂涂算是把集群部署起來了。由于Luminous12.2剛發(fā)布不久,部署起來跟舊版本還...
摘要:參考官方文檔進(jìn)行操作本文假設(shè)環(huán)境正常運行,并且已經(jīng)安裝。只能以單副本運行部署運行命令來安裝等待一段時間執(zhí)行完成后,通過如下命令確定集群是否成功運行檢查的狀態(tài)檢查集群狀態(tài)至此,集群部署完成。 參考 ceph 官方文檔進(jìn)行操作: http://docs.ceph.com/docs/mas... 本文假設(shè)kubernetes 環(huán)境正常運行,并且 host 已經(jīng)安裝 helm client。 ...
摘要:充當(dāng)在的業(yè)務(wù)流程層,將和流程部署為副本集。來自的文件將存儲軟件轉(zhuǎn)變?yōu)樽晕夜芾碜晕覕U展和自我修復(fù)的存儲服務(wù)。由于請求使用文件系統(tǒng)格式化的卷,因此我需要在所有節(jié)點上安裝工具。如果沒有指定特定的存儲類,我安裝的任何應(yīng)用程序都將使用進(jìn)行數(shù)據(jù)存儲。 作者:Earl C. Ruby III showImg(https://segmentfault.com/img/bVbljHL?w=300&h=1...
摘要:充當(dāng)在的業(yè)務(wù)流程層,將和流程部署為副本集。來自的文件將存儲軟件轉(zhuǎn)變?yōu)樽晕夜芾碜晕覕U展和自我修復(fù)的存儲服務(wù)。由于請求使用文件系統(tǒng)格式化的卷,因此我需要在所有節(jié)點上安裝工具。如果沒有指定特定的存儲類,我安裝的任何應(yīng)用程序都將使用進(jìn)行數(shù)據(jù)存儲。 作者:Earl C. Ruby III showImg(https://segmentfault.com/img/bVbljHL?w=300&h=1...
閱讀 1459·2023-01-11 13:20
閱讀 1811·2023-01-11 13:20
閱讀 1262·2023-01-11 13:20
閱讀 2004·2023-01-11 13:20
閱讀 4225·2023-01-11 13:20
閱讀 2878·2023-01-11 13:20
閱讀 1485·2023-01-11 13:20
閱讀 3805·2023-01-11 13:20