一、K8s节点安装ceph-commonCephFS是Ceph中基于RADOS（可扩展分布式对象存储）构建，通过将文件数据划分为对象并分布到集群中的多个存储节点上来实现高可用性和可扩展性。首先所有k8s节点都需要安装ceph-common工具：yum-yinstallepel-releaseceph-common二、静态供给方

环境3台centos 8机器，每台机器上边3个磁盘机器名：ceph1、ceph2、ceph3ceph-ansible集群部署在ceph1上边准备好ceph-ansiblegitclonehttps://github.com/ceph/ceph-ansible.gitcdceph-ansiblegitcheckoutstable-5.0#centos7用4.0pip3install-rrequirements.txt

cephceph是一个开源的，用c++语言编写的分布式的存储系统，存储文件数据。lvm逻辑卷可以扩容raid磁盘阵列高可用基于物理意义上的存储系统分布式就是多台物理磁盘组成的一个集群，在这个基础之后实现高可用，扩展特点：1、远程访问2、多个服务器组成的虚拟硬盘3、分布式

创建存储池Ceph文件系统至少需要两个RADOS存储池，一个用于存储数据，一个用于存储元数据。cephosdpoolcreatecephfs_datacephosdpoolcreatecephfs_metadata创建文件系统创建池后，可以使用以下命令启用文件系统：fs new$cephfsnewcephfscephfs_metadatacephfs

版本兼容：查看ceph和系统的版本是否兼容节点说明ceph-admin:192.168.83.133ceph节点IPDomainHostnameServices192.168.83.133stor01.kb.cxceph01mon,mgr,mds192.168.83.134stor02.kb.cxceph02mgr,mon,mds192.168.83.135stor03.kb.cxceph03osd,m

在近期我看到过国外一个大牛开发的hpfshttps://mp.csdn.net/mp_blog/creation/editor/139739977（请看我前面发的片文章）我瞬间就想到国内同类似产品juicefscubefs这两个东西，当时这种产品出现我就有一个疑问，为什么要把元数据单独弄个数据库去存呢？你还要开发数据冗余机制去保

目录Ceph提供nfs服务1.前期准备1.1检查模块1.2检查是否有nfs-ganesha集群2.创建nfs服务2.1ceph提供的nfs的架构3.nfs导出3.1创建cephfs3.2导出3.3客户端尝试挂载3.4验证4.高可用nfs-ganeshaCeph提供nfs服务ceph除了可以提供cephfs之外，也是可以支持nfs的，因为如果直接

目录1.RBD1.RBD特性2.创建rbd池并使用2.1创建rbd2.2创建用户2.3下发用户key与ceph.conf2.4客户端查看pool2.5创建rbd块2.6映射rbd并挂载先看一下块设备2.7开机自动映射2.8rbdcreate参数2.9rbd映射基本操作3.块设备操作3.1调整rbd大小3.2复制块设备3.3移动到其他p

创建资源池cephosdpoolcreatecephfs_data128cephosdpoolcreatecephfs_metadata128文件系统需要两个资源池，一个用于存储数据体，一个用于存放索引信息及其他数据相关信息。创建文件系统cephfsnewcephfscephfs_metadatacephfs_data获取admin秘钥cephauthg

部署条件Rookofficiallysupportsv1snapshotsforKubernetesv1.20+.Installthesnapshotcontrollerandsnapshotv1CRDasrequired.Moreinfocanbefoundhere.安装快照控制器和CRD：安装快照CRD：gitclonehttps://github.com/kubernetes-csi/external-snapshotter.git

块存储（RBD）用于K8S、openstack、linux中直接挂载。类似使用iscsi块存储一样。块存储使用案例#1.创建存储池#语法：cephosdpoolcreate<存储池名><PG>[<PGP>][{replicated|erasure}]# PG：指定存储池的pg数量# PGP：指定存储池pgp数量，一般与pg相同。不填写默认就是和PG

前言本次详细部署k8s、ceph以及如何使用ceph作为k8s的外部存储。主机信息主机名IP说明信息k8s-master192.168.199.41k8smasterk8s-node01192.168.199.42nodek8s-node02192.168.199.43nodeceph-node01192.168.199.44ceph-node01-独立磁盘（/d

一、ceph介绍1、ceph起源Ceph项目最早起源于Sage就读博士期间的工作（最早的成果于2004年发表），并随后贡献给开源社区。在经过了数年的发展之后，目前已得到众多云计算厂商的支持并被广泛应用。RedHat及OpenStack都可与Ceph整合以支持虚拟机镜像的后端存储。但是在2014年OpenStack火爆的

1.部署cephfs服务cephFS即cephfilesystem，可以实现文件系统共享功能（POSIX标准），客户端通过ceph协议挂载并使用ceph集群作为数据存储服务器，https://docs.ceph.com/en/latest/cephfs/。cephFS需要运行MetaDataServices（MDS）服务，其守护进程为ceph-mds，ceph-mds进程管理与cephFS上存

本篇文章介绍Ceph如何使用，包括创建/使用：块存储（rbd）、文件存储（cephfs）、对象存储（rgw）前4步详细介绍，请点击链接跳转。实验过程：  1、Ceph架构图  UOS安装部署Ceph集群（一）_[ceph_deploy][error]runtimeerror:bootstrap-osd_小时候很牛、的博客  2、实验环境说明  UOS安装部

本次演示环境如下：hostnameIProlesnode01.srv.world192.168.10.101ObjectStorage;MonitorDaemon;ManagerDaemonnode02.srv.world192.168.10.102ObjectStoragenode03.srv.world192.168.10.103ObjectStoragedlp.srv.world192.168.10.142client1.在dlp节点安装所需的软件包[root@n

CephFS是一个支持POSIX接口的文件系统，它使用Ceph存储集群来存储数据。文件系统对于客户端来说可以方便的挂载到本地使用。CephFS构建在RADOS之上，继承RADOS的容错性和扩展性，支持冗余副本和数据高可靠性。注意:当前，CephFS还缺乏健壮得像‘fsck’这样的检查和修复功能。存储重

一.ceph-nfs1.cephfs1.1配置启动cephfscephnfs基于cephfs，需要先配置cephfscephosdpoolcreatecephfs-metadata1616cephosdpoolcreatecephfs-data3232cephfsnewcephfscephfs-metadatacephfs-datacephorchapplymdscephfs--placement="3storag

CephFS支持通过cephfs-mirror工具将快照异步复制到远程CephFS文件系统。通过镜像快照数据，然后创建与要同步的快照同名的快照（对于远程文件系统上的给定目录）来同步快照。1.要求【主（本地）和辅助（远程）Ceph集群版本应为Pacific或更高版本。】2.创建用户首先为镜像守护程序

CEPH分布式存储搭建本文通过参考臧雪园老师的文档根据实际操作做修改，详细视频链接参考：https://edu.51cto.com/course/15982.html集群配置信息：安装的ceph版本：配置所需源的地址wget-O/etc/yum.repos.d/CentOS-Base.repohttp://mirrors.aliyun.com/repo/Centos-7.re

创建客户端账户  创建账户  创建一个名为lxhfs的普通账户，允许获取ceph状态信息，允许对mds元数据有读写权限，语序对存储池cephfs-datacephfs的存储池有读写和执行权限

 cephfs使用  cephFS即cephfilesystem，可以实现文件系统共享功能(POSIX标准),客户端通过ceph协议挂载并使用ceph集群作为数据存储服务器，https://docs.ceph.c

  ceph对接k8s使用案例  k8s节点安装ceph-common  分别在k8smaster与各node节点安装ceph-common组件包。  下载ceph仓库key文件root@master1:~/yam

本地环境情况角色IP版本k8s-master-1172.16.16.108K8Sv1.24.1,containerd://1.6.8k8s-node-1172.16.16.109K8Sv1.24.1,containerd://1.6.8k8s-no

  创建客户端账户  创建账户  创建一个名为lxhfs的普通账户，允许获取ceph状态信息，允许对mds元数据有读写权限，语序对存储池cephfs-datacephfs的存储池有读写和执行