分布式存储Ceph-octopus版本手动实践部署与运维管理

基础配置 三台环境为centos7.9，以下配置需要在每台机器上执行 配置hosts解析 cat >> /etc/hosts <<EOF 192.168.2.16 node1 192.168.2.19 node2 192.168.2.18 node3 EOF 关闭防火墙和selinux systemctl stop firewalld && systemctl disable firewalld setenforce 0 && sed -i 's/S

一．Ceph组件 OSDs:存储设备 Monitors:集群监控组件 RBD：对象存储网关 MDSs:存放文件系统的元数据.(但对象存储和块存储设备是不需要使用该服务的) Ceph版本镜像：ceph/daemon:latest-octopus版本号： ceph version 15.2.13 (c44bc49e7a57a87d84dfff2a077a2058aa2172e2) octopus (stable) 二．在 3 台服务器进行如下初始化 1.配置 hosts cat &...

CephFS底层是基于RADOS的，具体来说是基于RADOS上的两个存储池，一个用来存储文件，一个用来存储文件的元数据。所以，诸如文件的目录结构等信息都是在元数据存储池里的，因此，如果有SSD，建议把元数据的存储池放在SSD上，一方面加速，另一方面，元数据的体积并不会特别大。通常Ceph需要部署3或5个MON节点，如果后来添加的节点与bootstrap的节点是在一个子网里，那么Ceph会自动将添加的节点部署上MON服务，直至达到5个。可以看到，它启动了两个，其中一个是bootstrap的时候指定的。

当前ceph版本估计只有octopus是最新最稳也是最好用的 Linux系统选择CentOS Stream 8因为他维护到2024年，还是很好用的 准备3台机所有搭建在192.168.10.25这台机完成 192.168.10.25 192.168.10.26 192.168.10.27 静态ip 设置 nmcli con add con-name $NetName ifname $NetName autoconnect yes type ethernet \ ip4 192.168.10.25/24

基础概念 目前Ceph官方提供三种部署Ceph集群的方法，分别是ceph-deploy，cephadm和手动安装 ceph-deploy 一个集群自动化部署工具，使用较久，成熟稳定，被很多自动化工具所集成，可用于生产部署 cephadm 从Octopus开始提供的新集群部署工具，支持通过图形界面或者命令行界面添加节点，目前不建议用于生产环境，有兴趣可以尝试 manual 手动部署，一步步部署Ceph集群，支持较多定制化和了解部署细节，安装难度较大，但可以清晰掌握安装部署的细节 这里我们采用成熟、.

我们相恋的季节，从夏天到冬天，记忆一页页翻阅，你却留下了思念。

Ceph使用C++语言开发，是一个开放、自我修复和自我管理的开源分布式存储系统。具有高扩展性、高性能、高可靠性的优点。Ceph目前已得到众多云计算厂商的支持并被广泛应用。RedHat及OpenStack，Kubernetes都可与Ceph整合以支持虚拟机镜像的后端存储。粗略估计，我国70%—80%的云平台都将Ceph作为底层的存储平台，由此可见Ceph俨然成为了开源云平台的标配。

1 环境介绍与配置 1.1 ceph介绍 #ceph架构 #ceph支持的三种接口： 1 Object：有原生的API，而且也兼容Swift和S3的API。 2 Block：支持精简配置、快照、克隆。 3 File：Posix接口，支持快照。 #ceph的三种类型的优缺点： 1.2 环境介绍 [root@ceph135 ~]# cat /etc/redhat-release CentOS Linux release 7.8.2003 (Core) #ceph Octopus 15.2.3 #网络设计

在学会搭建之前，先要学会卸载 卸载过程： 重命名命令alias ceph='cephadm shell -- ceph' #找到fsid [root@master1 ~]# ceph -s Inferring fsid 008a0d2e-b163-11ec-ba7a-5254004c51c6 Inferring config /var/lib/ceph/008a0d2e-b163-11ec-ba7a-5254004c51c6/mon.master1/config Using recent ceph imag

Centos7.9上利用cephadm安装Ceph Octopus 15.20.亮点1 准备1.1 修改历史记录1.2 升级系统内核1.3 配置免密登录问题1：免密登录失败，检查安全日志1.4升级容器服务1.5 配置时间同步1.6 配置IPSET1.7 配置防火墙2 集群安装2.1 安装cephadm问题2: 提示未安装python3：2.2 集群安装问题3：执行mon相关的docker run一直超时，无法读取ceph.conf问题4：ERROR – 多个fsid无法选择：问题5：安装错误并提示找不到对应

k8s 部署 gitlab,gitlab登录默认密码设置，gitlab登录域名设置，host配置，k8s ingress配置，k8s 中 HostAliases配置 ，gitlab API, gitlab access_token

极狐GitLab 是一个一体化的 DevOps 平台，其提供的一体化 DevOps 能力覆盖软件开发全生命周期（从计划到运维），同时内置安全功能，能够利用开箱即用的安全能力构建 DevSecOps 体系。Kubernetes 是一个非常复杂的容器编排平台，学习成本非常高，KubeSphere 所做的事情就是高度产品化和抽象了底层 Kubernetes，是一个面向云原生的操作系统，解决了 K8s 使用门槛高和云原生生态工具庞杂的痛点。

其中，“14.2.21”是Ceph的版本，而“nautilus”是版本的代号。

Prometheus部署、操作及Grafana展示、告警

1：准备yaml文件、创建 gitlab.yaml、创建外网访问 gitlab-nodeport.yaml、 2: 创建、验证查看pod状态、通过创建的nodePort访问，通过 ``:31467在游览器访问：

KubeSphere 简介 Kubernetes 是一个非常复杂的容器编排平台，学习成本非常高，KubeSphere 所做的事情就是高度产品化和抽象了底层 Kubernetes，是一个面向云原生的操作系统。讲得再通俗一点，Kubernetes 屏蔽了底层容器运行时的差异，而 KubeSphere 则屏蔽了底层 Kubernetes 集群的差异，它解决了 K8s 使用门槛高和云原生生态工具庞杂的痛点。你可以在可视化界面上点几下鼠标即可将 Pod 调度到集群的不同节点中，无需编写 YAML。 上面是 Kube