CEPH分布式存储 | 辣条部落格

【记录】处理因ceph rbd pool 的所有pg 处于 snaptrim 和 snaptrim_wait 状态导致 pool 卡死

参考文章 1、别人也遇到过相同的问题（snaptrim 操作非常慢，阻塞客户端 I/O） https://www.spinics.net/lists/ceph-users/msg75643.html 2、snaptrim中的qos https://lovethegirl.github.io/2020/02/16/sna ...

辣条①号 CEPH故障类 2023年 12月 10日 195 次浏览 0 阅读全文

ceph原理知识

ceph 硬件相关问题选择 ceph 硬件时的常见错误 1、设备利旧，重新利用功能不足的旧硬件以与 Ceph 一起使用 2、在同一个池中使用不同的硬件 3、使用 1Gbps 网络而不是 10Gbps 或更高 4、未将 cluster_network 与 Public_network 独立出来 5、使用 RAID 代替 ...

辣条①号 CEPH维护类 2023年 12月 3日 128 次浏览 0 阅读全文

根据osd的id定位物理磁盘

方式一：根据osd的fsid进行查找 # 1、先定位osd在哪一个host上 # 2、在对应host上查看osd对应的fsid root@pve-ceph01:~# cat /var/lib/ceph/osd/ceph-0/fsid be5ea6c8-06f6-45de-ad1d-5616a8723882 # 3、根据 ...

辣条①号 CEPH维护类 2023年 7月 17日 248 次浏览 0 阅读全文

ceph 查看默认配置、内存、延迟等相关维护操作

查看CEPH相关服务默认配置 # 查看整个集群的配置 root@pve-ceph01:~# ceph-conf --show-config | grep osd_recovery osd_recovery_cost = 20971520 osd_recovery_delay_start = 0.000000 osd_r ...

辣条①号 CEPH维护类 2023年 7月 6日 271 次浏览 0 阅读全文

centos8stream 基于cephadm部署ceph17

cephadm 这种方式部署，要求集群有持续的互联网访问能力以便各种服务image的下载（当然先导入相关的image可以的，不过麻烦）参考文章：https://www.koenli.com/ef5921b8.html 配置主机名、hots文件、root免密登录 # 1、分别执行 hostnamectl set-ho ...

辣条①号 CEPH部署类 2023年 7月 4日 252 次浏览 0 阅读全文

如何将部署了ceph的pve6升级至pve7

国内pve6使用的软件源若是有不明白，请先看官方教程：https://pve.proxmox.com/wiki/Upgrade_from_6.x_to_7.0 注意我的场景下：pve中只有ceph，没有容器和虚拟机 1、关闭企业源 sed -i 's/^/# /g' /etc/apt/source ...

辣条①号 CEPH维护类 2023年 7月 3日 204 次浏览 0 阅读全文

ceph 性能调优 + 性能测试

ceph 性能调优场景 1、确定预期，即你是啥硬件（你是容量性、性能性、还是综合性） ceph 性能调优原则 1、一次只对一个性能指标参数进行调整 ceph 性能调优思路 1、多数情况，压测流量并未真的直接到达后端，比如有系统cache、raid cache、CDN等 2、服务器端影响因素较大硬件：（CPU，Memo ...

辣条①号 CEPH维护类 2023年 6月 30日 401 次浏览 0 阅读全文

pve基于bcache 加速 ceph osd 实践

A、pve 关于bcache的BUG现状 # pve7到目前为止，不能正常的通过web gui 创建基于bcache的设备作为osd存储设备，如下是bug完成状态记录 https://bugzilla.proxmox.com/show_bug.cgi?id=4679 # 创建osd（不行，提示没有设备） pveceph ...

辣条①号 CEPH部署类 2023年 6月 27日 372 次浏览 0 阅读全文

ceph常见故障之（OSD无法启动）

系统重启后，因lvm信息丢失 OSD无法启动其他人也遇到过该问题请点击该处查看手动调试，启动osd（失败） root@node16072:~# /usr/bin/ceph-osd -f --cluster ceph --id 0 --setuser ceph --setgroup ceph 2023-05-04T ...

辣条①号 CEPH故障类 2023年 6月 25日 369 次浏览 0 阅读全文

ceph常见故障之（dd直接破坏osd磁盘，导致osd无法重建）

问题现象 dd直接破坏osd的物理磁盘，会导致无法重建osd 问题原因 dd直接破坏osd后，会残留lvm信息，(lvscan 看不到，lsblk 或者dmsetup ls 可以看到残留信息)无法正常创建重新创建osd 处理方法需要使用下面的命令删除残留后，才能正常创建osd dmsetup remove ceph- ...

辣条①号 CEPH故障类 2023年 6月 25日 84 次浏览 0 阅读全文

分类：CEPH分布式存储