ceph分布式存储之（硬件准备&规划篇）

Red Hat Ceph Storage 与社区版对应关系

    Red Hat Ceph Storage 3  Ceph Luminous(12.2.x)
    Red Hat Ceph Storage 4  Ceph Nautilus(14.2.x)
    Red Hat Ceph Storage 5  Ceph Pacific(16.2.x)
    Red Hat Ceph Storage 6  Ceph Quincy(17.2.x)

ceph服务器-硬件必要设置

    1、cpu电源管理-务必使用性能模式（在bios中设置）
    2、bios电池务必保证用新的，能正常充放电
    3、除系统盘外，osd盘不要使用raid。若有raid卡请设置为JBOD模式
    4、bios关闭numa，或者系统内关闭numa
    5、尽量使用相同类型的磁盘作为osd，避免木桶效应（相同大小、相同容量）（容量实在不能保证一致，必要时可以先对磁盘进行分区）
    6、网卡速率：10G及以上

网络带宽选择

10G起步，可以双10G起lacp

在 1 GB  以太网网络中复制 1 TB 数据需要 3  小时，3 TB 需要 9 小时
在 10 GB 以太网网络中复制 1 TB 数据需要 20 分钟，3 TB 需要 1 小时

硬盘模式（raid、jbod、裸盘）

• 问1：为什么ceph存储建议不使用raid
• 答1：raid可能会导致容量浪费、raid降级会导致集群出现严重的性能问题、raid不好维护
• 问2：没办法主板自带sas卡，不作raid不能识别硬盘
• 答2：那没办法了，做单盘raid0吧（建议将raid的cache缓存模式置为write-back回写）。要是sas卡支持jbod，就做成jbod（jbod模式不能启用write-back，默认禁止了的）【换服务器也是条路】
• 问3：那ceph应该使用什么硬盘模式
• 答3：直接使用裸盘
• 问4：若将raid 的缓存模式设置为 write-back，需要注意什么
• 答4：使用wirte-back ，需要保证raid卡的BBU是全新的并且能正常充放电
• 问5：为什么jbod模式默认禁用wirte-back，也无法启用回写
• 答5：这是合理的设置，jbod模式使多个磁盘链接到一个控制器，在这种情况下，回写缓存可能成为 I/O 争用的根源。由于 JBOD 禁用回写缓存，因此在这种情况下非常理想。使用 JBOD 模式的优势之一是可以轻松添加或更换驱动器，然后在物理插入后立即将驱动器暴露给操作系统。