Menu Close

Red Hat Training

A Red Hat training course is available for Red Hat Ceph Storage

9.6. 使用以下方法调优 BlueStore 以实现小写操作 bluestore_min_alloc_size

在 BlueStore 中,原始分区以 bluestore_min_alloc_size 的块的形式进行配置和管理。默认情况下,bluestore_min_alloc_size 用于 HDD,16 KB 代表 SSD。当每个块中的未写入区域写入原始分区时,它会被填充为零。如果工作负载没有正确定义未使用空间(例如编写小对象时),这会导致浪费空间。

最佳实践是将 bluestore_min_alloc_size 设置为与最小写入操作相匹配,从而避免产生放大的罚款。

例如,如果您的客户端频繁写入 4 KB 对象,请使用 ceph-ansible 在 OSD 节点上配置以下设置:

bluestore_min_alloc_size = 4096

注意

bluestore_min_alloc_size_ssdbluestore_min_alloc_size_hdd 的设置分别特定于 SSD 和 HDD,但不需要设置它们,因为设置 bluestore_min_alloc_size 会覆盖它们。

先决条件

  • 正在运行的 {storage-product} 集群。
  • 新服务器可以重新调配为 OSD 节点,或者:
  • 可以重新部署的 OSD 节点。

流程

  1. 可选:如果重新部署现有的 OSD 节点,请将 Ceph 监控节点上的 /etc/ceph/ 管理密钥环复制到您要从中删除 OSD 的节点。
  2. 可选:如果重新部署现有的 OSD 节点,请使用 shrink-osd.yml Ansible playbook 从集群中删除该 OSD。

    ansible-playbook -v infrastructure-playbooks/shrink-osd.yml -e osd_to_kill=OSD_ID

    示例

    [admin@admin ceph-ansible]$ ansible-playbook -v infrastructure-playbooks/shrink-osd.yml -e osd_to_kill=1

  3. 如果重新部署现有的 OSD 节点,请擦除 OSD 驱动器并重新安装操作系统。
  4. 利用 Ansible,为节点做好 OSD 调配准备。例如,启用 {storage-product} 存储库,添加 Ansible 用户并启用免密码 SSH 登录。
  5. bluestore_min_alloc_size 添加到 group_vars/all.yml Ansible playbook 的 ceph_conf_overrides 部分:

    ceph_conf_overrides:
      osd:
        bluestore_min_alloc_size: 4096
  6. 如果部署新节点,将其添加到 Ansible 清单文件中,通常: /etc/ansible/hosts

    [osds]
    OSD_NODE_NAME

    示例

    [osds]
    osd1 devices="[ '/dev/sdb' ]"

  7. 使用 Ansible 置备 OSD 节点:

    ansible-playbook -v site.yml -l OSD_NODE_NAME

    示例

    [admin@admin ceph-ansible]$ ansible-playbook -v site.yml -l osd1

  8. playbook 完成后,使用 ceph daemon 命令验证设置:

    ceph daemon OSD.ID config get bluestore_min_alloc_size

    示例

    [root@osd1 ~]# ceph daemon osd.1 config get bluestore_min_alloc_size
    {
        "bluestore_min_alloc_size": "4096"
    }

    您可以看到 bluestore_min_alloc_size 设置为 4096 字节,相当于 4 KB。

其它资源