8

扩展LVM ThinPool Metadata Size

 2 years ago
source link: https://chen3961.github.io/lvm/2019/03/25/Extending-thinpool-metadata/
Go to the source link to view the article. You can view the picture content, updated content and better typesetting reading experience. If the link is broken, please click the button below to view the snapshot at that time.

扩展LVM ThinPool Metadata Size

Mar 25, 2019
1 minute read

通过Openstack创建卷的过程，遇到一个奇怪的问题，开始卷可以创建成功，卷写入也没有问题。但是创建多个卷后发现无法创建，已创建的卷也无法写入。在已创建的卷上创建文件系统总是显示:：

/dev/vdb: write failed after 0 of 4096 at 0: Input/output error

开始以为是磁盘错误，所以通过chkblk等命令检查磁盘，并没有发现问题。

然后测试创建新的卷，检查cinder-volume的日志，发现：

oslo_messaging.rpc.server Stderr: u'File descriptor 20 (/dev/urandom) leaked on lvcreate invocation. Parent PID 769: /usr/bin/python2\n  Thin pool cinder--volumes-cinder--volumes--pool-tpool (253:2) transaction_id is 91, while expected 92.\n  Failed to suspend cinder-volumes/cinder-volumes-pool with queued messages.\n'

看样子是后台lvm出现的问题。

检查后台lvm，发现空间还有空余，但是metadata的空间已经满了：

  LV                                          VG             Attr       LSize    Pool                Origin Data%  Meta%  Move Log Cpy%Sync Convert
  cinder-volumes-pool                         cinder-volumes twi-aotz-- <509.54g                            17.81  100
  volume-235d0896-9f64-4199-bafb-259fc3d862d5 cinder-volumes Vwi-aotz--  100.00g cinder-volumes-pool        10.08
  volume-32d210e6-bff0-4b72-b74d-aaf130576f59 cinder-volumes Vwi-aotz--  100.00g cinder-volumes-pool        0.56
  volume-46da9715-ffda-49b9-9426-3fd315dae873 cinder-volumes Vwi-aotz--   40.00g cinder-volumes-pool        38.18
  volume-4d056bf3-c8f6-4fb2-b870-695b8416b178 cinder-volumes Vwi-aotz--  100.00g cinder-volumes-pool        0.55
  volume-4d42f4f2-c795-48f4-875d-e910d63a5490 cinder-volumes Vwi-aotz--  100.00g cinder-volumes-pool        10.08
  volume-59af0aa2-e946-4c62-8bf2-00cc7f9f8161 cinder-volumes Vwi-aotz--  100.00g cinder-volumes-pool        0.55

不清楚为啥数据还有这么多空余，而metadata居然满了。查了一下文档发现thinpool的空间默认只有12M，果断增大thinpool的metadata的空间：

lvextend cinder-volumes/cinder-volumes-pool--poolmetadatasize -L+512M

之后发现创建新的卷还是失败。通过搜索相关日志，发现cinder-volumes-pool的transcation id已经出现损坏的数据，发现网上还有相关的修复的方法，尝试了一下：

vgcfgbackup cinder-volumes -f ~/backup

导出volume group的配置，找到cinder-volumes-pool的描述，然后修改transaction_id，重新导入

vgcfgrestore cinder-volumes -f ~/backup

这样就修复了lvm系统，可以创建新卷，已创建的卷也能够写入了。


report

Recommend

About Joyk


Aggregate valuable and interesting links.
Joyk means Joy of geeK