<div dir="ltr">Hi,<div><br></div><div>I had a problem with a filesystem xfs on gluster. The filesystem metadata was filled:</div><div><br></div><div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: space map metadata: unable to allocate new metadata block</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: 252:2: metadata operation &#39;dm_thin_insert_block&#39; failed: error = -28</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: 252:2: aborting current metadata transaction</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: 252:2: switching pool to read-only mode</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): metadata I/O error: block 0x701830 (&quot;xfs_buf_iodone_callbacks&quot;) error 5 numblks 8</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: attempt to access beyond end of device</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: dm-0: rw=0, want=562056, limit=24576</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: process_bio_read_only: dm_thin_find_block() failed: error = -5</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: attempt to access beyond end of device</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: dm-0: rw=0, want=562056, limit=24576</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: process_bio_read_only: dm_thin_find_block() failed: error = -5</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): metadata I/O error: block 0x68047c (&quot;xlog_iodone&quot;) error 5 numblks 64</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): xfs_do_force_shutdown(0x2) called from line 1170 of file fs/xfs/xfs_log.c.  Return address = 0xffffffffa012a4c1</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): Log I/O Error Detected.  Shutting down filesystem</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): Please umount the filesystem and rectify the problem(s)</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: attempt to access beyond end of device</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: dm-0: rw=0, want=562056, limit=24576</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: process_bio_read_only: dm_thin_find_block() failed: error = -5</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): metadata I/O error: block 0x6804bc (&quot;xlog_iodone&quot;) error 5 numblks 64</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): xfs_do_force_shutdown(0x2) called from line 1170 of file fs/xfs/xfs_log.c.  Return address = 0xffffffffa012a4c1</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: attempt to access beyond end of device</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): xfs_log_force: error 5 returned.</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: dm-0: rw=0, want=562056, limit=24576</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: process_bio_read_only: dm_thin_find_block() failed: error = -5</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: attempt to access beyond end of device</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: dm-0: rw=0, want=562056, limit=24576</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: process_bio_read_only: dm_thin_find_block() failed: error = -5</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: attempt to access beyond end of device</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: dm-0: rw=0, want=562056, limit=24576</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: device-mapper: thin: process_bio_read_only: dm_thin_find_block() failed: error = -5</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): metadata I/O error: block 0x6804fc (&quot;xlog_iodone&quot;) error 5 numblks 64</div><div>Mar 27 13:58:18 srv-vln-des2 kernel: XFS (dm-4): xfs_do_force_shutdown(0x2) called from line 1170 of file fs/xfs/xfs_log.c.  Return address = 0xffffffffa012a4c</div></div><div><br></div><div><br></div><div><br></div><div>After that, gluster was shutdown and with it the 2 server are shtudown too. The lvm partition was missing and so far I haven&#39;t been able restore the file system. All data is missing??</div><div>I don&#39;t understand the situation and I don&#39;t know if it&#39;s due a xfs filesystem or glusterfs fail. Someone it has been this situation?</div><div><br></div><div>Thanks.</div><div><br></div><div><br></div></div>