<font size=2 face="sans-serif">the gfid looks the same. &nbsp;I'm not
sure what gluster volume heal info split-brain is reporting when the GFID
matches, and for all 4 nodes in the devstatic volume.</font><br><br><font size=2 face="sans-serif">[root@omhq1b4f ~]# getfattr -h -d -m
trusted.gfid -e hex /static/content/</font><br><font size=2 face="sans-serif">getfattr: Removing leading '/' from
absolute path names</font><br><font size=2 face="sans-serif"># file: static/content/</font><br><font size=2 face="sans-serif">trusted.gfid=0x00000000000000000000000000000001</font><br><br><font size=2 face="sans-serif">[root@omhq1b4f ~]# stat /static/content/</font><br><font size=2 face="sans-serif">&nbsp; File: `/static/content/'</font><br><font size=2 face="sans-serif">&nbsp; Size: 4096 &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp;Blocks: 8 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;IO Block:
4096 &nbsp; directory</font><br><font size=2 face="sans-serif">Device: fd02h/64770d &nbsp; &nbsp;Inode:
536871040 &nbsp; Links: 90</font><br><font size=2 face="sans-serif">Access: (0775/drwxrwxr-x) &nbsp;Uid:
( &nbsp; &nbsp;0/ &nbsp; &nbsp;root) &nbsp; Gid: ( &nbsp; &nbsp;0/ &nbsp;
&nbsp;root)</font><br><font size=2 face="sans-serif">Access: 2014-02-02 09:06:27.073528000
-0600</font><br><font size=2 face="sans-serif">Modify: 2014-12-23 10:13:00.823641000
-0600</font><br><font size=2 face="sans-serif">Change: 2015-09-25 08:42:44.524336543
-0500</font><br><font size=2 face="sans-serif">[root@omhq1b4f ~]#</font><br><br><font size=2 face="sans-serif">[root@omdx1b51 ~]# getfattr -h -d -m
trusted.gfid -e hex /static/content/</font><br><font size=2 face="sans-serif">getfattr: Removing leading '/' from
absolute path names</font><br><font size=2 face="sans-serif"># file: static/content/</font><br><font size=2 face="sans-serif">trusted.gfid=0x00000000000000000000000000000001</font><br><br><br><font size=2 face="sans-serif">[root@omdx1b51 ~]# stat /static/content/</font><br><font size=2 face="sans-serif">&nbsp; File: `/static/content/'</font><br><font size=2 face="sans-serif">&nbsp; Size: 4096 &nbsp; &nbsp; &nbsp;
&nbsp; &nbsp; &nbsp;Blocks: 8 &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;IO Block:
4096 &nbsp; directory</font><br><font size=2 face="sans-serif">Device: fd02h/64770d &nbsp; &nbsp;Inode:
536871040 &nbsp; Links: 90</font><br><font size=2 face="sans-serif">Access: (0775/drwxrwxr-x) &nbsp;Uid:
( &nbsp; &nbsp;0/ &nbsp; &nbsp;root) &nbsp; Gid: ( &nbsp; &nbsp;0/ &nbsp;
&nbsp;root)</font><br><font size=2 face="sans-serif">Access: 2014-02-02 09:06:27.073528000
-0600</font><br><font size=2 face="sans-serif">Modify: 2014-12-23 10:13:00.823641000
-0600</font><br><font size=2 face="sans-serif">Change: 2015-09-25 08:42:44.526287950
-0500</font><br><br><br><br><font size=2 face="sans-serif"><br><br>Khoi Mai<br>Union Pacific Railroad<br>Distributed Engineering &amp; Architecture<br>Senior Project Engineer<br><br></font><br><br><br><br><font size=1 color=#5f5f5f face="sans-serif">From: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size=1 face="sans-serif">Ravishankar N &lt;ravishankar@redhat.com&gt;</font><br><font size=1 color=#5f5f5f face="sans-serif">To: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size=1 face="sans-serif">Khoi Mai &lt;KHOIMAI@UP.COM&gt;,
gluster-users@gluster.org</font><br><font size=1 color=#5f5f5f face="sans-serif">Date: &nbsp; &nbsp; &nbsp;
&nbsp;</font><font size=1 face="sans-serif">09/25/2015 03:13 AM</font><br><font size=1 color=#5f5f5f face="sans-serif">Subject: &nbsp; &nbsp;
&nbsp; &nbsp;</font><font size=1 face="sans-serif">Re: [Gluster-users]
glusterfs3.4.2-1 split-brain question</font><br><hr noshade><br><br><br><font size=3>This email originated from outside of the company. Please
use discretion if opening attachments or clicking on links.</font><hr><font size=3>&nbsp;</font><p><font size=3><br></font><br><font size=3>On 09/25/2015 07:48 AM, Khoi Mai wrote:</font><br><font size=2 face="sans-serif">I have a 4 node distributed-replicated
gluster farm.</font><font size=3><br></font><font size=2 face="sans-serif"><br>Volume Name: devstatic<br>Type: Distributed-Replicate<br>Volume ID: 75832afb-f20e-4017-8d74-8550a92233fd<br>Status: Started<br>Number of Bricks: 2 x 2 = 4<br>Transport-type: tcp<br>Bricks:<br>Brick1: omhq1b4e:/static/content<br>Brick2: omdx1b50:/static/content<br>Brick3: omhq1b4f:/static/content<br>Brick4: omdx1b51:/static/content<br>Options Reconfigured:<br>features.quota-deem-statfs: on<br>server.allow-insecure: on<br>network.ping-timeout: 10<br>performance.lazy-open: off<br>performance.write-behind: on<br>features.quota: on<br>geo-replication.indexing: off<br>server.statedump-path: /tmp/<br>diagnostics.brick-log-level: CRITICAL</font><font size=3><br><br></font><font size=2 face="sans-serif"><br>When I query heal split-brain info I get the following.</font><font size=3><br></font><font size=2 face="sans-serif"><br>[root@omhq1b4e ~]# gluster volume heal devstatic info split-brain<br>Gathering list of split brain entries on volume devstatic has been successful</font><font size=3><br></font><font size=2 face="sans-serif"><br>Brick omhq1b4e:/static/content<br>Number of entries: 0</font><font size=3><br></font><font size=2 face="sans-serif"><br>Brick omdx1b50:/static/content<br>Number of entries: 0</font><font size=3><br></font><font size=2 face="sans-serif"><br>Brick omhq1b4f:/static/content<br>Number of entries: 43<br>at &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;path
on brick<br>-----------------------------------<br>2015-09-24 18:50:20 /<br>2015-09-24 18:50:20 /<br>2015-09-24 18:52:01 /<br>2015-09-24 19:10:22 /</font><font size=3><br></font><font size=2 face="sans-serif"><br>Brick omdx1b51:/static/content<br>Number of entries: 42<br>at &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp; &nbsp;path
on brick<br>-----------------------------------<br>2015-09-24 18:51:58 /<br>2015-09-24 18:51:59 /<br>2015-09-24 19:01:59 /<br>2015-09-24 19:11:59 /</font><font size=3><br><br></font><font size=2 face="sans-serif"><br>Being / on the same replicate, how would I safely resolve this issue? &nbsp;Is
it really going to require me to delete the root of each node and heal?
&nbsp;I hope not, the entire volume is about 1TB.</font><font size=3><br></font><br><font size=3>No, it is likely that the root is only in metadata split-brain.
What does the getfattr output of '/' show on the bricks?&nbsp; </font><a href="https://github.com/gluster/glusterdocs/blob/master/Troubleshooting/split-brain.md"><font size=3 color=blue><u>https://github.com/gluster/glusterdocs/blob/master/Troubleshooting/split-brain.md</u></font></a><font size=3>should tell you how to resolve split-brains.</font><br><font size=2 face="sans-serif">Thank you,</font><font size=3><br><br><br></font><font size=2 face="sans-serif"><br><br><br>Khoi Mai<br>Union Pacific Railroad<br>Distributed Engineering &amp; Architecture<br>Senior Project Engineer<br></font><font size=3><br><br><br><br>**<br><br><br><br>This email and any attachments may contain information that is confidential
and/or privileged for the sole use of the intended recipient. Any use,
review, disclosure, copying, distribution or reliance by others, and any
forwarding of this email or its contents, without the express permission
of the sender is strictly prohibited by law. If you are not the intended
recipient, please contact the sender immediately, delete the e-mail and
destroy all copies.<br><br>**<br><br></font><br><tt><font size=3>_______________________________________________<br>Gluster-users mailing list<br></font></tt><a href="mailto:Gluster-users@gluster.org"><tt><font size=3 color=blue><u>Gluster-users@gluster.org</u></font></tt></a><tt><font size=3><br></font></tt><a href="http://www.gluster.org/mailman/listinfo/gluster-users"><tt><font size=3 color=blue><u>http://www.gluster.org/mailman/listinfo/gluster-users</u></font></tt></a><br><br><BR>
<BR>
<BR>
**<BR>
<BR>
<BR>
<BR>
This email and any attachments may contain information that is confidential and/or privileged for the sole use of the intended recipient.  Any use, review, disclosure, copying, distribution or reliance by others, and any forwarding of this email or its contents, without the express permission of the sender is strictly prohibited by law.  If you are not the intended recipient, please contact the sender immediately, delete the e-mail and destroy all copies.<BR>
<BR>
**<BR>