<div dir="ltr"><div><div><div><div><div><div>Hi Gaurav,<br><br></div><div>Thanks for reply<br></div><div><br>1. Here, I removed the board manually here but this time it works fine<br><br>[2016-02-18 10:03:40.601472]  : volume remove-brick c_glusterfs replica 1 10.32.1.144:/opt/lvmdir/c2/brick force : SUCCESS<br>[2016-02-18 10:03:40.885973]  : peer detach 10.32.1.144 : SUCCESS    <br><br></div><div>Yes this time board is reachable but how? don&#39;t know because board is detached.<br></div><div><br></div>2. Here, I attached the board this time its works fine in add-bricks<br><br>2016-02-18 10:03:42.065038]  : peer probe 10.32.1.144 : SUCCESS    <br>[2016-02-18 10:03:44.563546]  : volume add-brick c_glusterfs replica 2 10.32.1.144:/opt/lvmdir/c2/brick force : SUCCESS<br><br></div>3.Here, again I removed the board this time failed occur<br><br>[2016-02-18 10:37:02.816089]  : volume remove-brick c_glusterfs replica 1 10.32.1.144:/opt/lvmdir/c2/brick force : FAILED : Incorrect brick 10.32.1.144:/opt<br>/lvmdir/c2/brick for volume c_glusterfs<br><br></div>but here board is not reachable.<br><br></div>why this inconsistency is there while doing the same step multiple time. <br><br></div><div>Hope you are getting my point.<br></div><div><br></div>Regards,<br></div>Abhishek<br></div><div class="gmail_extra"><br><div class="gmail_quote">On Fri, Feb 19, 2016 at 3:25 PM, Gaurav Garg <span dir="ltr">&lt;<a href="mailto:ggarg@redhat.com" target="_blank">ggarg@redhat.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Abhishek,<br>
<br>
when sometime its working fine means 2nd board network connection is reachable to first node. you can conform this by executing same #gluster peer status command.<br>
<br>
Thanks,<br>
<span class="im HOEnZb">Gaurav<br>
<br>
----- Original Message -----<br>
From: &quot;ABHISHEK PALIWAL&quot; &lt;<a href="mailto:abhishpaliwal@gmail.com">abhishpaliwal@gmail.com</a>&gt;<br>
</span><div class="HOEnZb"><div class="h5">To: &quot;Gaurav Garg&quot; &lt;<a href="mailto:ggarg@redhat.com">ggarg@redhat.com</a>&gt;<br>
Cc: <a href="mailto:gluster-users@gluster.org">gluster-users@gluster.org</a><br>
Sent: Friday, February 19, 2016 3:12:22 PM<br>
Subject: Re: [Gluster-users] Issue in Adding/Removing the gluster node<br>
<br>
Hi Gaurav,<br>
<br>
Yes, you are right actually I am force fully detaching the node from the<br>
slave and when we removed the board it disconnected from the another board.<br>
<br>
but my question is I am doing this process multiple time some time it works<br>
fine but some time it gave these errors.<br>
<br>
<br>
you can see the following logs from cmd_history.log file<br>
<br>
[2016-02-18 10:03:34.497996]  : volume set c_glusterfs nfs.disable on :<br>
SUCCESS<br>
[2016-02-18 10:03:34.915036]  : volume start c_glusterfs force : SUCCESS<br>
[2016-02-18 10:03:40.250326]  : volume status : SUCCESS<br>
[2016-02-18 10:03:40.273275]  : volume status : SUCCESS<br>
[2016-02-18 10:03:40.601472]  : volume remove-brick c_glusterfs replica 1<br>
10.32.1.144:/opt/lvmdir/c2/brick force : SUCCESS<br>
[2016-02-18 10:03:40.885973]  : peer detach 10.32.1.144 : SUCCESS<br>
[2016-02-18 10:03:42.065038]  : peer probe 10.32.1.144 : SUCCESS<br>
[2016-02-18 10:03:44.563546]  : volume add-brick c_glusterfs replica 2<br>
10.32.1.144:/opt/lvmdir/c2/brick force : SUCCESS<br>
[2016-02-18 10:30:53.297415]  : volume status : SUCCESS<br>
[2016-02-18 10:30:53.313096]  : volume status : SUCCESS<br>
[2016-02-18 10:37:02.748714]  : volume status : SUCCESS<br>
[2016-02-18 10:37:02.762091]  : volume status : SUCCESS<br>
[2016-02-18 10:37:02.816089]  : volume remove-brick c_glusterfs replica 1<br>
10.32.1.144:/opt/lvmdir/c2/brick force : FAILED : Incorrect brick<br>
10.32.1.144:/opt/lvmdir/c2/brick for volume c_glusterfs<br>
<br>
<br>
On Fri, Feb 19, 2016 at 3:05 PM, Gaurav Garg &lt;<a href="mailto:ggarg@redhat.com">ggarg@redhat.com</a>&gt; wrote:<br>
<br>
&gt; Hi Abhishek,<br>
&gt;<br>
&gt; Seems your peer 10.32.1.144 have disconnected while doing remove brick.<br>
&gt; see the below logs in glusterd:<br>
&gt;<br>
&gt; [2016-02-18 10:37:02.816009] E [MSGID: 106256]<br>
&gt; [glusterd-brick-ops.c:1047:__glusterd_handle_remove_brick] 0-management:<br>
&gt; Incorrect brick 10.32.1.144:/opt/lvmdir/c2/brick for volume c_glusterfs<br>
&gt; [Invalid argument]<br>
&gt; [2016-02-18 10:37:02.816061] E [MSGID: 106265]<br>
&gt; [glusterd-brick-ops.c:1088:__glusterd_handle_remove_brick] 0-management:<br>
&gt; Incorrect brick 10.32.1.144:/opt/lvmdir/c2/brick for volume c_glusterfs<br>
&gt; The message &quot;I [MSGID: 106004]<br>
&gt; [glusterd-handler.c:5065:__glusterd_peer_rpc_notify] 0-management: Peer<br>
&gt; &lt;10.32.1.144&gt; (&lt;6adf57dc-c619-4e56-ae40-90e6aef75fe9&gt;), in state &lt;Peer in<br>
&gt; Cluster&gt;, has disconnected from glusterd.&quot; repeated 25 times between<br>
&gt; [2016-02-18 10:35:43.131945] and [2016-02-18 10:36:58.160458]<br>
&gt;<br>
&gt;<br>
&gt;<br>
&gt; If you are facing the same issue now, could you paste your # gluster peer<br>
&gt; status     command output here.<br>
&gt;<br>
&gt; Thanks,<br>
&gt; ~Gaurav<br>
&gt;<br>
&gt; ----- Original Message -----<br>
&gt; From: &quot;ABHISHEK PALIWAL&quot; &lt;<a href="mailto:abhishpaliwal@gmail.com">abhishpaliwal@gmail.com</a>&gt;<br>
&gt; To: <a href="mailto:gluster-users@gluster.org">gluster-users@gluster.org</a><br>
&gt; Sent: Friday, February 19, 2016 2:46:35 PM<br>
&gt; Subject: [Gluster-users] Issue in Adding/Removing the gluster node<br>
&gt;<br>
&gt; Hi,<br>
&gt;<br>
&gt;<br>
&gt; I am working on two board setup connecting to each other. Gluster version<br>
&gt; 3.7.6 is running and added two bricks in replica 2 mode but when I manually<br>
&gt; removed (detach) the one board from the setup I am getting the following<br>
&gt; error.<br>
&gt;<br>
&gt; volume remove-brick c_glusterfs replica 1 10.32.1.144:/opt/lvmdir/c2/brick<br>
&gt; force : FAILED : Incorrect brick 10.32.1.144:/opt/lvmdir/c2/brick for<br>
&gt; volume c_glusterfs<br>
&gt;<br>
&gt; Please find the logs file as an attachment.<br>
&gt;<br>
&gt;<br>
&gt; Regards,<br>
&gt; Abhishek<br>
&gt;<br>
&gt;<br>
&gt; _______________________________________________<br>
&gt; Gluster-users mailing list<br>
&gt; <a href="mailto:Gluster-users@gluster.org">Gluster-users@gluster.org</a><br>
&gt; <a href="http://www.gluster.org/mailman/listinfo/gluster-users" rel="noreferrer" target="_blank">http://www.gluster.org/mailman/listinfo/gluster-users</a><br>
&gt;<br>
<br>
<br>
<br>
--<br>
<br>
<br>
<br>
<br>
Regards<br>
Abhishek Paliwal<br>
</div></div></blockquote></div><br><br clear="all"><br>-- <br><div class="gmail_signature"><div dir="ltr"><br><br><br><br>Regards<br>
Abhishek Paliwal<br>
</div></div>
</div>