<div dir="ltr"><div><div>Ivan,<br><br>That&#39;s good to hear. Thanks for posting :)<br><br></div>regards,<br></div>Raghavendra<br></div><div class="gmail_extra"><br><div class="gmail_quote">On Fri, Dec 23, 2016 at 10:10 PM, Ivan Rossi <span dir="ltr">&lt;<a href="mailto:rouge2507@gmail.com" target="_blank">rouge2507@gmail.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Last few days has been tense because a R3 3.8.5 Gluster cluster that I<br>
built has been plagued by problems.<br>
<br>
The first symptom has been a continuous stream in the client logs of:<br>
<br>
[2016-12-17 15:55:02.047508] E [MSGID: 108009]<br>
[afr-open.c:187:afr_openfd_<wbr>fix_open_cbk]<br>
0-hisap-prod-1-replicate-0: Failed to open<br>
/home/galaxy/HISAP/java/lib/<wbr>java/jre1.7.0_51/jre/lib/rt.<wbr>jar on subvolume<br>
hisap-prod-1-client-2 [Transport endpoint is not connected]<br>
<br>
followed by very frequent peer disconnections/reconnections and a<br>
continuous stream of files to be healed on several volumes.<br>
<br>
The problem has been traced back to a flaky X540-T2 10GBE NIC embedded<br>
in one of the peers motherboard, that was incapable of keeping the<br>
correct 10Gbit speed negotiation with the switch.<br>
<br>
The motherboard has been replaced on the peer. and then the volumes<br>
healed quickly to complete health.  All of these while the users kept<br>
running some heavy-duty bioinformatics applications (NGS data<br>
analysis) on top of Gluster.  No user noticed ANYTHING despite a major<br>
hardware problem and offi-lining of a peer.<br>
<br>
This is a RESILIENT system, in my book.<br>
<br>
Gluster people, despite the constant stream of problems and requests<br>
for help that you see on the ML and IRC, rest assured that you are<br>
building a nice piece of software, at least IMHO.<br>
<br>
Keep-up the good work and Merry Christmas.<br>
<span class="HOEnZb"><font color="#888888"><br>
Ivan Rossi<br>
______________________________<wbr>_________________<br>
Gluster-devel mailing list<br>
<a href="mailto:Gluster-devel@gluster.org">Gluster-devel@gluster.org</a><br>
<a href="http://www.gluster.org/mailman/listinfo/gluster-devel" rel="noreferrer" target="_blank">http://www.gluster.org/<wbr>mailman/listinfo/gluster-devel</a><br>
</font></span></blockquote></div><br><br clear="all"><br>-- <br><div class="gmail_signature" data-smartmail="gmail_signature">Raghavendra G<br></div>
</div>