<html xmlns:v="urn:schemas-microsoft-com:vml" xmlns:o="urn:schemas-microsoft-com:office:office" xmlns:w="urn:schemas-microsoft-com:office:word" xmlns:m="http://schemas.microsoft.com/office/2004/12/omml" xmlns="http://www.w3.org/TR/REC-html40"><head><meta http-equiv=Content-Type content="text/html; charset=gb2312"><meta name=Generator content="Microsoft Word 15 (filtered medium)"><style><!--
/* Font Definitions */
@font-face
        {font-family:宋体;
        panose-1:2 1 6 0 3 1 1 1 1 1;}
@font-face
        {font-family:"Cambria Math";
        panose-1:2 4 5 3 5 4 6 3 2 4;}
@font-face
        {font-family:Calibri;
        panose-1:2 15 5 2 2 2 4 3 2 4;}
@font-face
        {font-family:微软雅黑;
        panose-1:2 11 5 3 2 2 4 2 2 4;}
@font-face
        {font-family:"\@宋体";
        panose-1:2 1 6 0 3 1 1 1 1 1;}
@font-face
        {font-family:"\@微软雅黑";
        panose-1:2 11 5 3 2 2 4 2 2 4;}
/* Style Definitions */
p.MsoNormal, li.MsoNormal, div.MsoNormal
        {margin:0cm;
        margin-bottom:.0001pt;
        font-size:12.0pt;
        font-family:"Times New Roman","serif";
        color:black;}
a:link, span.MsoHyperlink
        {mso-style-priority:99;
        color:#0563C1;
        text-decoration:underline;}
a:visited, span.MsoHyperlinkFollowed
        {mso-style-priority:99;
        color:#954F72;
        text-decoration:underline;}
p
        {mso-style-priority:99;
        mso-margin-top-alt:auto;
        margin-right:0cm;
        mso-margin-bottom-alt:auto;
        margin-left:0cm;
        font-size:12.0pt;
        font-family:"Times New Roman","serif";
        color:black;}
span.EmailStyle18
        {mso-style-type:personal-reply;
        font-family:"Calibri","sans-serif";
        color:#1F497D;}
.MsoChpDefault
        {mso-style-type:export-only;
        font-size:10.0pt;}
@page WordSection1
        {size:612.0pt 792.0pt;
        margin:72.0pt 90.0pt 72.0pt 90.0pt;}
div.WordSection1
        {page:WordSection1;}
--></style><!--[if gte mso 9]><xml>
<o:shapedefaults v:ext="edit" spidmax="1026" />
</xml><![endif]--><!--[if gte mso 9]><xml>
<o:shapelayout v:ext="edit">
<o:idmap v:ext="edit" data="1" />
</o:shapelayout></xml><![endif]--></head><body bgcolor=white lang=ZH-CN link="#0563C1" vlink="#954F72"><div class=WordSection1><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>The “java.io.FileNotFound” error happened at 0:00 &nbsp;Jan 1st 2017, That’s Beijing time, while glusterfs use UTC time</span><span style='font-size:10.5pt;font-family:宋体;color:windowtext'>,</span><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>the time should be 2017-01-01 16:00:00.<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>Here is the log of three server&nbsp; at that time:<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>ab09 /var/log/glusterfs/bricks # cat mnt-brick3-vol.log<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:00.778962] E [MSGID: 113039] [posix.c:3011:posix_open] 0-gvol0-posix: open on /mnt/brick3/vol/.glusterfs/a6/1d/a61d7b2f-d53f-4eb9-be7a-656b0915dbea, flags: 1025 [No such file or directory]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:04.864163] W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/data/2017-01/02/84.txt -&gt; /mnt/brick3/vol/.glusterfs/02/a6/02a67715-47ba-4552-ae84-35cd660f38e5failed&nbsp; [File exists]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>The message &quot;E [MSGID: 113039] [posix.c:3011:posix_open] 0-gvol0-posix: open on /mnt/brick3/vol/.glusterfs/a6/1d/a61d7b2f-d53f-4eb9-be7a-656b0915dbea, flags: 1025 [No such file or directory]&quot; repeated 5 times between [2017-01-01 16:00:00.778962] and [2017-01-01 16:00:00.779308]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>The message &quot;W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/data/2017-01/02/84.txt -&gt; /mnt/brick3/vol/.glusterfs/02/a6/02a67715-47ba-4552-ae84-35cd660f38e5failed&nbsp; [File exists]&quot; repeated 4 times between [2017-01-01 16:00:04.864163] and [2017-01-01 16:00:04.864286]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>ac08 /var/log/glusterfs/bricks # cat mnt-brick3-vol.log<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:00.371922] W [MSGID: 113096] [posix-handle.c:828:posix_handle_soft] 0-gvol0-posix: symlink ../../e1/b5/e1b5fbec-f861-4c6a-99e8-8d3c28cce76a/02 -&gt; /mnt/brick3/vol/.glusterfs/05/9b/059b889e-5e7f-429c-a208-922226b329a2 failed [File exists]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:00.778274] W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/up_data/2017-01/02/4.txt -&gt; /mnt/brick3/vol/.glusterfs/a6/1d/a61d7b2f-d53f-4eb9-be7a-656b0915dbeafailed&nbsp; [File exists]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:01.264791] W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/down_data/2017-01/02/8.txt -&gt; /mnt/brick3/vol/.glusterfs/f4/58/f458e364-1772-4047-8edd-4aa48a096126failed&nbsp; [File exists]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:04.834138] W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/data/2017-01/02/84.txt -&gt; /mnt/brick3/vol/.glusterfs/02/a6/02a67715-47ba-4552-ae84-35cd660f38e5failed&nbsp; [File exists]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>The message &quot;W [MSGID: 113096] [posix-handle.c:828:posix_handle_soft] 0-gvol0-posix: symlink ../../e1/b5/e1b5fbec-f861-4c6a-99e8-8d3c28cce76a/02 -&gt; /mnt/brick3/vol/.glusterfs/05/9b/059b889e-5e7f-429c-a208-922226b329a2 failed [File exists]&quot; repeated 5 times between[2017-01-01 16:00:00.371922] and [2017-01-01 16:00:00.372030]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>The message &quot;W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/up_data/2017-01/02/4.txt -&gt; /mnt/brick3/vol/.glusterfs/a6/1d/a61d7b2f-d53f-4eb9-be7a-656b0915dbeafailed&nbsp; [File exists]&quot; repeated 4 times between [2017-01-01 16:00:00.778274] and [2017-01-01 16:00:00.778341]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>The message &quot;W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/data/2017-01/02/84.txt -&gt; /mnt/brick3/vol/.glusterfs/02/a6/02a67715-47ba-4552-ae84-35cd660f38e5failed&nbsp; [File exists]&quot; repeated 4 times between [2017-01-01 16:00:04.834138] and [2017-01-01 16:00:04.834314]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>ad08 /var/log/glusterfs/bricks # cat mnt-brick3-vol.log<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:00.399017] W [MSGID: 113096] [posix-handle.c:828:posix_handle_soft] 0-gvol0-posix: symlink ../../92/c6/92c699d6-2670-4547-9845-ec0450107a2e/02 -&gt; /mnt/brick3/vol/.glusterfs/36/3d/363d3c2d-5ccb-497e-9ecc-6eaf5f435026 failed [File exists]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:02.057190] W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/up_data/2017-01/02/46.txt -&gt; /mnt/brick3/vol/.glusterfs/93/ea/93ea8b72-e208-468d-812c-88d7f80bc204failed&nbsp; [File exists]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-01 16:00:02.057221] E [MSGID: 113020] [posix.c:2895:posix_create] 0-gvol0-posix: setting gfid on /mnt/brick3/vol/gps/up_data/2017-01/02/46.txt failedThe message &quot;W [MSGID: 113096] [posix-handle.c:828:posix_handle_soft] 0-gvol0-posix: symlink ../../92/c6/92c699d6-2670-4547-9845-ec0450107a2e/02 -&gt; /mnt/brick3/vol/.glusterfs/36/3d/363d3c2d-5ccb-497e-9ecc-6eaf5f435026 failed [File exists]&quot; repeated 5 times between [2017-01-01 16:00:00.399017] and [2017-01-01 16:00:00.399097]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>And the “cat: read error: Input/output error” happened at about 2017-0103 10:30, 2:30 at UTC time. Here is the log:<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>ab09 /var/log/glusterfs/bricks # cat mnt-brick3-vol.log<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:57.684122] I [login.c:76:gf_auth] 0-auth/login: allowed user names: 94bedfd1-619d-402a-9826-67dab7600f43<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:57.684147] I [MSGID: 115029] [server-handshake.c:692:server_setvolume] 0-gvol0-server: accepted client from aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-51-0-0 (version: 3.8.5)<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:58.368750] I [MSGID: 115036] [server.c:548:server_rpc_notify] 0-gvol0-server: disconnecting connection from aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-51-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:58.368797] I [MSGID: 101055] [client_t.c:415:gf_client_unref] 0-gvol0-server: Shutting down connection aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-51-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:46:29.361991] W [MSGID: 113096] [posix-handle.c:761:posix_handle_hard] 0-gvol0-posix: link /mnt/brick3/vol/gps/up_data/2017-01/03/91.txt -&gt; /mnt/brick3/vol/.glusterfs/e6/82/e6823e82-04c5-4e81-a3a8-6534d809d3f1failed&nbsp; [File exists]<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:48:55.302428] I [MSGID: 115036] [server.c:548:server_rpc_notify] 0-gvol0-server: disconnecting connection from ad02.pek.prod.com-120059-2016/12/30-06:43:02:91882-gvol0-client-51-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:48:55.302487] I [MSGID: 101055] [client_t.c:415:gf_client_unref] 0-gvol0-server: Shutting down connection ad02.pek.prod.com-120059-2016/12/30-06:43:02:91882-gvol0-client-51-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>ac08 /var/log/glusterfs/bricks # cat mnt-brick3-vol.log<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:57.684317] I [login.c:76:gf_auth] 0-auth/login: allowed user names: 94bedfd1-619d-402a-9826-67dab7600f43<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:57.684338] I [MSGID: 115029] [server-handshake.c:692:server_setvolume] 0-gvol0-server: accepted client from aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-52-0-0 (version: 3.8.5)<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:58.368991] I [MSGID: 115036] [server.c:548:server_rpc_notify] 0-gvol0-server: disconnecting connection from aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-52-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:58.369016] I [MSGID: 101055] [client_t.c:415:gf_client_unref] 0-gvol0-server: Shutting down connection aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-52-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:48:55.302622] I [MSGID: 115036] [server.c:548:server_rpc_notify] 0-gvol0-server: disconnecting connection from ad02.pek.prod.com-120059-2016/12/30-06:43:02:91882-gvol0-client-52-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:48:55.302657] I [MSGID: 101055] [client_t.c:415:gf_client_unref] 0-gvol0-server: Shutting down connection ad02.pek.prod.com-120059-2016/12/30-06:43:02:91882-gvol0-client-52-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>ad08 /var/log/glusterfs/bricks # cat mnt-brick3-vol.log<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:57.693935] I [login.c:76:gf_auth] 0-auth/login: allowed user names: 94bedfd1-619d-402a-9826-67dab7600f43<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:57.693956] I [MSGID: 115029] [server-handshake.c:692:server_setvolume] 0-gvol0-server: accepted client from aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-53-0-0 (version: 3.8.5)<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:58.369055] I [MSGID: 115036] [server.c:548:server_rpc_notify] 0-gvol0-server: disconnecting connection from aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-53-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:30:58.369074] I [MSGID: 101055] [client_t.c:415:gf_client_unref] 0-gvol0-server: Shutting down connection aa08.pek.prod.com-16474-2017/01/03-02:30:57:280485-gvol0-client-53-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:48:55.302720] I [MSGID: 115036] [server.c:548:server_rpc_notify] 0-gvol0-server: disconnecting connection from ad02.pek.prod.com-120059-2016/12/30-06:43:02:91882-gvol0-client-53-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>[2017-01-03 02:48:55.302773] I [MSGID: 101055] [client_t.c:415:gf_client_unref] 0-gvol0-server: Shutting down connection ad02.pek.prod.com-120059-2016/12/30-06:43:02:91882-gvol0-client-53-0-0<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>…<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'><o:p>&nbsp;</o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'>Likun<o:p></o:p></span></p><p class=MsoNormal><span lang=EN-US style='font-size:10.5pt;font-family:"Calibri","sans-serif";color:windowtext'><o:p>&nbsp;</o:p></span></p><div><div style='border:none;border-top:solid #E1E1E1 1.0pt;padding:3.0pt 0cm 0cm 0cm'><p class=MsoNormal><b><span style='font-size:11.0pt;font-family:"微软雅黑","sans-serif";color:windowtext'>发件人<span lang=EN-US>:</span></span></b><span lang=EN-US style='font-size:11.0pt;font-family:"微软雅黑","sans-serif";color:windowtext'> Ravishankar N [mailto:ravishankar@redhat.com] <br></span><b><span style='font-size:11.0pt;font-family:"微软雅黑","sans-serif";color:windowtext'>发送时间<span lang=EN-US>:</span></span></b><span lang=EN-US style='font-size:11.0pt;font-family:"微软雅黑","sans-serif";color:windowtext'> 2017</span><span style='font-size:11.0pt;font-family:"微软雅黑","sans-serif";color:windowtext'>年<span lang=EN-US>1</span>月<span lang=EN-US>4</span>日<span lang=EN-US> 10:30<br></span><b>收件人<span lang=EN-US>:</span></b><span lang=EN-US> likun; gluster-users@gluster.org<br></span><b>主题<span lang=EN-US>:</span></b><span lang=EN-US> Re: [Gluster-users] read error: Input/output error but not in brain split stat<o:p></o:p></span></span></p></div></div><p class=MsoNormal><span lang=EN-US><o:p>&nbsp;</o:p></span></p><div><p class=MsoNormal><span lang=EN-US>On 01/03/2017 09:03 AM, likun wrote:<o:p></o:p></span></p></div><blockquote style='margin-top:5.0pt;margin-bottom:5.0pt'><p class=MsoNormal style='mso-margin-top-alt:auto;mso-margin-bottom-alt:auto'><span lang=EN-US>Then I tried to access this file:<o:p></o:p></span></p><p class=MsoNormal style='mso-margin-top-alt:auto;mso-margin-bottom-alt:auto'><span lang=EN-US># cd /mnt/glusterfs/gps/data/2017-01/02<o:p></o:p></span></p><p class=MsoNormal style='mso-margin-top-alt:auto;mso-margin-bottom-alt:auto'><span lang=EN-US># more 4.txt<o:p></o:p></span></p><p class=MsoNormal style='mso-margin-top-alt:auto;mso-margin-bottom-alt:auto'><span lang=EN-US># cat 4.txt<o:p></o:p></span></p><p class=MsoNormal style='mso-margin-top-alt:auto;mso-margin-bottom-alt:auto'><span lang=EN-US>cat: read error: Input/output error<o:p></o:p></span></p><p class=MsoNormal style='mso-margin-top-alt:auto;mso-margin-bottom-alt:auto'><span lang=EN-US>&nbsp;<o:p></o:p></span></p><p class=MsoNormal style='mso-margin-top-alt:auto;mso-margin-bottom-alt:auto'><span lang=EN-US>I supposed there was something wrong with glusterfs, so I logined into glusterfs system, found nothing wrong, the output of ‘gluster volume status|info’ and ‘gluster volume heal gvol0 info’ command appended at the end. So, question is what’s wrong?<o:p></o:p></span></p><p class=MsoNormal style='mso-margin-top-alt:auto;mso-margin-bottom-alt:auto'><span lang=EN-US>&nbsp;<o:p></o:p></span></p></blockquote><p><span lang=EN-US><br>What did the mount log say at this time? Also were there errors/warnings on the 3 brick logs where the file resides at the same time?<o:p></o:p></span></p><p><span lang=EN-US>Regards,<o:p></o:p></span></p><p><span lang=EN-US>Ravi<o:p></o:p></span></p></div></body></html>