<div dir="ltr">This is the reason for the really low numbers on today's checkwiki run.</div><div class="gmail_extra"><br><div class="gmail_quote">On Sat, Jun 6, 2015 at 11:31 PM, Andrew Bogott <span dir="ltr"><<a href="mailto:abogott@wikimedia.org" target="_blank">abogott@wikimedia.org</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">We're just coming out of an approximately 4-hour NFS outage.  The outage was at least partially caused by errors on the network switch.  That issue is resolved, but there may be a second issue (possibly caused by a badly-behaved client) waiting to strike again.<br>
<br>
Here's the outage report so far, still sketchy on details and action items:<br>
<br>
<a href="https://wikitech.wikimedia.org/wiki/Incident_documentation/20150607-LabsNFS-Outage" target="_blank">https://wikitech.wikimedia.org/wiki/Incident_documentation/20150607-LabsNFS-Outage</a><br>
<br>
I'm sure that Yuvi and Coren will followup here with any needed instructions to get your tools back online.<br>
<br>
-Andrew<br>
<br>
<br>
_______________________________________________<br>
Labs-announce mailing list<br>
<a href="mailto:Labs-announce@lists.wikimedia.org" target="_blank">Labs-announce@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/labs-announce" target="_blank">https://lists.wikimedia.org/mailman/listinfo/labs-announce</a><br>
</blockquote></div><br></div>