<div dir="ltr">Thank you all for the updates and the "frantic" work!<br></div><div class="gmail_extra"><br><div class="gmail_quote">On Thu, Nov 6, 2014 at 6:55 PM, Andrew Bogott <span dir="ltr"><<a href="mailto:abogott@wikimedia.org" target="_blank">abogott@wikimedia.org</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><span class="">On 11/6/14 11:45 AM, Marc A. Pelletier wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Hello all,<br>
<br>
There is currently a hardware issue that took down labs.  We're hard at<br>
work on it and will give news the moment we have them.<br>
<br>
-- Marc<br>
<br>
<br>
</blockquote></span>
Since Marc is busy troubleshooting, here are some details:<br>
<br>
Labs and Toollabs are currently offline.  The file server that supports home directories, shared storage, and login keys is suffering a hardware failure.<br>
<br>
Depending on their use of the filesystem, some tools and other processes may still be working during this outage.  I expect most things will have died, though, and user logins will definitely not work.<br>
<br>
Coren (aka Marc) and Chris Johnson (who is on site at the datacenter) are currently working frantically to solve this problem.  Once the issue is resolved, Coren or I will send a followup email which includes instructions about restarting services if necessary.<br>
<br>
Sorry for the interruption, hope to be back running soon!<span class="HOEnZb"><font color="#888888"><br>
<br>
-Andrew</font></span><div class="HOEnZb"><div class="h5"><br>
<br>
<br>
______________________________<u></u>_________________<br>
Labs-l mailing list<br>
<a href="mailto:Labs-l@lists.wikimedia.org" target="_blank">Labs-l@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/<u></u>mailman/listinfo/labs-l</a><br>
</div></div></blockquote></div><br></div>