<div dir="ltr">Everything should be recovering now!<div><br></div><div>Addshore</div><div class="gmail_extra"><br><br><div class="gmail_quote">On 9 February 2014 17:55, John <span dir="ltr"><<a href="mailto:phoenixoverride@gmail.com" target="_blank">phoenixoverride@gmail.com</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Does anyone have coren's number to let him know? He is the paid WMF contact for this.<div class="HOEnZb"><div class="h5">
<span></span><br><br>On Sunday, February 9, 2014, Petr Bena <<a href="mailto:benapetr@gmail.com" target="_blank">benapetr@gmail.com</a>> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Pretty much nothing regular admins can fix, we indeed need someone<br>
from WMF with root keys / access to physical servers, because this<br>
seems to be issue on NFS again (IMHO) can't confirm that of course...<br>
<br>
Anyway, I can't even ssh there, I /could try/ to reboot some of the<br>
boxes like tools-dev but I am afraid it's not going to help anything.<br>
<br>
On Sun, Feb 9, 2014 at 4:43 PM, John <<a>phoenixoverride@gmail.com</a>> wrote:<br>
> All connections to tools.wmflabs is out, ssh, ftp, http, and https are all<br>
> non-functional. I am getting zero response on IRC, can someone with Coren's<br>
> mobile number give him a call?<br>
><br>
> John<br>
><br>
> _______________________________________________<br>
> Labs-l mailing list<br>
> <a>Labs-l@lists.wikimedia.org</a><br>
> <a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/mailman/listinfo/labs-l</a><br>
><br>
<br>
_______________________________________________<br>
Labs-l mailing list<br>
<a>Labs-l@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/mailman/listinfo/labs-l</a><br>
</blockquote>
</div></div><br>_______________________________________________<br>
Labs-l mailing list<br>
<a href="mailto:Labs-l@lists.wikimedia.org">Labs-l@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/mailman/listinfo/labs-l</a><br>
<br></blockquote></div><br></div></div>