<html><head></head><body><div style="font-family: Verdana;font-size: 12.0px;"><div>Hey Steini, soll noch mehrere Stunden dauern laut den Technikern ...
<div> 
<div name="quote" style="margin:10px 5px 5px 10px; padding: 10px 0 10px 10px; border-left:2px solid #C3D9E5; word-wrap: break-word; -webkit-nbsp-mode: space; -webkit-line-break: after-white-space;">
<div style="margin:0 0 10px 0;"><b>Gesendet:</b> Donnerstag, 18. Juni 2015 um 14:55 Uhr<br/>
<b>Von:</b> "Steinsplitter Wiki" <steinsplitter-wiki@live.com><br/>
<b>An:</b> "Wikimedia Labs" <labs-l@lists.wikimedia.org><br/>
<b>Betreff:</b> Re: [Labs-l] NFS outage in progress [UPDATE]</div>

<div name="quoted-content"><!--*.hmmessage P {
        margin: 0.0px;
        padding: 0.0px;
}
body.hmmessage {
        font-size: 12.0pt;
        font-family: Calibri;
}
-->
<div class="hmmessage">
<div>Toolslabs will be back soon?  When approximately?<br/>
 
<div>> Date: Wed, 17 Jun 2015 23:09:11 -0400<br/>
> From: marc@uberbox.org<br/>
> To: abogott@wikimedia.org; labs-l@lists.wikimedia.org<br/>
> Subject: Re: [Labs-l] NFS outage in progress [UPDATE]<br/>
><br/>
> On 15-06-17 09:29 PM, Andrew Bogott wrote:<br/>
> > Coren is rebooting and fscking the system -- with luck it'll be up<br/>
> > again within the hour.<br/>
><br/>
> Fortune does not smile upon us; the fsck is taking a LONG time to<br/>
> progress (over a 40T filesystem), but the repair goes apace.<br/>
><br/>
> There is already indication of some lost data - though the failures are<br/>
> likely to date from a past crash and may have gone unnoticed for some time.<br/>
><br/>
> Either way, we have a fairly recent (8-9 days) backup of the entire<br/>
> filesystem so we may be able to recover lost or corrupted files if any<br/>
> turn up.<br/>
><br/>
> Worst case scenario is a catastrophic loss of the entire filesystem<br/>
> (which does not seem likely at this time), in which case we will restore<br/>
> the filesystem completely from the backup.<br/>
><br/>
> The repair process will take at least a few more hours, during which I<br/>
> will be keeping watch. I will update this list as soon as I have a<br/>
> better assessment of the damage, if any.<br/>
><br/>
> -- Marc<br/>
><br/>
><br/>
> _______________________________________________<br/>
> Labs-l mailing list<br/>
> Labs-l@lists.wikimedia.org<br/>
> <a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/mailman/listinfo/labs-l</a></div>
</div>
_______________________________________________ Labs-l mailing list Labs-l@lists.wikimedia.org <a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/mailman/listinfo/labs-l</a></div>
</div>
</div>
</div>
</div></div></body></html>