<div dir="ltr">On Wed, Sep 11, 2013 at 8:45 AM, Magnus Manske <span dir="ltr"><<a href="mailto:magnusmanske@googlemail.com" target="_blank">magnusmanske@googlemail.com</a>></span> wrote:<br><div class="gmail_extra"><div class="gmail_quote">

<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">There was a recent mail saying that Labs is not considered "production" stability. Mainly a disagreement about how many 9s in the 99.99999% that represents.<br>

</div><div class="gmail_extra"><div><div class="h5"><br></div></div></div></blockquote><div><br></div><div>Indeed. I don't want to get into the debate about this again, but tools is considered "semi-production" which is a smaller set of nines. We're reasonably staffed and have a well designed enough infrastructure to properly support that, but it's not the case for "production"-level support. The specific discussion about levels of support was for a service that should be supported by WMF in production since it has uptime requirements that we aren't scoped to handle.<br>

<br></div><div>We handle the underlying infrastructure with production-level support, but we don't have the same level of support for projects inside of the infrastructure.<br><br></div><div>I think so far we've done a relatively good job of keeping stability and the level of stability has been increasing, not decreasing. If we did an analysis of tools project outages vs toolserver, I'm positive our level of unscheduled downtime would be far lower than toolserver's.<br>

<br></div><div>- Ryan<br></div></div><br></div></div>