<div dir="ltr"><div>Complete.<br></div><div><br>This maintenance lasted just shy of an hour.  All Kubernetes services should have been back at around 50 minutes in.  This was longer than the expected 30 due to extra time for initial depooling of existing Pods.  At the moment all Kubernetes services seem to be functioning as expected.  Non-Kubernetes Tool Labs functions were not impacted.<br><br></div>We will continue to monitor throughout the day.<br><div><div><div><div class="gmail_extra"><br><div class="gmail_quote">On Wed, Mar 15, 2017 at 11:03 AM, Chase Pettet <span dir="ltr"><<a href="mailto:cpettet@wikimedia.org" target="_blank">cpettet@wikimedia.org</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div><br></div>This will begin shortly.  Apologies the reminder is not an hour prior.<br><div>----<br><br>We will be performing impacting maintenance on the Tool Labs 
Kubernetes cluster on 3/15/17.  This means downtime estimated at 30 
minutes starting at 4:00 PM UTC on 3/15/17.  This may effect Tools 
running on the Grid Engine platform as well for some of this time.  This
 is meant to be a one-time maintenance and is not expected to be a 
regular occurrence.  Apologies for the short notice, time is of the 
essence here unfortunately.  This is meant to resolve T152399.  We will 
notify this list with a reminder an hour before and on completion.  <br><br><div>As always, come talk to us with question or concerns on Phabricator or IRC at #wikimedia-labs.<br><br></div><div>Thank you,<br clear="all"></div><div><div><div><br>Labs Team</div></div></div></div></div>
</blockquote></div><br><br clear="all"><br>-- <br><div class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div>Chase Pettet<br></div>Engineering Manager -- Labs<br></div><div>chasemp on <a href="https://phabricator.wikimedia.org/p/chasemp/" target="_blank">phabricator</a> and IRC<br></div></div></div></div></div></div>
</div></div></div></div></div>