<div dir="ltr"><div class="gmail_extra">On Wed, Dec 4, 2013 at 7:49 PM, Chris McMahon <span dir="ltr"><<a href="mailto:cmcmahon@wikimedia.org" target="_blank">cmcmahon@wikimedia.org</a>></span> wrote:<br><div class="gmail_quote">

<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left-width:1px;border-left-color:rgb(204,204,204);border-left-style:solid;padding-left:1ex"><div>There seems to be an issue with our account at Cloudbees such that all of the builds are suspended in a failing state right now.  </div>

<div></div></blockquote></div><div class="gmail_extra"><br></div><div class="gmail_extra">#TLDR</div><br>It was my fault. Again. Sorry about that. :(</div><div class="gmail_extra"><br></div><div class="gmail_extra">Good news is that I have fixed the problem! :)</div>

<div class="gmail_extra"><br></div># The story<div><br></div><div>I was trying to help a Google Code-in student (Hi Geoffrey!) on a Jenkins related task he is working on[1]. We have a Jenkins instance at Cloudbees[2] and since we are out of accounts, he has created his own instance[3] where he can run test jobs. I was setting up jobs there, created Sauce Labs service (think Selenium in the cloud), but I was not sure if Sauce could charge him, so I have decided to cancel the service.<div>

<br></div><div>Boooooom!</div><div><br></div><div>Looks like I have canceled our Sauce service. I am not sure how that happened, but it did. Maybe Cloudbees got confused, but more likely I got confused.</div><div><br></div>

<div>Anyway, I have fixed the problem, it should never ever (ever!) happen again. To remind myself to never ever (ever!) to cancel services that we use, I will write a script that will output 100 times "I will never ever (ever!) cancel services that we use."</div>

<div><br></div><div>Željko<br>--<br>1: <a href="https://bugzilla.wikimedia.org/show_bug.cgi?id=55824">https://bugzilla.wikimedia.org/show_bug.cgi?id=55824</a><br>2: <a href="https://wmf.ci.cloudbees.com/">https://wmf.ci.cloudbees.com/</a><div>

3: <a href="https://geofbot.ci.cloudbees.com/">https://geofbot.ci.cloudbees.com/</a></div></div></div></div>