<div dir="ltr">Here's the full incident report from Tuesday:<div><br></div><div><a href="https://wikitech.wikimedia.org/wiki/Incident_documentation/20160202-deployment-server-loss">https://wikitech.wikimedia.org/wiki/Incident_documentation/20160202-deployment-server-loss</a><br></div><div><br></div><div>The tldr: a server (tin) was pooled was a deployment co-master before it was totally ready. It hosed</div><div>the sane master (mira) trying to sync the two. Lots of actionables.</div><div><br></div><div>Thanks to Joe, Jaime and Antoine for spotting so quick and staying up basically all day long to help</div><div>fix it. Tyler, Ori, Daniel Z, Chase all helped along the way too :)</div><div><br></div><div>As always: it's an incident report on a wiki, please feel free to chime in and add extra details if you</div><div>see something missing.</div><div><br></div><div>-Chad</div></div>