<div dir="ltr">Hi again (for the last time hopefully :),<div><br></div><div>Hive back up and running fine. I'll try to write a summary of what happened in <a href="https://phabricator.wikimedia.org/T179943">https://phabricator.wikimedia.org/T179943</a> for everybody interested. The regular Hadoop jobs were completely stopped so there was no issue with data loss/inconsistency, only a temporary unavailability of Hive.</div><div><br></div><div>Thanks for the patience!</div><div><br></div><div>Luca<br><div class="gmail_extra"><br><div class="gmail_quote">2017-12-07 12:36 GMT+01:00 Luca Toscano <span dir="ltr"><<a href="mailto:ltoscano@wikimedia.org" target="_blank">ltoscano@wikimedia.org</a>></span>:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Hi everybody,<div><br></div><div>we are experiencing some issues with the Hive daemon, so currently Hive queries are not available. I am going to update this thread as soon as the issue is over.</div><div><br></div><div>For more info, please contact me (elukey) on IRC (#wikimedia-analytics).</div><div><br></div><div>Sorry for the trouble!</div><span class="gmail-HOEnZb"><font color="#888888"><div><br></div><div>Luca </div></font></span><div><div class="gmail-h5"><div class="gmail_extra"><br><div class="gmail_quote">2017-12-06 19:47 GMT+01:00 Luca Toscano <span dir="ltr"><<a href="mailto:ltoscano@wikimedia.org" target="_blank">ltoscano@wikimedia.org</a>></span>:<br><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Hi everybody,<div><br></div><div>we'd need to reboot the analytics1003 host for Linux kernel and openjdk updates tomorrow Dec 07 at 10 AM CET. Hive and Oozie will stop for a (hopefully) brief amount of time, but since they'll need to stop before the reboot it might happen that in flight jobs/queries fail. We'll try to avoid the reboot if too many jobs are running, but at some point we'll need to pull the trigger.</div><div><br></div><div>Please let me know on IRC (#wikimedia-analytics, elukey) or via email if you have any issue with this maintenance.</div><div><br></div><div>Thanks and sorry for the trouble!</div><div><br></div><div>Luca (on behalf of the Analytics team) </div></div>
</blockquote></div><br></div></div></div></div>
</blockquote></div><br></div></div></div>