<div dir="ltr">We are also having problems running puppet (we had no issues yesterday morning and changes had not been made):<div><br></div><div>These are the errors that we are getting on our self hosted puppet master:<br><div><br></div><div><div>Error: Could not retrieve catalog from remote server: Error 400 on SERVER: Could not find data item ganglia_class in any Hiera data file and no default supplied at /etc/puppet/manifests/ganglia.pp:22 on node wikimetrics1.eqiad.wmflabs</div><div>Warning: Not using cache on failed catalog</div><div>Error: Could not retrieve catalog; skipping run</div></div></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Tue, Mar 31, 2015 at 6:40 AM, Mjbmr <span dir="ltr"><<a href="mailto:mjbmri@gmail.com" target="_blank">mjbmri@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Crontab is not working.<div class="HOEnZb"><div class="h5"><br>
<br>
On 3/31/2015 11:07 AM, Yuvi Panda wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">
Services are all back up again. I've restarted the webservices pointed<br>
at me as being down.  Load on all machines is back to normal as well -<br>
abnormal load was caused by NFS messing up again. Should be ok atm.<br>
<br>
Detailed postmortem to follow tomorrow.<br>
<br>
______________________________<u></u>_________________<br>
Labs-l mailing list<br>
<a href="mailto:Labs-l@lists.wikimedia.org" target="_blank">Labs-l@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/<u></u>mailman/listinfo/labs-l</a><br>
</blockquote>
<br>
<br>
______________________________<u></u>_________________<br>
Labs-l mailing list<br>
<a href="mailto:Labs-l@lists.wikimedia.org" target="_blank">Labs-l@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/<u></u>mailman/listinfo/labs-l</a><br>
</div></div></blockquote></div><br></div>