<div dir="ltr">On Thu, Apr 3, 2014 at 3:47 AM, Antoine Musso <span dir="ltr"><<a href="mailto:hashar+wmf@free.fr" target="_blank">hashar+wmf@free.fr</a>></span> wrote:<br><div class="gmail_extra"><div class="gmail_quote">
<blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex">An example node is tools-exec-03.eqiad.wmflabs<br>
<br>
Due to the nature of tools labs, it is a bit hard to figure out which<br>
bot was causing the issue.  The user agent was not meaningful.<br></blockquote><div><br>If nothing else, you could give Coren a list of the hammer hits and ask him to list for each the set of jobs running on the hitting node at the time of the hit. Then the intersection of those sets would tell us which tools to look at.<br>
</div></div><br clear="all"><br>-- <br>Brad Jorsch (Anomie)<br>Software Engineer<br>Wikimedia Foundation
</div></div><div class="gmail_extra"><br><br><div class="gmail_quote">On Thu, Apr 3, 2014 at 3:47 AM, Antoine Musso <span dir="ltr"><<a href="mailto:hashar+wmf@free.fr" target="_blank">hashar+wmf@free.fr</a>></span> wrote:<br>
<blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">Hello,<br>
<br>
Yesterday evening (europe time), the tools exec nodes have been<br>
blacklisted from Gerrit.   Some user/bot was hammering the Gerrit server<br>
which slowed it down.<br>
<br>
An example node is tools-exec-03.eqiad.wmflabs<br>
<br>
Due to the nature of tools labs, it is a bit hard to figure out which<br>
bot was causing the issue.  The user agent was not meaningful.<br>
<br>
<br>
If anyone had a script/bot querying Gerrit please get in touch so we can<br>
help fix your script!<br>
<br>
Meanwhile all tools labs nodes are blocked on Gerrit via an iptables rule.<br>
<br>
You can contact hashar, _joe_ (both Europe based) or ^d (SF based) on<br>
IRC.  Or reply there.<br>
<br>
cheers,<br>
<span class="HOEnZb"><font color="#888888"><br>
--<br>
Antoine "hashar" Musso<br>
<br>
<br>
_______________________________________________<br>
Labs-l mailing list<br>
<a href="mailto:Labs-l@lists.wikimedia.org">Labs-l@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/labs-l" target="_blank">https://lists.wikimedia.org/mailman/listinfo/labs-l</a><br>
</font></span></blockquote></div><br><br clear="all"><br>-- <br>Brad Jorsch (Anomie)<br>Software Engineer<br>Wikimedia Foundation
</div>