<div dir="ltr"><div>Correction: It looks like I only reverted group2 to wmf.8<br><br></div><div>I'm not sure whether to go ahead and revert all wikis or leave it like it is for now.<br></div></div><div class="gmail_extra"><br><div class="gmail_quote">On Fri, Jan 27, 2017 at 10:24 AM, Mukunda Modell <span dir="ltr"><<a href="mailto:mmodell@wikimedia.org" target="_blank">mmodell@wikimedia.org</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div><div><div><div><div>The deployment of MediaWiki 1.29.0-wmf.9 is currently blocked and all wikis have been reverted to wmf.8.  This latest revert is due to excessive warnings which appeared in logs immediately after deploying to group2. The warnings all read as follows:<br><span style="font-family:monospace,monospace"><br></span><div class="m_-972099092440929486gmail-phui-header-col2"><span style="font-family:monospace,monospace"><span class="m_-972099092440929486gmail-phui-header-header"><span class="m_-972099092440929486gmail-visual-only m_-972099092440929486gmail-phui-icon-view m_-972099092440929486gmail-phui-font-fa m_-972099092440929486gmail-fa-exclamation-circle m_-972099092440929486gmail-red m_-972099092440929486gmail-phui-header-icon"></span>Warning: Empty regular expression in /srv/mediawiki/php-1.29.0-wmf.<wbr>9/includes/parser/<wbr>DateFormatter.php on line 200</span></span></div><br>This issue is tracked in <a href="https://phabricator.wikimedia.org/T156364" target="_blank">https://phabricator.wikimedia.<wbr>org/T156364</a> and currently blocks further deployments.<br></div><div><br></div>More background:<br><br>A similar flood of log spam occurred after deploying the branch to group1, however, the problem subsided after a while and did not reappear until Thursday's deployment.<br><br></div>There have been recent changes to DateFormatter.php, however, the changes do not appear to be the direct culprit. In fact, after rolling back the changes, a different message appears in the log, however, with less frequency than the line 200 error.<br><br></div>Several engineers have looked at this issue but so far we have not isolated the root cause. Additional eyes on this issue would be welcomed and further discussion should be directed to Phabricator. In the interest of keeping everyone in the loop, I will follow up in this thread if/when there is a resolution.<br><br></div><div>Regards,<br></div><div>Mukunda<br><br>---<br></div>Mukunda Modell<br></div>Wikimedia Release Engineering<br></div>
</blockquote></div><br></div>