<div dir="ltr"><div>The 1.33.0-wmf.24 version of MediaWiki was successfully promoted to all wikis today. Thanks to everyone who helped fix outstanding issues from last week!</div><div><br></div><div>Kindly,</div><div>Dan</div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Thu, Apr 4, 2019 at 2:36 PM Dan Duvall <<a href="mailto:dduvall@wikimedia.org">dduvall@wikimedia.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr"><div>The 1.33.0-wmf.24 version of MediaWiki remains blocked[0], holding at group0 pending resolution of the following issue:</div></div><div><br></div><div dir="ltr"><div>* RefreshLinksJob::runForTitle: transaction round 'RefreshLinksJob::run' already started on commons - <a href="https://phabricator.wikimedia.org/T220037" target="_blank">https://phabricator.wikimedia.org/T220037</a></div><br class="gmail-m_2295805600522857044gmail-Apple-interchange-newline"></div><div>Errors related to the issue were mitigated somewhat by a backported patch to the EventBus extension. However, the 90% drop in DBTransactionError rates still left us at a hefty ~ 800 errors per minute and the root cause is yet unknown.</div><div><br></div><div>Thanks to everyone who is helping to resolve this week's issues!</div><div><br></div><div>Just a note that since we are well outside today's train deployment window and we refrain from Friday deploys, any fixes for the outstanding issue can be deployed for group0 but promotion of 1.33.0-wmf.24 will be held until Monday.</div><div><br></div><div>Kindly,</div><div>Dan</div><div dir="ltr"><br></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Wed, Apr 3, 2019 at 2:29 PM Dan Duvall <<a href="mailto:dduvall@wikimedia.org" target="_blank">dduvall@wikimedia.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div dir="ltr"><div><div>The 1.33.0-wmf.24 version of MediaWiki is blocked[0].</div><div><br></div><div>The new version is deployed to group0[1], but can proceed no further until these issues are resolved:</div><div><br></div><div>* Citoid should only usurp "<ref" / ctrl+shift+k shortcuts if full configured - <a href="https://phabricator.wikimedia.org/T219510" target="_blank">https://phabricator.wikimedia.org/T219510</a></div><div>* RefreshLinksJob::runForTitle: transaction round 'RefreshLinksJob::run' already started on commons - <a href="https://phabricator.wikimedia.org/T220037" target="_blank">https://phabricator.wikimedia.org/T220037</a></div><div><br></div><div>The first issue was deemed noncritical for group1 but the second caused a large spike in DBTransactionError rates. The second issue already has a proposed fix but had not yet merged at the closing of the train deployment window.</div><div><br></div><div>If both issues are resolved by tomorrow's train window, group1 and group2 will be promoted in succession at that time (barring further issues).</div><div><br></div><div>Thank you for your help resolving these issues!</div><div><br></div><div>Your humble train toiler,</div><div>Dan</div><div><br></div><div>[0]. <a href="https://phabricator.wikimedia.org/T206678" target="_blank">https://phabricator.wikimedia.org/T206678</a></div><div>[1]. <<a href="https://tools.wmflabs.org/versions/" target="_blank">https://tools.wmflabs.org/versions/</a>></div></div><div><br></div>-- <br><div dir="ltr" class="gmail-m_2295805600522857044gmail-m_3447934511519680259gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr">Dan Duvall<div>Software Engineer, Release Engineering</div><div><a href="http://wikimediafoundation.org" target="_blank">Wikimedia Foundation</a><br></div></div></div></div></div></div></div></div></div></div></div>
</blockquote></div><br clear="all"><div><br></div>-- <br><div dir="ltr" class="gmail-m_2295805600522857044gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr">Dan Duvall<div>Software Engineer, Release Engineering</div><div><a href="http://wikimediafoundation.org" target="_blank">Wikimedia Foundation</a><br></div></div></div></div></div></div></div></div>
</blockquote></div><br clear="all"><div><br></div>-- <br><div dir="ltr" class="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr">Dan Duvall<div>Software Engineer, Release Engineering</div><div><a href="http://wikimediafoundation.org" target="_blank">Wikimedia Foundation</a><br></div></div></div></div></div></div></div></div>