<div dir="ltr">Hi,<br><br><div>all problems have been resolved and I have deployed 1.32.0-wmf.14 to all wikis about 30 minutes ago. So far logs look good to me.</div><div><br></div><div>I have started working on incident report:</div><div><br></div><div><a href="https://wikitech.wikimedia.org/wiki/Incident_documentation/20180724-Train">https://wikitech.wikimedia.org/wiki/Incident_documentation/20180724-Train</a></div><div><br></div><div>If you can help me finish it, please do.</div><div><br></div><div>Thanks,</div><div><br></div><div>Željko<br></div></div><br><div class="gmail_quote"><div dir="ltr">On Thu, Jul 26, 2018 at 8:27 PM Željko Filipin <<a href="mailto:zfilipin@wikimedia.org">zfilipin@wikimedia.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr"><div>Hi,<br></div><div><br></div><div>the train is still blocked.</div><br>Problems from the previous e-mail 
message are resolved, the new version is deployed to groups 0 and 1 but can proceed no further until these issues are 
resolved:<br><br>- MapCacheLRU::has called with invalid key. Must be string or integer - <a href="https://phabricator.wikimedia.org/T200456" target="_blank">https://phabricator.wikimedia.org/T200456</a><br><br>Once
 these issues are resolved train can resume. If the task is resolved on Friday or over the 
weekend, the train will resume Monday.<div class="m_1090227615487085088gmail-yj6qo m_1090227615487085088gmail-ajU"><div class="m_1090227615487085088gmail-adL"><img class="m_1090227615487085088gmail-ajT" src="https://ssl.gstatic.com/ui/v1/icons/mail/images/cleardot.gif"><span class="m_1090227615487085088gmail-im"><br>Thank you for your help resolving these issues!<br><br>Željko</span></div></div><br></div><br><div class="gmail_quote"><div dir="ltr">On Thu, Jul 26, 2018 at 5:33 PM Željko Filipin <<a href="mailto:zfilipin@wikimedia.org" target="_blank">zfilipin@wikimedia.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">The train is still blocked.<br><br>Problems from the previous e-mail message are resolved, the new version is deployed to groups 0 and 1 (except wikidata) but can proceed no further until these issues are resolved:<br><br>* Wikidata dispatching stuck - <a href="https://phabricator.wikimedia.org/T200420" target="_blank">https://phabricator.wikimedia.org/T200420</a><br><br>Once these issues are resolved train can resume. Since it's already Thursday afternoon for me, if the task is resolved on Friday or over the weekend, the train will resume Monday.<br><br>Thank you for your help resolving these issues!<br><br>Željko<br><br><div class="gmail_quote"><div dir="ltr">On Wed, Jul 25, 2018 at 6:14 PM Željko Filipin <<a href="mailto:zfilipin@wikimedia.org" target="_blank">zfilipin@wikimedia.org</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Hi,<br><br>1.32.0-wmf.14 version of MediaWiki is blocked [0].<br><br>The new version is deployed to group 0 [1], but can proceed no further until these issues are resolved:<br><br>- Wikibase\DataModel\Entity\EntityIdParsingException $serialization must not be an empty string - <a href="https://phabricator.wikimedia.org/T200340" target="_blank">https://phabricator.wikimedia.org/T200340</a><br><br>- wmf.14 failing to execute ThumbnailRender jobs "error: ThumbnailRenderJob::run: HTTP request failure" - <a href="https://phabricator.wikimedia.org/T200346" target="_blank">https://phabricator.wikimedia.org/T200346</a><br><br>Once these issues are resolved train can resume. If these issues are<br>resolved on a Friday the train will resume Monday.<br><br>Thank you for your help resolving these issues!<br><br>Željko<br>--<br>[0] <a href="https://phabricator.wikimedia.org/T191060" target="_blank">https://phabricator.wikimedia.org/T191060</a><br>[1] <a href="https://tools.wmflabs.org/versions" target="_blank">https://tools.wmflabs.org/versions</a></div>
</blockquote></div></div>
</blockquote></div>
</blockquote></div>