<div dir="ltr">Hey y'all,<div><br></div><div>I just realized I hadn't sent this out sooner! Sorry.</div><div><br></div><div>Ops meeting notes</div><div><br></div><div>* Meeting notes at - <a href="https://office.wikimedia.org/wiki/Operations/Operations_Meeting_Notes/TechOps-2017-07-03">https://office.wikimedia.org/wiki/Operations/Operations_Meeting_Notes/TechOps-2017-07-03</a></div><div>* The ganeti incident has documentation now if you were interested - <a href="https://wikitech.wikimedia.org/wiki/Incident_documentation/20170629-ganeti">https://wikitech.wikimedia.org/wiki/Incident_documentation/20170629-ganeti</a></div><div>* They gave updates on all the final goals for the upcoming quarter - cumin and salt deprecation on labs was mentioned.</div><div>* DB team brought up <a href="https://phabricator.wikimedia.org/T169488">https://phabricator.wikimedia.org/T169488</a> for our attention, Bryan already responded</div><div>* Ops offsite - I brought this up and we talked about it for a few minutes. Summary is - nothing is decided yet, Mark has just started to worry about it a bit, and with no Rachel to help, and no decisions on when the managers' meeting is, everything is up in the air at this point. They are looking for volunteers to form an organizing team, ping Mark if you're interested.</div><div><br></div><div>Clinic duty updates</div><div>* Both quarry and PAWS had issues on Friday - both were 'fixed' by me/Bryan by restarting things. We should learn more about these services and how they are set up!</div><div>* <a href="https://phabricator.wikimedia.org/T169118">https://phabricator.wikimedia.org/T169118</a> was reported, I don't have a lot of context here, and I haven't responded to it yet because I haven't looked enough</div><div>* Folks still don't really ping me or use !help so I'm not responding if I'm not constantly watching the channel.</div><div>* There have been couple pings about mysterious data disappearance - Stas reported that his data on /data/scratch/wdqs was missing and had to rebuild it. SigmaWP reported files missing on his tool sigma at ~/cherry/cherryhtml/, things seem normal to me - it doesn't seem like the two are related either, just really weird. He reported it late evening today, so I haven't looked at the backup in codfw yet and compared, but will check tomorrow.</div><div><br></div><div><div>Best,</div>-- <br><div class="gmail-m_3520502899853213872gmail_signature"><div dir="ltr">Madhu :)</div></div>
</div></div>