<div dir="rtl"><div dir="ltr">Is the backfilling done? I see some data, but I can't be sure whether it's complete.</div></div><div class="gmail_extra"><br><div class="gmail_quote"><div dir="ltr">2016-01-25 20:34 GMT+02:00 Nuria Ruiz <span dir="ltr"><<a href="mailto:nuria@wikimedia.org" target="_blank">nuria@wikimedia.org</a>></span>:</div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div dir="ltr">We are working at this time on backfilling data for the scheduled maintenance, we shall report when we think backlogging has finished.<div><br></div><div>Thanks, </div><div><br></div><div>Nuria</div></div><div class="gmail_extra"><br><div class="gmail_quote"><div><div class="h5">On Mon, Jan 25, 2016 at 5:34 AM, Oliver Keyes <span dir="ltr"><<a href="mailto:okeyes@wikimedia.org" target="_blank">okeyes@wikimedia.org</a>></span> wrote:<br></div></div><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex"><div><div class="h5">Awesome; thanks :). Anything on the switchon time? (I appreciate it's<br>
only barely Monday ;p)<br>
<div><div><br>
On 21 January 2016 at 11:36, Andrew Otto <<a href="mailto:otto@wikimedia.org" target="_blank">otto@wikimedia.org</a>> wrote:<br>
> FYI, This has started.  I have turned off the MySQL processes.  No new data<br>
> will be inserted into MySQL until we turn them back on.<br>
><br>
> On Wed, Jan 20, 2016 at 4:43 PM, Andrew Otto <<a href="mailto:otto@wikimedia.org" target="_blank">otto@wikimedia.org</a>> wrote:<br>
>><br>
>> (+Jaime)<br>
>><br>
>> It’s hard to tell how long it will take, but I imagine for quite a while.<br>
>> I guess a day max, but probably much less.  If Jaime let’s me know that he’s<br>
>> finished early, and I am close enough to a computer, I’ll turn the<br>
>> EventLogging MySQL processes back on asap.<br>
>><br>
>><br>
>><br>
>> On Wed, Jan 20, 2016 at 4:12 PM, Oliver Keyes <<a href="mailto:okeyes@wikimedia.org" target="_blank">okeyes@wikimedia.org</a>><br>
>> wrote:<br>
>>><br>
>>> Thanks Madhu! Awesome to see the transparency and announces around this<br>
>>> :D.<br>
>>><br>
>>> Do you know how long the reimport should take on Monday? I want to<br>
>>> make sure I know when to expect we can safely launch all our scripts.<br>
>>><br>
>>> On 20 January 2016 at 13:08, Madhumitha Viswanathan<br>
>>> <<a href="mailto:mviswanathan@wikimedia.org" target="_blank">mviswanathan@wikimedia.org</a>> wrote:<br>
>>> > Hi all,<br>
>>> ><br>
>>> > In order to convert tables on db1046 to the TokuDB engine - we have to<br>
>>> > schedule some downtime on the Eventlogging databases between tomorrow,<br>
>>> > Thursday Jan 21, 2016 at 16:00 UTC to Monday Jan 25, 2016 16:00 UTC.<br>
>>> ><br>
>>> > What this means for EL users:<br>
>>> ><br>
>>> > 1. Eventlogging will still receive data and it will be available in<br>
>>> > Kafka.<br>
>>> > The data will continue to be imported into Hadoop and files.<br>
>>> > 2. The Mysql consumers of Eventlogging will be stopped, so no data will<br>
>>> > get<br>
>>> > imported into the master(db1046 or m4-master) and by extension to the<br>
>>> > analytics-store.<br>
>>> > 3. Querying existing data from analytics-store will still be available,<br>
>>> > but<br>
>>> > data for the next 4 days won't be available.<br>
>>> > 4. On Monday, after the maintenance window we'll restart the Mysql<br>
>>> > consumers, and all the data should get reimported from Kafka.<br>
>>> ><br>
>>> > Analytics and Ops(DBA) will work on this together.<br>
>>> ><br>
>>> > Feel free to reach out to us here or on #wikimedia-analytics if you<br>
>>> > have any<br>
>>> > concerns/questions.<br>
>>> ><br>
>>> ><br>
>>> > -- Madhu Viswanathan<br>
>>> > Software Engineer, Analytics<br>
>>> ><br>
>>> > _______________________________________________<br>
>>> > Engineering mailing list<br>
>>> > <a href="mailto:Engineering@lists.wikimedia.org" target="_blank">Engineering@lists.wikimedia.org</a><br>
>>> > <a href="https://lists.wikimedia.org/mailman/listinfo/engineering" rel="noreferrer" target="_blank">https://lists.wikimedia.org/mailman/listinfo/engineering</a><br>
>>> ><br>
>>><br>
>>><br>
>>><br>
>>> --<br>
>>> Oliver Keyes<br>
>>> Count Logula<br>
>>> Wikimedia Foundation<br>
>>><br>
>>> _______________________________________________<br>
>>> Engineering mailing list<br>
>>> <a href="mailto:Engineering@lists.wikimedia.org" target="_blank">Engineering@lists.wikimedia.org</a><br>
>>> <a href="https://lists.wikimedia.org/mailman/listinfo/engineering" rel="noreferrer" target="_blank">https://lists.wikimedia.org/mailman/listinfo/engineering</a><br>
>><br>
>><br>
><br>
<br>
<br>
<br>
--<br>
Oliver Keyes<br>
Count Logula<br>
Wikimedia Foundation<br>
<br>
_______________________________________________<br>
</div></div></div></div>Analytics mailing list<br>
<a href="mailto:Analytics@lists.wikimedia.org" target="_blank">Analytics@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/analytics" rel="noreferrer" target="_blank">https://lists.wikimedia.org/mailman/listinfo/analytics</a><br>
</blockquote></div><br></div>
<br>_______________________________________________<br>
Engineering mailing list<br>
<a href="mailto:Engineering@lists.wikimedia.org">Engineering@lists.wikimedia.org</a><br>
<a href="https://lists.wikimedia.org/mailman/listinfo/engineering" rel="noreferrer" target="_blank">https://lists.wikimedia.org/mailman/listinfo/engineering</a><br>
<br></blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature"><div dir="rtl">Amir Elisha Aharoni‏ ። אָמִיר אֱלִישָׁע אַהֲרוֹנִי<br>Language Engineering‏ ። הַנְדָּסָה לְשׁוֹנִית<br>Wikimedia Foundation‏ ። קֶרֶן וִיקִימֶדְיָה</div></div>
</div>