خب چرا مستقیما ران نمی‌کنید؟ jsub -once -N "weekly" -mem 1g -o /data/project/huji/err/weekly.out -e /data/project/huji/err/weekly.err /data/project/huji/core/ /data/project/huji/err/weekly.err /data/project/huji/core/scripts/weekly.py (= مسیر کامل اسکریپت شما)
این کمی بهتر است و ممکن است روی سرعت I/O تاثیر مثبت بگذارد.
گاهی متصل شدن به رپلیکاهای دیتابیس کند می‌شود که همان مشکل I/O است و حدسم این است که با انتقال به کیوبرنیتیس درست شود. اول موضوع بالا را امتحان کنید و اگر جواب نداد به کیوبرنیتیس منتقل میکنیم. On Fri, Sep 16, 2016 at 10:28 PM Huji Lee huji.huji@gmail.com wrote:
البته ناگفته نماند که من اسکپریت‌ها را با jstat روی گرید اجرا می‌کنم. شبیه این:
jsub -once -N "weekly" -mem 1g -o /data/project/huji/err/weekly.out -e /data/project/huji/err/weekly.err /data/project/huji/jobs/weekly.sh
که weekly.sh فقط یک سطر است:
python ~/core/pwb.py weekly
2016-09-16 13:48 GMT-04:00 Huji Lee huji.huji@gmail.com:
کد را در https://github.com/PersianWikipedia/fawikibot می‌توانید ببینید (چهار پروندهٔ stats.py و weekly.py و weekly-slow.py و inactive-users.py را ببینید، سه تای آخری صرفاً اولی را صدا می‌کنند که کوئری‌های مختلف را اجرا کند؛ بیشتر تاخیر مال «قبل از» اجرا شدن کوئری است).
ربات هم روی تول لبز اجرا می‌شود. حدس من هم مشکلات I/O بود. به گمانم بهتر است ربات را به پروژهٔ خودمان منتقل کنم یا به kubernetes. شما نظرتان چیست؟
2016-09-16 13:11 GMT-04:00 Amir Ladsgroup ladsgroup@gmail.com:
رباتتان در تول لبز است یا در پروژه ویکی‌فا در لبز؟ اگر در پروژه باشد که یک ماشین مجازی خاص خودش است و مشکلاتش ممکن است به دلیل کمبود رم یا سی پی یو باشد (اورس در لبز گاهی به این مشکلات برخورد می‌کرد). اگر در تول لبز است ممکن است به خاطر مشکلات نوشتن در NFS یا سرعت بسیار پایین I/O باشد که حدسم این است کیوبرنیتیس ممکن است در موردش بهتر عمل کند. نام سرویس گروپ را بدهید و اگر خواستید منتقلش میکنیم اگر هم خواستید کد را با من به اشتراک بگذارید تا نگاهی به آن بیندازم.
ارادتمند
On Fri, Sep 16, 2016 at 8:47 PM Huji Lee huji.huji@gmail.com wrote:
من نمی‌دانم مشکلی که من با آن مواجهم مربوط به این قضیه هست یا نه، اما ربات‌هایی که با پایتون اجرا می‌کنم گاهی برای یک برنامهٔ ساده ده‌ها ثانیه برای لود شدن زمان می‌برند.
روند انتقال به کیوبرنیتیس به چه شکلی است؟
2016-09-16 12:06 GMT-04:00 Amir Ladsgroup ladsgroup@gmail.com:
امروز به ارائه‌ای رسیدم که توضیح کوتاهی است چرا لبز بسیار ناپایدار بود و چگونه این مشکل رفع شده‌است. توصیه می‌کنم ببینید: https://www.youtube.com/watch?v=6XGUTu3WhBw
خلاصه‌اش این است که سیستم تول لبز که بازمانده از تول سرور بود روی سان گرید انجین ۶.۲ می‌چرخید که مشکلات خاص خودش را داشت ولی اکنون یک سامانه دوتایی شده‌است که بخش دوم از کیوبرنیتیس استفاده می‌کند و بعضی از سرویس گروپ‌ها مانند ربات من از کیوبرنیتیس هستند. کیوبرنیتیس سیستم هندل کردن سیستم‌های توزیع‌شده است که توسط گوگل برای کنترل سرورهای خودش ساخته شد و اکنون به صورت اوپن سورس دراختیار عموم است.
اگر می‌خواهید که سرویس گروپ شما به کیوبرنیتیس مهاجرت کند که سریعتر ران شود و پایدارتر باشد بگویید تا دنبال انجام دادنش بروم.
اردتمند
Wikipedia-fa-tech mailing list Wikipedia-fa-tech@lists.wikimedia.org https://lists.wikimedia.org/mailman/listinfo/wikipedia-fa-tech
Wikipedia-fa-tech mailing list Wikipedia-fa-tech@lists.wikimedia.org https://lists.wikimedia.org/mailman/listinfo/wikipedia-fa-tech
Wikipedia-fa-tech mailing list Wikipedia-fa-tech@lists.wikimedia.org https://lists.wikimedia.org/mailman/listinfo/wikipedia-fa-tech
Wikipedia-fa-tech mailing list Wikipedia-fa-tech@lists.wikimedia.org https://lists.wikimedia.org/mailman/listinfo/wikipedia-fa-tech