كل المقالات التقنية

تشخيص Load Average المرتفع وI/O Wait في Linux

منهج عملي لتشخيص Load Average المرتفع وI/O Wait في Linux باستخدام uptime وvmstat وiostat وpidstat وPSI بدون إعادة تشغيل عشوائية.

تشخيص Load Average المرتفع وI/O Wait في Linux

لا يعني ارتفاع Load Average دائماً أن المعالج ممتلئ. يحسب Linux المهام الجاهزة للتنفيذ والمهام العالقة في انتظار I/O، لذلك قد ترى Load مرتفعاً مع بقاء جزء من CPU في حالة idle. المطلوب هو تحديد المورد الذي يجعل العمل ينتظر قبل اتخاذ أي قرار.

اقرأ Load ضمن سياقه

يعرض uptime متوسط دقيقة وخمس وخمس عشرة دقيقة. قارِن القيم بعدد الأنوية وبزمن استجابة الخدمة. ارتفاع الدقيقة الواحدة فقط يعني غالباً موجة حديثة، بينما ارتفاع النوافذ الثلاث يشير إلى ضغط مستمر.

nproc
uptime
cat /proc/loadavg

افصل ضغط CPU عن انتظار I/O

شغّل vmstat 1 وراقب r وb وwa. صف runnable طويل مع CPU مشغول يشير إلى ضغط المعالج. ازدياد المهام blocked وI/O wait مع وجود CPU idle يشير غالباً إلى التخزين أو swap أو نظام ملفات شبكي بطيء.

vmstat 1
mpstat -P ALL 1
pidstat -u -d 1

حدد القرص والعملية المسببة

خذ عدة عينات باستخدام iostat -xz 1. راقب latency وqueue depth وthroughput، ولا تعتمد على رقم واحد. النسخ الاحتياطي، ضغط السجلات، database checkpoints وswap أسباب شائعة. في الخوادم الافتراضية قد يكشف steal time المرتفع عن ازدحام المضيف.

iostat -xz 1
iotop -oPa
lsblk -o NAME,FSTYPE,SIZE,MOUNTPOINTS

استخدم PSI لقياس التوقف الفعلي

تعرض النوى الحديثة ضغط CPU وmemory وI/O داخل /proc/pressure. توضح القيم مقدار الوقت الذي تعطلت فيه المهام بسبب نقص المورد. ارتفاع full في memory أو I/O مهم لأنه يعني أن جميع المهام غير الخاملة توقفت معاً.

for f in /proc/pressure/{cpu,memory,io}; do echo ===$f; cat $f; done

احفظ الأدلة قبل restart

قد يعيد restart الخدمة لكنه يمحو أفضل الأدلة. سجّل PID والأمر ووقت البدء والملفات المفتوحة، واربط الحدث مع cron أو backup أو deploy أو قفزة الزيارات. قد يكون الحل تحسين query أو ضبط concurrency أو نقل job ثقيل أو زيادة IOPS.

قائمة فحص سريعة

  • قارِن Load بعدد الأنوية واتجاه 1/5/15 دقيقة.
  • استخدم vmstat للتمييز بين runnable وblocked.
  • استخدم iostat وpidstat لتحديد الجهاز والعملية.
  • افحص memory pressure وswap وsteal time وPSI.
  • احفظ الأدلة قبل kill أو restart.

أسئلة شائعة

هل Load المرتفع مشكلة دائماً؟

لا. يجب مقارنته بعدد الأنوية وزمن الاستجابة وطبيعة الحمل. ارتفاع قصير أثناء backup قد يكون مقبولاً، أما الارتفاع المستمر مع بطء الخدمة فيحتاج معالجة.

هل %util يساوي 100% يعني أن القرص تالف؟

ليس بالضرورة. افحص latency وqueue depth وthroughput والأخطاء وحدود مزود التخزين.

بأي أوامر أبدأ؟

ابدأ بـ uptime وvmstat 1 وiostat -xz 1، ثم استخدم pidstat أو iotop للوصول إلى العملية المسؤولة.

أدلة مرتبطة

مراجع تقنية: وثائق Linux Kernel حول PSI وإحصاءات I/O، ودليل proc_loadavg.