ضبط نواة لينكس عبر /proc/sys وsysctl: ثلاث قيم مقاسة وطريقة تثبيتها

ضبط نواة لينكس عبر /proc/sys وsysctl: ثلاث قيم مقاسة وطريقة تثبيتها

ضبط نواة لينكس لا يحتاج إعادة تجميعها في أغلب الحالات، فآلاف القيم التي تحكم الشبكة والذاكرة والملفات مكشوفة كملفات نصية تحت ‎/proc/sys، تُقرأ وتُكتب أثناء العمل بالأمر sysctl. والخطر أن تُنسخ قيم من مقالات قديمة دون معرفة ما تفعله. لذلك نأخذ هنا ثلاث قيم شائعة ونقيس أثر كل منها في آلة QEMU بنواة أوبونتو 6.8: طابور الاتصالات المنتظرة somaxconn، وحد الملفات المفتوحة، وحدود الصفحات المتسخة في الذاكرة. ثم نثبت القيم بعد إعادة الإقلاع، ونرى لماذا لا تنطبق بعض القيم على كل النظام.

نمر بمحتوى ‎/proc/sys، والقيم التي ترفضها النواة، ثم طابور somaxconn، وحد الملفات المفتوحة، والصفحات المتسخة، وأخيراً التثبيت ومساحات أسماء الشبكة.

ما في ‎/proc/sys

sysctl -a 2>/dev/null | wc -l          # 1017
sysctl -a 2>/dev/null | cut -d. -f1 | sort | uniq -c | sort -rn
#  721 net   147 kernel   48 vm   43 fs   43 dev   12 user   2 debug   1 abi
sysctl vm.swappiness                    # vm.swappiness = 60
cat /proc/sys/vm/swappiness             # 60  (same value, dots become slashes)
قيم النواة حسب الفرع
قيم النواة حسب الفرع

في هذه النواة 1017 قيمة، أكثر من ثلثيها للشبكة. والاسم بالنقاط في sysctl هو المسار نفسه تحت ‎/proc/sys بالشرطات المائلة، فالكتابة بأي من الطريقتين واحدة. والفروع الأساسية: kernel لسلوك النواة العام، وvm للذاكرة، وfs لأنظمة الملفات والحدود، وnet للشبكة. وكل تغيير بالكتابة المباشرة يعمل فوراً ويضيع عند إعادة الإقلاع، وهذا مفيد للتجربة: غيّر، قِس، ثم ثبّت ما ينفع فقط.

ما ترفضه النواة

sysctl -w kernel.osrelease=x     sysctl: setting key "kernel.osrelease": Operation not permitted
sysctl -w vm.swappiness=500      sysctl: setting key "vm.swappiness": Invalid argument

بعض القيم للقراءة فقط كإصدار النواة، وبعضها له مدى محدد، فـ swappiness تقبل من 0 إلى 200 ورفضت 500. والنواة لا تصحح القيمة الخاطئة بصمت، بل تعيد خطأ، لكن sysctl –system الذي يطبق ملفات الإعداد عند الإقلاع يكمل بعد الخطأ، فقد يفوتك أن سطراً لم يُطبق. لذلك اقرأ القيمة بعد كتابتها دائماً.

طابور الاتصالات net.core.somaxconn

server: listen(4096) on 127.0.0.1:9000, never calls accept()
client: 300 concurrent connects, 3 s timeout

somaxconn   ss Send-Q   connected   failed   TcpExtListenOverflows
4096        4096        300         0        0
64          64          65          235      596
طابور somaxconn
طابور somaxconn

حين يصل اتصال ولم يقبله البرنامج بعد، ينتظر في طابور طوله ما طلبه البرنامج في listen، لكن النواة تقصه إلى somaxconn. وفي هذه النواة القيمة الافتراضية 4096، فقبل الطابور الاتصالات الثلاثمئة كلها وظهرت في ss منتظرة. ثم خفضناها إلى 64 كما كانت في النوى القديمة، فدخل 65 اتصالاً وفشل 235 بانتهاء المهلة، وسجل العدّاد ListenOverflows 596 محاولة رُفضت لأن العميل يعيد المحاولة. والدرس مزدوج: رفع somaxconn لا يفيد إن طلب البرنامج طابوراً صغيراً، فإعداد Nginx مثلاً له backlog خاص به، والعدّاد ListenOverflows في nstat هو الدليل على أن الطابور يمتلئ فعلاً. وأساسيات الاتصال والمنافذ في أساسيات الشبكات في لينكس.

حد الملفات المفتوحة: fs.file-max ليس السبب

fs.file-max = 148208      fs.nr_open = 1048576      file-nr: 64 0 148208
ulimit -n 1024   python opens /dev/null in a loop  ->  1021 [Errno 24] Too many open files
ulimit -n 20000  same loop up to 15000           ->  opened 15000
حد الملفات المفتوحة
حد الملفات المفتوحة

رسالة Too many open files تدفع كثيرين إلى رفع fs.file-max، وهو حد النظام كله، وكان 148208 بينما المستعمل 64 فقط. والحد الذي اصطدم به البرنامج هو حد العملية ulimit -n، وقيمته الافتراضية 1024، فتوقف عند 1021 لأن ثلاثة واصفات مفتوحة أصلاً للإدخال والإخراج والأخطاء. ورفع حد العملية إلى 20000 سمح بفتح 15000 دون تغيير أي قيمة في ‎/proc/sys. والسقف الأعلى لحد العملية هو fs.nr_open. وفي خدمة systemd يُضبط هذا بالخاصية LimitNOFILE، وللمستخدمين في limits.conf.

الصفحات المتسخة vm.dirty_*

write 120 MB with dd (no fsync), then read Dirty from /proc/meminfo, then time sync

setting                                   Dirty after dd   sync time
dirty_ratio=20, background_ratio=10       122880 kB        0.31 s, 0.22 s
dirty_bytes=8M, background_bytes=4M         4096 kB        0.12 s, 0.08 s
الصفحات المتسخة
الصفحات المتسخة

الكتابة العادية لا تذهب إلى القرص فوراً، بل تبقى صفحات متسخة في الذاكرة وتكتبها النواة لاحقاً. ومع النسب الافتراضية، 20 بالمئة من الذاكرة المتاحة، بقيت الـ 120 ميغابايت كلها في الذاكرة بعد انتهاء dd، أي أن انقطاع الكهرباء في تلك اللحظة كان سيضيعها كلها إن لم يطلب البرنامج fsync. ومع حد 8 ميغابايت بقي 4 ميغابايت فقط، وصار sync بعدها أقصر. أما زمن dd نفسه فتذبذب بين التجارب، لأن القرص هنا ملف في ذاكرة المضيف أسرع من أي قرص حقيقي، فلم يظهر الخنق الذي يحدث على قرص بطيء. والحدود الصغيرة تفيد في جهاز بذاكرة كبيرة وقرص بطيء حتى لا تتراكم غيغابايتات ثم تُكتب دفعة واحدة، وعلاقتها بضغط الذاكرة في إدارة الذاكرة وswap.

التثبيت ومساحات أسماء الشبكة

cat > /etc/sysctl.d/90-lab.conf <<'EOF'
net.core.somaxconn = 1024
vm.swappiness = 10
EOF
sysctl --system | grep 90-lab        # * Applying /etc/sysctl.d/90-lab.conf ...
sysctl net.core.somaxconn             # 1024
ip netns add t1
ip netns exec t1 sysctl net.core.somaxconn    # 4096  (new namespace, own default)
التثبيت ومساحات الأسماء
التثبيت ومساحات الأسماء

القيم الدائمة تُكتب في ملف تحت ‎/etc/sysctl.d باسم يبدأ برقم، وتُطبق الملفات بترتيب أسمائها، فالرقم الأكبر يغلب. وsysctl –system طبق ملفنا وأظهر القيمتين. ثم أنشأنا مساحة أسماء شبكة جديدة، كالتي تعمل فيها كل حاوية، فوجدنا somaxconn فيها 4096 لا 1024، لأن كثيراً من قيم net خاصة بكل مساحة أسماء. فالقيمة التي ضبطتها على المضيف قد لا تصل إلى الحاويات، وتُضبط لها من إعداد الحاوية نفسها، كالخيار ‎–sysctl في Docker.

أخطاء شائعة

نسخ قوائم sysctl جاهزة

كثير منها لنوى قديمة، وبعض قيمها صار افتراضياً أو أسوأ من الافتراضي الحالي.

رفع fs.file-max لحل Too many open files

الحد غالباً حد العملية، فاضبط LimitNOFILE أو ulimit.

الكتابة دون قراءة النتيجة

القيمة المرفوضة تبقى على حالها، فتحقق بعد كل كتابة.

افتراض أن قيم المضيف تصل إلى الحاويات

قيم الشبكة لكل مساحة أسماء، كما رأينا مع somaxconn.

أسئلة يطرحها الناس

ما الفرق بين ‎/etc/sysctl.conf و‎/etc/sysctl.d؟

كلاهما يُقرأ، والمجلد أسهل في الإدارة لأن لكل غرض ملفه، ويمكن حذفه دون لمس غيره.

هل يلزم إعادة الإقلاع بعد تعديل الملف؟

لا، يكفي sysctl –system أو sysctl -p مع اسم الملف، ثم اقرأ القيمة.

الخلاصة

في 1017 قيمة، أثرت somaxconn مباشرة: عند 4096 دخلت 300 اتصال من 300، وعند 64 دخل 65 وفشل 235 مع 596 حالة امتلاء للطابور. ورسالة Too many open files جاءت من حد العملية 1024 لا من fs.file-max البالغ 148208. وحد 8 ميغابايت للصفحات المتسخة أبقى 4 ميغابايت في الذاكرة بدل 120. وما يُثبت في ‎/etc/sysctl.d لا يصل تلقائياً إلى مساحة أسماء شبكة جديدة.