ESC را فشار دهید تا بسته شود

رفع خطای Cannot assign requested address در لینوکس؛ عیب‌یابی Ephemeral Port Exhaustion

فهرست

خطای Cannot assign requested address در لینوکس همیشه به معنی اشتباه بودن IP نیست. روی سرورهایی که اتصال خروجی زیادی می‌سازند، یکی از علت‌های مهم Ephemeral Port Exhaustion است: کرنل برای اتصال جدید پورت محلی آزاد مناسبی پیدا نمی‌کند. قبل از تغییر تنظیمات Kernel باید ثابت کنید مشکل واقعاً از پورت‌های موقت است.

نشانه‌های تمام شدن Ephemeral Port در لینوکس

سناریوی رایج این است که وب‌سرور، Proxy، Crawler یا Worker مدتی درست کار می‌کند و سپس اتصال‌های خروجی جدید Fail می‌شوند، در حالی که اتصال‌های موجود هنوز ممکن است سالم باشند. خطای برنامه می‌تواند Cannot assign requested address باشد.

ss -s
ss -Htan state time-wait | wc -l
ss -Htan state established | wc -l

عدد بالای TIME_WAIT به‌تنهایی اثبات مشکل نیست. آن را همراه با Range پورت محلی، مقصد اتصال‌ها و نرخ ایجاد Connection بررسی کنید.

مرحله ۱: ip_local_port_range را بررسی کنید

کرنل لینوکس برای انتخاب خودکار پورت محلی TCP و UDP از ip_local_port_range استفاده می‌کند:

sysctl net.ipv4.ip_local_port_range
cat /proc/sys/net/ipv4/ip_local_port_range
sysctl net.ipv4.ip_local_reserved_ports

مقدار واقعی سرور شما ملاک است. پورت‌های رزروشده را نیز بررسی کنید، چون هنگام تخصیص خودکار در نظر گرفته می‌شوند.

مرحله ۲: مقصد پرتکرار را پیدا کنید

ss -Htan | awk '{print $5}' | sort | uniq -c | sort -nr | head -20
ss -Htan state time-wait | awk '{print $5}' | sort | uniq -c | sort -nr | head -20

اگر یک API، دیتابیس یا Proxy سهم بزرگی دارد، قبل از تغییر Kernel بررسی کنید آیا برنامه می‌تواند Connection Pooling یا Keep-Alive داشته باشد.

مرحله ۳: Process ایجادکننده اتصال‌ها را پیدا کنید

sudo ss -Htanp
sudo ss -Htanp state established | head -100

اگر یک سرویس هزاران اتصال کوتاه ایجاد می‌کند، اصلاح رفتار برنامه معمولاً از افزایش کورکورانه Limit بهتر است. اگر مشکل شما File Descriptor است، راهنمای رفع خطای Too many open files در لینوکس را ببینید.

مرحله ۴: TIME_WAIT را درست تفسیر کنید

ss -s
ss -Htan state time-wait | wc -l
sysctl net.ipv4.tcp_max_tw_buckets
sysctl net.ipv4.tcp_tw_reuse

TIME_WAIT بخشی طبیعی از TCP است. مستندات Kernel درباره تغییر tcp_tw_reuse بدون دلیل فنی هشدار می‌دهند؛ آن را به‌عنوان ترفند عمومی فعال نکنید.

مرحله ۵: Ephemeral Port Exhaustion را اثبات کنید

در لحظه خطا Snapshot بگیرید و با Timestamp لاگ برنامه مقایسه کنید:

date
sysctl net.ipv4.ip_local_port_range
sysctl net.ipv4.ip_local_reserved_ports
ss -s
ss -Htan state time-wait | wc -l
ss -Htan state established | wc -l

اگر خطای Cannot assign requested address هم‌زمان با فشار روی اتصال‌های خروجی ظاهر و پس از افت Connectionها ناپدید می‌شود، شواهد قوی‌تری برای Port Exhaustion دارید.

مرحله ۶: اول Connectionهای غیرضروری را کم کنید

برای HTTP Clientها Keep-Alive و Connection Pooling را بررسی کنید، برای Database Clientها Pool مناسب بسازید و Retry Storm را با Backoff کنترل کنید. اگر مشکل بعد از تغییر Route یا چندکارت‌شبکه شروع شده، عیب‌یابی rp_filter و Asymmetric Routing روی VPS لینوکس را بررسی کنید.

مرحله ۷: در صورت نیاز Range پورت را با احتیاط افزایش دهید

اگر اندازه‌گیری نشان داد Range فعلی کافی نیست، مقدار جدید را ابتدا موقت اعمال کنید. مثال زیر را بدون بررسی تداخل با پورت‌های رزروشده کپی نکنید:

sudo sysctl -w net.ipv4.ip_local_port_range="20000 60999"

بعد از تست موفق می‌توانید تنظیم را در فایل اختصاصی sysctl پایدار کنید. طبق مستندات Kernel بهتر است دو انتهای Range parity متفاوت داشته باشند و Range با ip_unprivileged_port_start سازگار باشد.

Verify بعد از اصلاح

sysctl net.ipv4.ip_local_port_range
ss -s
ss -Htan state time-wait | wc -l
ss -Htan state established | wc -l

تست واقعی Application را اجرا کنید و نرخ Error، Latency و Retry را قبل و بعد مقایسه کنید. اگر هم‌زمان فشار حافظه دارید، عیب‌یابی OOM Killer در لینوکس را جداگانه انجام دهید.

Rollback امن

مقدار اولیه را قبل از تغییر ثبت کنید. اگر مقدار قبلی مثلاً 32768 60999 بوده، همان مقدار ثبت‌شده را برگردانید:

sudo sysctl -w net.ipv4.ip_local_port_range="32768 60999"

هیچ مقدار پیش‌فرضی را از مقاله برای سرور خود فرض نکنید؛ Snapshot قبل از تغییر مرجع Rollback است.

چه زمانی تغییر معماری لازم است؟

افزایش RAM یا CPU مستقیماً Port Exhaustion را حل نمی‌کند. برای Workload پرتراکنش ممکن است Connection Pooling، چند Source IP، توزیع Workerها یا چند Instance لازم باشد. برای زیرساخت مستقل نیز مشخصات سرور مجازی وان‌سرور را می‌توانید متناسب با معماری سرویس بررسی کنید.

سوالات رایج

چرا در لینوکس Cannot assign requested address می‌گیریم؟

علت‌های مختلف دارد؛ در اتصال‌های خروجی پرتعداد یکی از علت‌های مهم تمام شدن پورت‌های موقت است. با ss، ip_local_port_range و لاگ برنامه باید آن را اثبات کنید.

آیا TIME_WAIT زیاد یعنی سرور مشکل دارد؟

خیر. TIME_WAIT طبیعی است و زمانی مهم می‌شود که همراه با خطای اتصال و فشار روی محدوده پورت محلی باشد.

آیا tcp_tw_reuse را فعال کنیم؟

به‌صورت پیش‌فرض نه. ابتدا علت ایجاد اتصال‌های زیاد، Connection Pooling و محدوده پورت محلی را بررسی کنید.

منابع فنی

Rate this post
اشتراک گذاری نوشته در:

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *