ESC را فشار دهید تا بسته شود

رفع خطای Read-only file system در لینوکس؛ عیب‌یابی Mount، I/O Error و fsck آفلاین

فهرست

اگر در لینوکس هنگام ذخیره فایل، نصب بسته یا اجرای سرویس خطای Read-only file system می‌بینید، ابتدا بررسی کنید پارتیشنِ همان مسیر با گزینه ro Mount شده یا کرنل به‌دلیل خطای فایل‌سیستم/دیسک آن را فقط‌خواندنی کرده است. برای تشخیص سریع از findmnt -T، لاگ کرنل و lsblk استفاده کنید. اگر در لاگ I/O error یا EXT4-fs error وجود دارد، پیش از هر تعمیر، از داده‌ها نسخه پشتیبان و در صورت امکان Snapshot معتبر تهیه کنید؛ اجرای کورکورانه mount -o remount,rw یا fsck روی پارتیشن در حال استفاده ممکن است خرابی را تشدید کند.

خطای Read-only file system چه معنی دارد و با Permission denied چه فرقی می‌کند؟

این پیام معمولاً متن خطای EROFS است؛ یعنی سیستم فایل یا لایه Mount اجازه نوشتن ندارد. این موضوع با EACCES (نبود مجوز کاربر)، ENOSPC (اتمام فضا یا inode) و EDQUOT (سهمیه پرشده) متفاوت است. تغییر مالکیت یا اجرای chmod -R 777 روی یک Mount واقعاً فقط‌خواندنی مشکل را حل نمی‌کند.

برای مثال، ممکن است / قابل نوشتن باشد اما /var/lib/mysql روی یک Volume جداگانه فقط‌خواندنی شده باشد؛ بنابراین همیشه Mount مربوط به مسیر خطادار را بررسی کنید، نه صرفاً ریشه سیستم.

مرحله ۱: مسیر خطادار و وضعیت Mount را بدون تغییر سیستم شناسایی کنید

در مثال زیر /var/lib/mysql را با مسیر واقعیِ دارای خطا جایگزین کنید. دستورها فقط وضعیت را می‌خوانند:

findmnt -T /var/lib/mysql -o TARGET,SOURCE,FSTYPE,OPTIONS
findmnt -T / -o TARGET,SOURCE,FSTYPE,OPTIONS
lsblk -o NAME,SIZE,FSTYPE,RO,MOUNTPOINTS
df -hT
df -i

در ستون OPTIONS وجود ro یعنی Mount فقط‌خواندنی است؛ rw یعنی از دید همان Mount اجازه نوشتن وجود دارد. ستون RO در lsblk وضعیت فقط‌خواندنی خود Block Device را نشان می‌دهد و لزوماً با Mount Option یکسان نیست. ستون SOURCE نیز مشخص می‌کند مسیر روی کدام پارتیشن، LVM یا Volume قرار دارد.

خروجی نمونه:

TARGET SOURCE         FSTYPE OPTIONS
/      /dev/vda2      ext4   ro,relatime

این خروجی نشان می‌دهد ریشه روی /dev/vda2 با ro Mount شده؛ اما هنوز علت را مشخص نمی‌کند. اگر df -h فضای خالی نشان می‌دهد ولی برنامه پیام No space left on device می‌دهد، پیش از هر تعمیر فایل‌سیستم، راهنمای تشخیص پر شدن inode در لینوکس را بررسی کنید؛ خطای کمبود inode با EROFS یکی نیست.

مرحله ۲: از لاگ کرنل بفهمید چرا پارتیشن فقط‌خواندنی شده است

یکی از دلایل مهم، خطای خواندن/نوشتن دیسک یا ناسازگاری متادیتای فایل‌سیستم است. برای مشاهده رویدادهای بوت جاری و یافتن پیام‌های مرتبط:

sudo journalctl -k -b --no-pager | grep -Ei 'I/O error|Buffer I/O|EXT4-fs|XFS|BTRFS|read-only|remount' | tail -n 80
sudo journalctl -p err -b --no-pager | tail -n 80
sudo dmesg -T | tail -n 100

نمونه نشانه‌های مهم عبارت‌اند از EXT4-fs error، Remounting filesystem read-only، Buffer I/O error یا خطای دستگاه در لایه Block. وجود این پیام‌ها دلیل کافی برای فعال‌کردن مجدد نوشتن نیست؛ ممکن است دیسک فیزیکی، Storage میزبان، کنترلر، فایل‌سیستم یا مسیر مجازی‌سازی دچار اختلال باشد.

اگر لاگ بوت جاری چیزی نشان نداد، لاگ بوت قبلی را در صورت وجود بررسی کنید:

journalctl --list-boots
sudo journalctl -k -b -1 --no-pager | tail -n 120

اگر journalctl -b -1 خروجی ندارد، ممکن است Journal دائمی فعال نباشد؛ این به‌تنهایی نشانه سالم‌بودن دیسک نیست. در VPS، دسترسی به SMART یا لاگ دیسک فیزیکی اغلب محدود است؛ از پنل یا پشتیبانی میزبان نیز وضعیت Storage را استعلام کنید.

مرحله ۳: تفاوت Mount فقط‌خواندنیِ عمدی با خرابی واقعی را تشخیص دهید

قبل از تغییر تنظیمات، نوع فایل‌سیستم و سیاست Mount را بررسی کنید:

findmnt -T /var/lib/mysql -o TARGET,SOURCE,FSTYPE,OPTIONS
findmnt --verify
grep -vE '^[[:space:]]*(#|$)' /etc/fstab
cat /proc/mounts | grep -E ' / |/var/lib/mysql '

فایل /etc/fstab ممکن است عمداً یک مسیر را با ro Mount کند. همچنین یک Volume بازیابی، رسانه ISO، Overlay یا Mount کانتینر می‌تواند به‌صورت طراحی‌شده فقط‌خواندنی باشد. اگر مشکل فقط در کانتینر Docker رخ می‌دهد، ابتدا read_only: true، گزینه :ro در Bind Mount و مجوز UID/GID را بررسی کنید؛ آموزش عیب‌یابی Permission denied در Docker Bind Mount تفاوت این حالت‌ها را توضیح می‌دهد.

اگر سیستم از ابتدا برای حفاظت یا Recovery فقط‌خواندنی بوده است، پیش از تغییر باید دلیل عملیاتی آن روشن شود. برای رفع خطای EROFS، هیچ‌گاه به‌صورت پیش‌فرض chmod 777 یا غیرفعال‌کردن SELinux را پیشنهاد نمی‌کنیم.

مرحله ۴: قبل از fsck، Backup و برنامه بازیابی داشته باشید

اگر شواهدی از خرابی فایل‌سیستم یا خطای I/O دارید، کارهای نوشتنی غیرضروری را متوقف کنید و پیش از تعمیر، یک بکاپ مستقل و در صورت پشتیبانی زیرساخت Snapshot مناسب بگیرید. Snapshot به‌تنهایی جایگزین بکاپ تست‌شده نیست؛ به‌خصوص اگر خرابی در لایه Storage یا دیسک پایه باشد. قبل از اجرای دستور تعمیر، نام دستگاه و نوع فایل‌سیستم را دوباره تأیید کنید:

findmnt -T /var/lib/mysql -o SOURCE,FSTYPE,TARGET,OPTIONS
lsblk -f
blkid

اگر سرور روی سرور مجازی وان‌سرور یا VPS دیگری قرار دارد، در همین مرحله باید دسترسی به کنسول خارج از SSH، حالت Rescue و روش تهیه بکاپ یا Snapshot سرویس خود را بررسی کنید؛ وجود این قابلیت‌ها را برای پلن مشخص تأیید کنید. خرید یا جابه‌جایی VPS، فایل‌سیستم خراب را خودکار تعمیر نمی‌کند، اما هنگام تصمیم درباره زیرساخت، امکانات بازیابی و دسترسی مدیریتی اهمیت دارند.

برای دیتابیس‌های حساس، ابتدا راهنمای Backup همان موتور پایگاه داده و روش گرفتن نسخه سازگار با تراکنش‌ها را اجرا کنید. اگر دیسک خطای سخت‌افزاری مکرر دارد، ممکن است اولویت با کپی ایمن داده‌ها/ایمیج به Storage سالم باشد، نه اجرای تعمیرهای تکراری روی دیسک معیوب.

مرحله ۵: تعمیر امن فایل‌سیستم ext4 با e2fsck در حالت آفلاین

این مرحله فقط برای فایل‌سیستم ext2/ext3/ext4 است و باید روی دستگاه Unmounted اجرا شود. نمونه /dev/vdb1 صرفاً مثال است؛ آن را از خروجی findmnt و lsblk به‌دست آورید. برای پارتیشن داده، سرویس‌های استفاده‌کننده را طبق برنامه توقف سرویس خاموش کنید و پس از تأیید عدم استفاده، Unmount انجام دهید:

# مثال: پارتیشن داده، نه ریشه در حال اجرا
findmnt /srv/data
sudo umount /srv/data
findmnt /srv/data

اگر umount می‌گوید target is busy، برنامه یا پردازشی هنوز از مسیر استفاده می‌کند. به‌جای umount -f یا حذف تصادفی پردازش‌ها، ابتدا وابستگی‌ها را پیدا و توقف کنترل‌شده انجام دهید. سپس با تأیید قطعیِ نوع ext4 و Unmounted بودن:

sudo e2fsck -fn /dev/vdb1
# پس از بررسی نتیجه و داشتن بکاپ معتبر:
sudo e2fsck -f /dev/vdb1

-n حالت بدون اعمال تعمیر است؛ در فایل‌سیستم Journalدار ممکن است همه تغییراتِ قابل انجام پس از Replay را بازتاب ندهد. گزینه -f بررسی را مجبور می‌کند و در صورت نیاز، ابزار پرسش‌های تعمیر را مطرح می‌کند. هرگز e2fsck را روی ریشه یا پارتیشنِ در حال Mount اجرا نکنید. طبق مستندات رسمی e2fsck، اجرای آن روی فایل‌سیستم Mountشده عموماً ناامن است.

برای پارتیشن ریشه /، از کنسول Rescue/Live محیط ارائه‌دهنده سرور بوت کنید تا فایل‌سیستم هدف روی سیستم اصلی در حال استفاده نباشد. سپس دستگاه درست را با lsblk -f مشخص و تعمیر را از محیط آفلاین انجام دهید. پس از تعمیر، Mount و سرویس‌ها را به‌شکل کنترل‌شده برگردانید.

مرحله ۶: اگر فایل‌سیستم XFS است، از xfs_repair استفاده کنید

دستور e2fsck برای XFS مناسب نیست. اگر findmnt نوع xfs را نشان می‌دهد، طبق مستندات xfs_repair فایل‌سیستم باید Unmounted باشد. در محیط Rescue و پس از تهیه بکاپ:

lsblk -f
# پس از اطمینان از Unmounted بودن دستگاه نمونه:
sudo xfs_repair -n /dev/vdb1
# فقط پس از ارزیابی نتیجه و برنامه بازیابی:
sudo xfs_repair /dev/vdb1

گزینه -n بررسی بدون اعمال تغییر است. گزینه -L که Log را صفر می‌کند ممکن است به از دست‌رفتن داده منجر شود و نباید به‌عنوان «راه‌حل سریع» استفاده شود. برای Btrfs یا ZFS نیز ابزار و رویه بازیابی متفاوت است؛ fsck عمومی را بدون تشخیص نوع فایل‌سیستم اجرا نکنید.

مرحله ۷: چه زمانی Remount به حالت rw قابل بررسی است؟

اگر مطمئن شده‌اید Mount عمداً با ro فعال شده، هیچ نشانه‌ای از خطای I/O یا خرابی فایل‌سیستم وجود ندارد و سیاست عملیاتی اجازه می‌دهد، می‌توان پس از بکاپ و با دسترسی کنسول، علت تنظیم ro را اصلاح کرد. برای نمونه در یک Volume داده سالم، تغییر Mount Options باید مطابق تنظیمات /etc/fstab یا واحد Mount در systemd انجام شود؛ از تغییر موقت و فراموش‌کردن پیکربندی دائمی بپرهیزید.

در مقابل، اگر کرنل به‌علت EXT4-fs error یا خطای Storage فایل‌سیستم را فقط‌خواندنی کرده، اجرای mount -o remount,rw / بدون بررسی و تعمیر، راه‌حل امنی نیست. این دستور ممکن است شکست بخورد یا شرایط بازیابی را بدتر کند. اگر سرور تولیدی است، قبل از هر تغییر در Root Filesystem برنامه قطعی و Rollback داشته باشید.

مرحله ۸: پس از بازیابی، سلامت نوشتن و سرویس را Verify کنید

پس از رفع علت، تعمیر آفلاین و Mount مجدد، ابتدا وضعیت را بررسی کنید:

findmnt -T /srv/data -o TARGET,SOURCE,FSTYPE,OPTIONS
df -hT /srv/data
sudo journalctl -k -b --no-pager | tail -n 80
systemctl --failed

اگر مسیر متعلق به شماست و نوشتن در آن مجاز است، یک فایل آزمایشی کوچک بسازید و فوراً حذف کنید. این تست را فقط روی مسیر تست‌شده و بدون خطر برای داده‌های برنامه انجام دهید:

sudo sh -c 'printf "rw-okn" > /srv/data/.rw-check && cat /srv/data/.rw-check && rm /srv/data/.rw-check'

خروجی مورد انتظار rw-ok است و پس از اجرای دستور نباید فایل .rw-check باقی بماند. سپس سرویس اصلی (مثلاً پایگاه داده یا وب‌سرور) را طبق رویه خود راه‌اندازی و عملکرد واقعیِ نوشتن را آزمایش کنید. در نهایت لاگ کرنل را دوباره بخوانید؛ اگر خطاهای I/O یا Remount تکرار می‌شوند، تعمیر را موفق ندانید.

خطاهای رایج که با Read-only file system اشتباه گرفته می‌شوند

  • دیسک یا inode پر شده: df -hT و df -i را مقایسه کنید. در محیط‌های Docker، افزایش بی‌رویه لاگ‌ها می‌تواند فضای دیسک را تمام کند؛ برای مدیریت ایمن آن آموزش Log Rotation برای جلوگیری از پر شدن دیسک VPS را بخوانید.
  • Permission denied: اگر Mount rw است، مالکیت، ACL، UID/GID و SELinux/AppArmor را جداگانه بررسی کنید.
  • Volume کانتینر فقط‌خواندنی: گزینه read_only یا Bind Mount با :ro ممکن است عمدی باشد؛ تغییر فایل‌سیستم میزبان لازم نیست.
  • خرابی Storage میزبان: در VPS یا SAN، لاگ‌های مهم ممکن است فقط در اختیار ارائه‌دهنده زیرساخت باشد؛ تکرار fsck روی Storage ناسالم درمان ریشه‌ای نیست.
  • نام دستگاه اشتباه: در LVM، RAID و NVMe نام دیسک لزوماً /dev/sda1 نیست؛ همیشه findmnt و lsblk -f را ملاک قرار دهید.

Rollback و بازیابی در صورت ناموفق‌بودن تعمیر

اگر پس از تعمیر سرویس بالا نمی‌آید، ابتدا عملیات نوشتنی غیرضروری را متوقف کنید و وضعیت جدید را مستند کنید. تغییرات /etc/fstab یا فایل Unit مربوط به Mount را از بکاپ معتبر بازگردانید؛ در صورت نیاز از Rescue بوت کنید. اگر فایل‌سیستم یا Storage هنوز خطا دارد، به‌جای تکرار بی‌پایان Repair، بازیابی از بکاپ سالم روی Volume جدید را بررسی کنید. پس از Restore، سازگاری داده برنامه و لاگ‌های سرویس را Verify کنید.

برای مطالعه جزئیات دستورها، به مستندات findmnt، e2fsck و xfs_repair مراجعه کنید. معیار موفقیت فقط تغییر ro به rw نیست؛ باید علت اولیه رفع شده باشد، تست نوشتن و سرویس پاس شود و خطای I/O مجدداً برنگردد.

Rate this post
اشتراک گذاری نوشته در:

دیدگاهتان را بنویسید

نشانی ایمیل شما منتشر نخواهد شد. بخش‌های موردنیاز علامت‌گذاری شده‌اند *