پیشنهاد ویژه: ۳۰٪ تخفیف جشنواره پاییزه گرین لبز !!

تصویر ایزومتریک سرور پایگاه داده روی سکوی گرد سفید در کنار یک دیسک بک‌آپ، با فلش دایره‌ای بازیابی از دیسک به سرور و سپر سبز با تیک تأیید، میان موج‌های فیروزه‌ای؛ نمادی از بک‌آپی که بازیابی آن آزمایش شده است

بک‌آپ سایت تا وقتی بازیابی نشده، هنوز قابل اعتماد نیست

بک‌آپی که هرگز بازیابی نشده، فقط یک فرض است. این مقاله به زبان مدیران توضیح می‌دهد RPO و RTO یعنی چه، از چه چیزهایی باید بک‌آپ گرفت، قاعده‌ی ۳-۲-۱ و نسخه‌ی دور از دسترس باج‌افزار چرا لازم است، مانور بازیابی چگونه انجام می‌شود و مسئولیت آن در قرارداد و تحویل پروژه با کیست.

امین ایمانی
۱۴۰۵/۸/۲۷
13 دقیقه

در بیشتر جلسه‌هایی که درباره‌ی وضعیت فنی یک سایت یا سامانه برگزار می‌شود، پرسش «بک‌آپ داریم؟» تقریبا همیشه پاسخی مطمئن می‌گیرد: «بله، هر شب گرفته می‌شود.» جلسه با خیال راحت ادامه پیدا می‌کند و کسی پرسش دوم را نمی‌پرسد؛ پرسشی که در واقع تنها پرسش مهم است: «آخرین بار کی از روی همین بک‌آپ چیزی را بازیابی کردیم و چقدر طول کشید؟»

موضع ما در گرین‌لبز صریح است: بک‌آپی که هرگز restore نشده، بک‌آپ نیست؛ یک فرض است. فرضی که تا روز حادثه درست به نظر می‌رسد و درست در همان روز، یعنی وقتی دیگر راه بازگشتی نمانده، آزموده می‌شود. فایلی که هر شب ساخته می‌شود ثابت نمی‌کند که بتوان از آن یک کسب‌وکار را دوباره سر پا کرد. فقط ثابت می‌کند که یک فرمان هر شب اجرا شده است.

این نوشته برای مدیران و صاحبان کسب‌وکار است، نه برای مهندسان زیرساخت. می‌خواهیم بگوییم بک‌آپ و بازیابی را چگونه باید دید، از چه چیزهایی باید نسخه‌ی پشتیبان داشت، چرا یک نسخه باید دور از دسترس باشد، مانور بازیابی چیست و مهم‌تر از همه، در قرارداد و تحویل پروژه، مسئولیت این کار دقیقا بر عهده‌ی کیست. در پایان هم یک چک‌لیست و چند پرسش متداول گذاشته‌ایم.

بک‌آپی که بازیابی نشده، فقط یک امید است

بک‌آپ به خودی خود هدف نیست. هدف، بازیابی است؛ یعنی توانایی برگرداندن داده و سرویس به حالتی قابل استفاده، در زمانی قابل قبول. هر چیزی میان این دو، از فایل فشرده‌ای که روی دیسک نشسته تا گزارش سبزرنگی که می‌گوید کار با موفقیت انجام شد، فقط نشانه است و نه نتیجه.

بک‌آپ‌ها به شیوه‌های گوناگون و اغلب بی‌صدا شکست می‌خورند. فایل ساخته می‌شود اما ناقص است. پایگاه داده در میانه‌ی نوشتن کپی شده و نسخه‌ی حاصل سازگار نیست. رمز فایل رمزنگاری‌شده فقط نزد کسی بود که دیگر با شما کار نمی‌کند. فایل‌های بارگذاری‌شده‌ی کاربران هرگز در فهرست بک‌آپ نبودند، چون کسی فکر نمی‌کرد جدا از پایگاه داده نگهداری شوند. یا همه چیز سالم است، اما بازیابی آن به نرم‌افزار، نسخه یا دانشی نیاز دارد که هیچ‌کس در تیم ندارد.

هیچ‌کدام از این خطاها در روزهای عادی دیده نمی‌شوند. همین است که بک‌آپ تست‌نشده این‌قدر خطرناک است: احساس امنیت می‌دهد، بی‌آنکه امنیت بدهد.

RPO و RTO به زبان مدیر

پیش از هر بحث فنی، دو تصمیم باید گرفته شود و این دو تصمیم کسب‌وکاری‌اند، نه فنی. اگر شما آن‌ها را نگیرید، تیم فنی به‌جای شما و معمولا بر پایه‌ی هزینه‌ی کمتر می‌گیرد.

RPO: چقدر داده را می‌توانید از دست بدهید

RPO یا Recovery Point Objective پاسخ این پرسش است: اگر امروز همه چیز از دست برود، تا کدام نقطه‌ی زمانی عقب برگردیم و هنوز قابل تحمل باشد؟ اگر بک‌آپ فقط شبانه گرفته می‌شود، یعنی پذیرفته‌اید که در بدترین حالت، همه‌ی سفارش‌ها، ثبت‌نام‌ها و تغییرات یک روز کامل از بین برود. برای یک سایت معرفی شرکت شاید این پذیرفتنی باشد. برای فروشگاهی که هر ساعت سفارش ثبت می‌کند، یا سامانه‌ای که اطلاعات مالی مشتریان را نگه می‌دارد، احتمالا نه.

RTO: چقدر می‌توانید خاموش بمانید

RTO یا Recovery Time Objective یعنی از لحظه‌ی حادثه تا لحظه‌ای که سرویس دوباره در دسترس است، چقدر زمان قابل قبول است. این عدد را نمی‌توان از روی کاغذ حدس زد. فقط وقتی یک بار بازیابی کامل را انجام داده باشید، می‌فهمید که برگرداندن پایگاه داده، فایل‌ها، پیکربندی سرور و تنظیمات دامنه در عمل چقدر زمان می‌برد و کجای کار گیر می‌کند.

راهنمای برنامه‌ریزی اضطراری NIST SP 800-34 این دو مفهوم را در دل یک فرایند کامل تحلیل اثر بر کسب‌وکار قرار می‌دهد؛ یعنی پیش از انتخاب ابزار، روشن کنید کدام سرویس چقدر حیاتی است و توقف آن چه هزینه‌ای دارد. نکته‌ی ما ساده‌تر است: RPO و RTO را بنویسید، با تیم فنی امضا کنید و بعد بپرسید آیا راهکار فعلی واقعا به آن می‌رسد. بیشتر وقت‌ها پاسخ صادقانه این است که هیچ‌کس نمی‌داند.

از چه چیزهایی باید بک‌آپ گرفت

یکی از رایج‌ترین خطاها این است که بک‌آپ را مترادف «کپی پایگاه داده» بدانیم. یک سرویس قابل بازیابی از چند لایه ساخته شده و نبود هر کدام، بازیابی را ناقص یا ناممکن می‌کند.

پایگاه داده

قلب بیشتر سامانه‌ها همین‌جاست: کاربران، سفارش‌ها، محتوا، تنظیمات. بک‌آپ پایگاه داده باید سازگار باشد، یعنی با روشی گرفته شود که نسخه‌ی حاصل در یک لحظه‌ی واحد معتبر باشد، نه مجموعه‌ای از جدول‌هایی که در زمان‌های متفاوت کپی شده‌اند. snapshot دیسک سرور به‌تنهایی همیشه این تضمین را نمی‌دهد و باید با روش مناسب همان پایگاه داده همراه شود.

فایل‌های بارگذاری‌شده

تصاویر محصولات، فاکتورهای PDF، مدارکی که کاربران بارگذاری کرده‌اند و هر فایلی که بیرون از پایگاه داده نگهداری می‌شود. پایگاه داده‌ای که سالم برگردد اما به فایل‌هایی اشاره کند که دیگر وجود ندارند، سایتی پر از تصویرهای شکسته و پیوندهای مرده تحویل می‌دهد.

کد، پیکربندی و رازها

کد معمولا در مخزن نسخه‌بندی نگهداری می‌شود، اما پیکربندی سرور، متغیرهای محیطی، کلیدهای API، گواهی‌ها و تنظیمات سرویس‌های جانبی اغلب فقط روی همان سروری هستند که قرار است از دست برود. این رازها باید در جایی امن و جدا نگهداری شوند و فهرست آن‌ها مستند باشد؛ وگرنه حتی با داده‌ی کامل، سرویس بالا نمی‌آید.

دامنه، DNS و دسترسی‌ها

بک‌آپ فقط داده نیست؛ توانایی برگرداندن کنترل هم هست. اگر حساب ثبت‌کننده‌ی دامنه، پنل DNS یا حساب میزبانی به نام شخص دیگری باشد، در روز بحران باید برای هر قدم از او اجازه بگیرید. پیش‌تر در نوشته‌ی دامنه و هاست به نام شما نیست؟ پس هنوز مالک سایت‌تان نیستید به این موضوع پرداخته‌ایم. اینجا فقط اضافه می‌کنیم: سوابق DNS را هم مستند و قابل بازسازی نگه دارید، و فهرست دسترسی‌ها را در جایی بگذارید که اگر کلید اصلی گم شد، کلید یدک هم وجود داشته باشد.

قاعده‌ی ۳-۲-۱ و نسخه‌ای که دست مهاجم به آن نمی‌رسد

قدیمی‌ترین و همچنان کاربردی‌ترین قاعده در این حوزه، قاعده‌ی ۳-۲-۱ است. راهنمای گزینه‌های پشتیبان‌گیری CISA آن را به همین سادگی بیان می‌کند: از هر داده‌ی مهم سه نسخه نگه دارید، یکی اصلی و دو نسخه‌ی پشتیبان؛ نسخه‌ها را روی دو نوع رسانه‌ی متفاوت نگه دارید؛ و دست‌کم یک نسخه را بیرون از محل اصلی نگه دارید.

منطق این قاعده روشن است. بک‌آپی که روی همان سرور سایت نگهداری می‌شود، با همان سرور از دست می‌رود. بک‌آپی که در همان حساب میزبانی است، با بسته شدن یا نفوذ به همان حساب از دسترس خارج می‌شود. هر نسخه باید از خطری محافظت کند که نسخه‌ی دیگر در برابرش آسیب‌پذیر است.

امروز یک لایه‌ی دیگر هم ضروری شده است: باج‌افزار. مهاجمی که به سرور یا پنل مدیریت دسترسی پیدا می‌کند، اغلب پیش از هر کاری سراغ بک‌آپ‌ها می‌رود، چون می‌داند تا وقتی نسخه‌ی سالمی وجود دارد، شما مجبور به پرداخت نیستید. راهنمای مقابله با باج‌افزار CISA توصیه می‌کند از داده‌های حیاتی بک‌آپ آفلاین و رمزنگاری‌شده نگه دارید و دسترس‌پذیری و سلامت آن‌ها را به‌طور منظم در یک سناریوی بازیابی بیازمایید. همین راهنما از ذخیره‌سازی immutable، یعنی نسخه‌هایی که تا مدتی مشخص قابل حذف یا تغییر نیستند، به‌عنوان یک گزینه نام می‌برد و البته هشدار می‌دهد که پیکربندی نادرست آن می‌تواند پرهزینه باشد.

حرف ما این است: دست‌کم یک نسخه باید جایی باشد که با همان رمز عبوری که سرور اصلی را باز می‌کند، نتوان آن را پاک کرد. اگر یک نفر با یک حساب بتواند هم سایت و هم همه‌ی بک‌آپ‌ها را حذف کند، شما در واقع یک نسخه دارید، نه سه.

مانور بازیابی؛ تنها آزمونی که حساب است

اگر از این نوشته فقط یک کار را اجرا کنید، همین باشد. مانور بازیابی یعنی در شرایط آرام و از پیش برنامه‌ریزی‌شده، همان کاری را انجام دهید که در روز حادثه باید انجام شود: یک محیط جدا بسازید، از روی بک‌آپ واقعی داده و فایل‌ها را برگردانید، سرویس را بالا بیاورید و بررسی کنید که واقعا کار می‌کند.

مانور خوب چه ویژگی‌هایی دارد

  • روی محیط جدا انجام می‌شود. هرگز آزمون بازیابی را روی سرویس اصلی انجام ندهید.
  • از بک‌آپ واقعی استفاده می‌کند، نه از کپی تازه‌ای که همان روز برای آزمون گرفته شده است.
  • با معیار روشن پایان می‌یابد. ورود به پنل، ثبت یک سفارش آزمایشی، باز شدن فایل‌های بارگذاری‌شده و درست بودن آخرین داده‌ها، از نشانه‌های قابل بررسی‌اند.
  • زمان‌سنجی می‌شود. مدت واقعی بازیابی را ثبت کنید و با RTO مقایسه کنید.
  • مستند می‌شود. هر گیر و هر قدمی که در مستندات نبود، به runbook بازیابی اضافه می‌شود.
  • گاهی توسط کسی جز سازنده انجام می‌شود. اگر فقط یک نفر بلد است بازیابی کند، بک‌آپ شما به حضور او وابسته است.

راهنمای restore testing در مستندات AWS Backup نشان می‌دهد که آزمون بازیابی را می‌توان زمان‌بندی‌شده و خودکار هم اجرا کرد تا بازیابی‌پذیری بک‌آپ‌ها به‌طور منظم سنجیده شود. ابزار هر چه باشد، اصل یکی است: بازیابی باید عادت باشد، نه رویدادی که فقط در بحران تجربه می‌شود. پس از هر تغییر مهم در زیرساخت، مهاجرت سرور یا به‌روزرسانی اساسی نرم‌افزار هم، مانور باید تکرار شود.

پایش کارهای بک‌آپ

بک‌آپ‌ها معمولا با یک کار زمان‌بندی‌شده اجرا می‌شوند و کارهای زمان‌بندی‌شده عادت دارند بی‌سروصدا متوقف شوند. اگر تنها نشانه‌ی سلامت بک‌آپ، ایمیلی باشد که هر شب می‌آید و کسی نمی‌خواندش، روزی که آن ایمیل نیاید هم کسی متوجه نمی‌شود.

پایش درست سه ویژگی دارد. اول، به‌جای اعلام موفقیت، نبود موفقیت را هشدار می‌دهد؛ اگر بک‌آپ در موعد مقرر ثبت نشد، یک نفر مشخص خبردار می‌شود. دوم، فقط اجرا شدن کار را نمی‌سنجد، بلکه نشانه‌های سلامت خروجی را هم بررسی می‌کند؛ مثلا اینکه حجم فایل به‌طور غیرعادی کم نشده باشد یا قدیمی‌ترین نسخه‌ی مجاز هنوز وجود داشته باشد. سوم، صاحب دارد؛ هشداری که به صندوقی مشترک برود، در عمل هشدار نیست.

این بخش از کار، همان‌جایی است که امنیت و نگهداری به هم می‌رسند. در نوشته‌ی سایت کوچک شما هم هدف هکرهاست گفته‌ایم که کوچک بودن، سایت را از حمله مصون نمی‌کند. بک‌آپ پایش‌شده، آخرین خط دفاعی است وقتی همه‌ی خط‌های دیگر شکسته‌اند.

بک‌آپ در قرارداد و تحویل پروژه؛ مسئولیت با کیست

اینجا به ریشه‌ی بیشتر ماجراها می‌رسیم. در بسیاری از پروژه‌ها، تیم توسعه یا آژانس سایت را می‌سازد، روی سروری راه‌اندازی می‌کند و پروژه را تحویل می‌دهد. بک‌آپ یا اصلا در قرارداد نیامده، یا با جمله‌ای مبهم مانند «پشتیبان‌گیری منظم انجام می‌شود» از آن عبور شده است. چند ماه بعد، قرارداد پشتیبانی تمام شده، سرور هنوز روشن است و هیچ‌کس نمی‌داند بک‌آپ‌ها کجا ذخیره می‌شوند، با چه رمزی باز می‌شوند و آیا اصلا هنوز گرفته می‌شوند.

این همان شکافی است که در نوشته‌ی پروژه تمام شده؛ پس چرا هنوز کسی جوابگو نیست؟ از آن گفته‌ایم: تحویل پروژه بدون تعیین مالک برای کارهای جاری، مسئولیت را در هوا معلق می‌گذارد. و بک‌آپ دقیقا از جنس همین کارهای جاری است؛ کاری که بعد از تحویل شروع می‌شود و تا وقتی سرویس زنده است ادامه دارد. به همین دلیل است که می‌گوییم هزینه‌ی واقعی سایت بعد از تحویل شروع می‌شود، نه قبل از آن.

موضع ما در گرین‌لبز این است که در قرارداد یا سند تحویل، این موارد باید صریح و مکتوب باشند:

  • چه چیزهایی بک‌آپ گرفته می‌شود و با چه تناوبی.
  • RPO و RTO توافق‌شده برای هر سرویس.
  • بک‌آپ‌ها کجا نگهداری می‌شوند، چه مدت نگه داشته می‌شوند و کدام نسخه بیرون از محیط اصلی است.
  • حساب‌های ذخیره‌سازی بک‌آپ به نام چه کسی است؛ پاسخ درست، به نام کارفرماست.
  • چه کسی پایش می‌کند و هشدارها به چه کسی می‌رسد.
  • مانور بازیابی با چه تناوبی انجام می‌شود و گزارش آن به چه کسی تحویل داده می‌شود.
  • پس از پایان قرارداد پشتیبانی، این مسئولیت‌ها به چه کسی منتقل می‌شوند.

اگر تیم فنی شما نمی‌تواند به این پرسش‌ها پاسخ مکتوب بدهد، مشکل لزوما بی‌دقتی آن تیم نیست؛ مشکل این است که هیچ‌کس این پرسش‌ها را از آن‌ها نپرسیده است.

چک‌لیست عملی بک‌آپ و بازیابی

این فهرست را با تیم فنی یا شریک توسعه‌ی خود مرور کنید. هر پاسخ «نمی‌دانم» به اندازه‌ی یک پاسخ منفی جدی است.

  • آیا RPO و RTO هر سرویس مکتوب و با مدیریت توافق شده است؟
  • آیا پایگاه داده با روشی سازگار و قابل بازیابی بک‌آپ گرفته می‌شود؟
  • آیا فایل‌های بارگذاری‌شده‌ی کاربران هم در بک‌آپ هستند؟
  • آیا پیکربندی سرور، متغیرهای محیطی و رازها جدا و امن نگهداری و مستند شده‌اند؟
  • آیا دامنه، DNS، میزبانی و حساب‌های ذخیره‌سازی بک‌آپ به نام کسب‌وکار است؟
  • آیا قاعده‌ی ۳-۲-۱ رعایت می‌شود و دست‌کم یک نسخه بیرون از محیط اصلی است؟
  • آیا دست‌کم یک نسخه آفلاین یا immutable است و با دسترسی سرور اصلی قابل حذف نیست؟
  • آیا اگر بک‌آپ در موعد خود ثبت نشود، یک نفر مشخص هشدار می‌گیرد؟
  • آیا مانور بازیابی کامل در محیط جدا و به‌طور منظم انجام می‌شود؟
  • آیا زمان واقعی بازیابی اندازه‌گیری و با RTO مقایسه شده است؟
  • آیا runbook بازیابی وجود دارد و کسی جز سازنده‌ی آن هم توانسته با آن بازیابی کند؟
  • آیا مسئولیت بک‌آپ و بازیابی پس از پایان قرارداد پشتیبانی روشن است؟

پرسش‌های متداول

هاستینگ ما خودش بک‌آپ می‌گیرد؛ این کافی نیست؟

معمولا نه. بک‌آپ میزبان اغلب در همان زیرساخت و زیر همان حساب نگهداری می‌شود، پس با بسته شدن حساب، بروز مشکل در همان مرکز داده یا نفوذ به همان پنل، ممکن است همراه سایت از دسترس خارج شود. بک‌آپ میزبان یک نسخه‌ی مفید است، اما نسخه‌ی بیرون از محل در قاعده‌ی ۳-۲-۱ نیست.

snapshot سرور همان بک‌آپ است؟

snapshot ابزار ارزشمندی است، به‌ویژه برای برگشت سریع پس از یک تغییر ناموفق. اما اگر در همان حساب و همان زیرساخت نگهداری شود، از بسیاری از خطرها محافظت نمی‌کند و ممکن است برای پایگاه داده‌ای که در حال نوشتن است، نسخه‌ای کاملا سازگار تحویل ندهد. snapshot را بخشی از راهکار بدانید، نه کل آن.

مانور بازیابی را هر چند وقت یک بار باید انجام داد؟

پاسخ به میزان حیاتی بودن سرویس و تناوب تغییرات آن بستگی دارد و باید در همان توافق RPO و RTO تعیین شود. قاعده‌ی ما این است که مانور منظم و تقویم‌دار باشد، و پس از هر تغییر مهم زیرساختی، مهاجرت یا به‌روزرسانی اساسی، بی‌درنگ تکرار شود. مانوری که «هر وقت فرصت شد» انجام می‌شود، در عمل انجام نمی‌شود.

بک‌آپ کامل و منظم پرهزینه نیست؟

هزینه‌ی بک‌آپ و مانور بازیابی را باید با هزینه‌ی روزی مقایسه کرد که سرویس از دست برود: درآمد متوقف‌شده، داده‌ی مشتریانی که دیگر قابل بازسازی نیست، اعتباری که آسیب می‌بیند و زمانی که تیم صرف ساختن دوباره‌ی چیزی می‌کند که پیش‌تر ساخته بود. بک‌آپ بیمه‌ای است که تنها راه سنجیدن اعتبارش، آزمودن آن پیش از حادثه است.

اگر فقط یک نفر در تیم بازیابی را بلد باشد چه؟

در آن صورت ریسک شما در واقع آن یک نفر است، نه بک‌آپ. وابستگی به یک نفر، ریسکی است که تا روز غیبت او دیده نمی‌شود. راه‌حل، runbook مکتوب و مانوری است که گاهی کسی جز سازنده‌ی سیستم آن را اجرا کند.

سخن پایانی

بک‌آپ از آن کارهایی است که تا روز بحران هیچ ارزشی به چشم نمی‌آید و در روز بحران، ارزش همه چیز را پیدا می‌کند. تفاوت سازمانی که آن روز را پشت سر می‌گذارد با سازمانی که در آن فرو می‌رود، معمولا در فناوری نیست؛ در این است که آیا کسی پیش‌تر، در روزی آرام، یک بار تا انتهای مسیر بازیابی رفته و دیده است که واقعا کار می‌کند یا نه.

پس پرسش را عوض کنید. به‌جای «بک‌آپ داریم؟» بپرسید «آخرین بار کی بازیابی کردیم؟» اگر پاسخ روشنی برای آن ندارید، یا می‌خواهید RPO و RTO سرویس‌هایتان را تعریف کنیم، بک‌آپ‌ها را بیرون از دسترس مهاجم ببریم، پایش و مانور بازیابی را راه بیندازیم و مسئولیت آن را در قرارداد و تحویل روشن کنیم، خدمات گرین‌لبز را ببینید و گفت‌وگو را آغاز کنیم.

آماده برای شروع پروژه بعدی خود هستید؟

با تیم گرین‌لبز مشاوره رایگان دریافت کنید