انتقال کنترل‌شده داده

مهاجرت داده به سامانه جدید؛ برنامه، تطبیق و Rollback

مهاجرت داده کپی فایل نیست؛ هر رکورد باید مالک، نگاشت، قاعده تبدیل، معیار صحت، وضعیت استثنا و مسیر بازگشت قابل آزمون داشته باشد.

رکوردهای داده که از مخزن قدیمی عبور می‌کنند، تطبیق و اعتبارسنجی می‌شوند و به مقصد می‌رسند

انتشار: · آخرین به‌روزرسانی:

نویسنده: — عضو تیم پیکا؛ تهیه با کمک ابزارهای هوش مصنوعی و مسئولیت انتشار با پیکا

مهاجرت داده فرایند انتقال کنترل‌شده اطلاعات از مبدأ به سامانه جدید همراه با شناخت، نگاشت، تبدیل، پاک‌سازی، تطبیق و تأیید است. پروژه زمانی موفق است که داده لازم کامل، درست، قابل ردیابی و قابل استفاده باشد و سازمان برای cutover، داده‌های تازه، استثناها، rollback و نگهداری مبدأ تصمیم آزموده‌شده داشته باشد.

چرا مهاجرت داده فقط کپی‌کردن رکوردها نیست؟

ساختار، معنا و چرخه عمر داده میان دو سامانه یکسان نیست. یک کد وضعیت قدیمی ممکن است چند معنی داشته باشد، شناسه‌ها تکراری باشند یا تاریخچه در جدول جدا نگهداری شود. راهنمای نیازمندی نرم‌افزار کمک می‌کند مشخص شود هر نقش در مقصد به کدام داده و رفتار نیاز دارد. بدون این زمینه، کپی فنی می‌تواند کامل باشد اما فرایند کسب‌وکاری را خراب کند.

پیش از طراحی migration چه inventory لازم است؟

برای هر مجموعه داده، سیستم مرجع، مالک کسب‌وکاری، حساسیت، حجم، نرخ تغییر، کلید، وابستگی، کیفیت و دوره نگهداری را ثبت کنید. گزارش، فایل، پیوست، لاگ و داده مرجع را فراموش نکنید. در نوسازی نرم‌افزار قدیمی این inventory به تصمیم کمک می‌کند چه چیزی منتقل، آرشیو، تبدیل یا بازنشسته شود؛ انتقال همه چیز به‌صورت پیش‌فرض فقط بدهی را جابه‌جا می‌کند.

  • مالک و مصرف‌کننده هر دامنه داده
  • کلید اصلی و رابطه با رکوردهای دیگر
  • حجم، رشد، نرخ تغییر و پنجره انتقال
  • کیفیت شناخته‌شده و موارد تکراری یا ناقص
  • حساسیت، دسترسی و الزام نگهداری
  • فایل‌ها، پیوست‌ها، تاریخچه و audit trail
  • وابستگی گزارش، API، job و سیستم‌های بیرونی

نگاشت و تبدیل داده چگونه مستند می‌شود؟

سند mapping برای هر فیلد مبدأ، مقصد، نوع، قاعده تبدیل، مقدار پیش‌فرض، lookup، رفتار null و روش آزمون را مشخص می‌کند. تبدیل باید deterministic و نسخه‌پذیر باشد تا اجرای دوباره نتیجه متفاوت نسازد. اگر چند رکورد ادغام یا یک رکورد شکسته می‌شود، رابطه lineage نگه دارید. راهنمای یکپارچه‌سازی نرم‌افزارها نیز برای شناسه یکتا، قرارداد نسخه و تکرار امن الگوی مکمل می‌دهد.

نمونه کنترل mapping

موضوعپرسش پذیرش
شناسهآیا یکتایی و رابطه‌ها پس از تبدیل حفظ می‌شوند؟
کد مرجعهر مقدار قدیمی به مقصد معتبر و قابل توضیح می‌رسد؟
تاریخ و زمانtimezone، precision و تاریخ نامعتبر چگونه مدیریت می‌شوند؟
متن و فایلencoding، نام، checksum و دسترسی فایل حفظ شده‌اند؟
داده حساسکمینه‌سازی، mask و مجوز در محیط‌های مهاجرت رعایت می‌شوند؟
استثنارکورد ردشده owner، دلیل و مسیر اصلاح دارد؟

پاک‌سازی داده پیش از انتقال یا پس از آن انجام می‌شود؟

قاعده عمومی واحدی وجود ندارد. خطایی که معنای مشخص و مالک دارد بهتر است پیش از cutover اصلاح شود؛ اما پاک‌سازی گسترده بدون trace می‌تواند سابقه را تغییر دهد. داده‌های تکراری، ناقص یا منقضی باید با قاعده تأییدشده علامت‌گذاری، ادغام، آرشیو یا رد شوند. هر تصمیم باید شمار رکورد تحت اثر و امکان بازسازی وضعیت قبلی را نشان دهد.

Rehearsal مهاجرت چگونه طراحی می‌شود؟

یک نسخه نماینده از داده را با همان ابزار و ترتیب production منتقل کنید، زمان هر مرحله را بگیرید و نتیجه را با قواعد reconciliation بسنجید. AWS توصیه می‌کند cutover workbook، برنامه contingency و rollback پیش از انتقال آماده و تمرین شوند. rehearsal باید علاوه بر مسیر موفق، رکورد خراب، قطع شبکه، کمبود فضا، کندی غیرعادی و اجرای دوباره job را پوشش دهد.

  1. Snapshot کنترل‌شده بگیرید

    زمان، نسخه schema و وضعیت تغییرات مبدأ ثبت شوند.

  2. Pipeline را کامل اجرا کنید

    extract، transform، load و مدیریت خطا با همان تنظیمات عملیاتی تمرین شوند.

  3. تطبیق خودکار انجام دهید

    count، checksum، مجموع، کلید و نمونه‌های دامنه‌ای مقایسه شوند.

  4. جریان کسب‌وکاری را آزمون کنید

    کاربر مالک، گزارش و تراکنش انتها‌به‌انتها را روی داده منتقل‌شده تأیید کند.

  5. زمان و ظرفیت را بازنگری کنید

    پنجره freeze، رشد داده و زمان rollback با شواهد rehearsal اصلاح شوند.

صحت مهاجرت با چه روش‌هایی سنجیده می‌شود؟

شمار رکورد فقط یک کنترل سریع است. Microsoft برای اعتبارسنجی عمیق‌تر checksum یا hash، مقایسه فایل، آزمون عملکرد حیاتی و تأیید مالک برنامه را توصیه می‌کند. علاوه بر count، مجموع‌های مالی یا مقداری، یکتایی، رابطه والد/فرزند، توزیع status، رکوردهای مرزی و نمونه‌های انتخاب‌شده توسط مالک دامنه را بسنجید. هر اختلاف باید شناسه، دلیل و تصمیم پذیرش یا اصلاح داشته باشد.

Cutover با downtime یا نزدیک به صفر چگونه انتخاب می‌شود؟

مهاجرت با توقف نوشتن ساده‌تر است: تغییرات freeze، داده نهایی منتقل، تطبیق و سپس ترافیک جابه‌جا می‌شود. نزدیک به صفر به replication، سنجش lag و همگام‌سازی نهایی نیاز دارد. انتخاب باید با تحمل توقف، نرخ تغییر، پیچیدگی و توان تیم متناسب باشد. روش پیچیده‌تر فقط وقتی ارزش دارد که کاهش downtime از ریسک و هزینه هماهنگی بیشتر باشد.

گیت‌های cutover

  1. Readiness

    دسترسی، تیم، backup، ظرفیت و rehearsal تأیید شده‌اند.

  2. Freeze و Sync

    تغییر کنترل و آخرین داده با lag قابل قبول منتقل می‌شود.

  3. Validation

    صحت فنی و جریان کسب‌وکاری پیش از انتقال ترافیک پاس می‌شوند.

  4. Stabilization

    پایش تقویت‌شده ادامه دارد و rollback زودهنگام بسته نمی‌شود.

Rollback بعد از ورود داده جدید چگونه ممکن است؟

پیش از cutover معیار شکست، تصمیم‌گیرنده و آخرین نقطه امن بازگشت را تعریف کنید. AWS هشدار می‌دهد اگر مقصد پس از cutover تراکنش تازه بگیرد، مبدأ قدیمی می‌شود و بازگرداندن صرف ترافیک کافی نیست؛ باید fail-forward، replication معکوس، dual write کنترل‌شده یا restore آزموده‌شده برای داده تازه داشته باشید. راهبرد باید پیش از مهاجرت تمرین و زمان آن ثبت شود.

چه زمانی سامانه مبدأ را می‌توان خاموش کرد؟

پس از تأیید صحت، پایداری، گزارش‌ها، اتصال‌ها، backup و پایان دوره rollback می‌توان خاموش‌سازی را آغاز کرد. مالک داده باید نیاز نگهداری یا archive را تأیید کند؛ دسترسی‌ها، credentialها، jobها و هزینه زیرساخت نیز کنترل‌شده حذف شوند. خاموش‌نکردن مبدأ، دو منبع حقیقت و سطح حمله اضافی می‌سازد؛ خاموش‌کردن زودهنگام نیز امکان بازیابی را از بین می‌برد.

چه زمانی این صفحه پاسخ شما نیست؟

اگر هنوز نمی‌دانید سامانه موجود باید نگه داشته، بازطراحی یا جایگزین شود، مقاله نوسازی legacy را بخوانید. اگر مسئله قرارداد تبادل زنده میان دو سامانه است، راهنمای API و یکپارچه‌سازی Owner مناسب‌تری است. این صفحه انتقال داده تاریخی و عملیاتی به مقصد مشخص را پوشش می‌دهد، نه انتخاب محصول یا طراحی کل برنامه تحول.

پرسش‌های پرتکرار

آیا همه داده قدیمی باید منتقل شود؟

خیر. داده لازم برای عملیات، گزارش، تعهد نگهداری و سابقه باید با مالک مشخص شود؛ بقیه می‌تواند آرشیو یا کنترل‌شده حذف شود.

آیا count برابر، صحت مهاجرت را ثابت می‌کند؟

خیر. count رابطه، معنا، تبدیل، فایل، دسترسی و قابلیت استفاده در جریان واقعی را ثابت نمی‌کند و باید با کنترل‌های دامنه‌ای تکمیل شود.

چند rehearsal لازم است؟

عدد ثابت وجود ندارد. تمرین تا زمانی ادامه می‌یابد که زمان، خطا، reconciliation و rollback در حجم نماینده قابل پیش‌بینی و داخل معیار پذیرش باشند.

آیا dual write بهترین راه کاهش downtime است؟

نه همیشه. dual write هماهنگی و رفع تعارض را دشوار می‌کند؛ فقط با قرارداد، idempotency، مشاهده‌پذیری و نیاز واقعی به تداوم نوشتن توجیه دارد.

منابع

  1. Microsoft Cloud Adoption Framework — Execute migration
  2. AWS Prescriptive Guidance — Pre-cutover stage
  3. AWS Prescriptive Guidance — Cutover and rollback

مطالب مرتبط