ننقل بياناتك ونثبت أنها وصلت
ينقل هذا العمل السجلات من نظام قديم إلى نظام جديد، ويغيّر بنيتها في الطريق. نفحص بيانات المصدر، ونتفق على خريطة لكل حقل، ونكتب نصوصاً برمجية قابلة للتكرار تستخرج البيانات وتحوّلها وتحمّلها، ثم ننفذ عمليات نقل تجريبية ونطابق النتيجة مع المصدر حتى يتفق الجانبان.
يناسب هذا الشركات التي تستبدل نظام تخطيط موارد المؤسسات (ERP) أو إدارة علاقات العملاء (CRM) أو برنامجاً محاسبياً أو تطبيقاً مخصصاً، أو تدمج أنظمة بعد استحواذ، أو تجمع جداول بيانات في قاعدة بيانات. ونادراً ما يكون النسخ هو الجزء الصعب، فالصعوبة في المكررات والقيم الناقصة والقواعد غير المكتوبة في البيانات القديمة. ونكشفها مبكراً ليتخذ أصحاب السجلات القرارات بشأنها.
فحص بيانات المصدر
نقيس ما يحتويه النظام القديم فعلاً، بما فيه الحقول الفارغة، والمكررات، والقيم غير الصالحة، والسجلات المنقطعة عن أصلها، قبل أن نعد بأي شيء عن النتيجة.
مصنّف خريطة الحقول
يُدرج كل حقل مصدر أمام وجهته مع قاعدة التحويل والقيمة الافتراضية والمسؤول عنه، في مستند يستطيع موظفو الأقسام قراءته واعتماده.
قواعد التنظيف
تُدمج المكررات، وتُوحَّد الصيغ، وتُملأ الفجوات وفق قواعد متفق عليها مع أصحاب البيانات، مع تسجيل كل تغيير آلي وإتاحته للمراجعة.
نصوص قابلة للتكرار
يعمل الاستخراج والتحويل والتحميل كشيفرة ذات إصدارات تعطي النتيجة نفسها في كل مرة، فتُحسّن كل تجربة التشغيل النهائي.
فحوص المطابقة
تُقارن أعداد السجلات والإجماليات المالية والأرصدة وعينات من القيم بين المصدر والوجهة، وتُفسَّر الفروق أو تُصحَّح واحداً واحداً.
تخطيط الانتقال النهائي
يُجدول التشغيل النهائي مع تجميد النظام القديم، وخطوات محددة التوقيت، ونقاط تحقق، ومسار للتراجع، وخطة للتغييرات التي تقع أثناء الانتقال.
ما تتسلمه منا
- تقرير فحص البيانات
- مصنّف خريطة حقول معتمد
- قواعد التنظيف وسجلاتها
- نصوص نقل ذات إصدارات
- نتائج عمليات النقل التجريبية
- تقرير مطابقة موقَّع
- خطة الانتقال النهائي والتراجع
- أرشيف لبيانات المصدر
طريقة عملنا
- 01
الفحص وتحديد النطاق
ندرس الأنظمة المصدر، ونقيس جودة البيانات، ونتفق معك على السجلات والتاريخ التي يجب نقلها وما يمكن أرشفته، ونحدد أصحاب كل مجموعة بيانات.
- 02
الخريطة والبناء
يكتمل مصنّف خريطة الحقول مع أصحاب البيانات في شركتك، ونتفق على قواعد التنظيف، ونكتب نصوص النقل ونختبرها على نسخ من البيانات الحقيقية.
- 03
التجربة والمطابقة
تجري عمليات نقل تجريبية كاملة إلى نسخة اختبار من النظام الجديد. وتُطابَق الأعداد والقيم، ويراجع المستخدمون سجلات يعرفونها، وتقصر قائمة الفروق مع كل دورة.
- 04
الانتقال النهائي
في التاريخ المتفق عليه يُجمَّد النظام القديم، وينفذ النقل النهائي وفق خطة موقوتة، وتُعتمد المطابقة، ويُفتح النظام الجديد مع بقاء البيانات القديمة للقراءة فقط.
التقنيات التي نستخدمها
| المجال | التقنيات |
|---|---|
| قواعد البيانات | PostgreSQL، SQL Server، MySQL، Oracle، MongoDB |
| مسارات البيانات | Python، dbt، Apache Airflow، AWS Glue |
| التحقق | Great Expectations، المطابقة بلغة SQL، pandas، فحوص مخصصة |
| المنصات | Salesforce، NetSuite، Odoo، HubSpot، SAP |
تغيّر أنظمتك ولا تحتمل فقدان السجلات
منصة جديدة في الطريق، والبيانات في القديمة فقدت ترتيبها مع الوقت. يحتاج فريق المالية إلى أرصدة متطابقة، وفريق المبيعات إلى تاريخه، والمدققون إلى أثر يتتبعونه. وتريد أن يُجرَّب النقل مسبقاً، وأن يكون لكل فرق بين القديم والجديد تفسير.
- استبدال أنظمة ERP والمحاسبة
- تغيير منصات CRM
- دمج نظامين
- من جداول البيانات إلى قاعدة بيانات
- إيقاف التطبيقات القديمة نهائياً
- الانتقال إلى قواعد بيانات سحابية
أسئلة شائعة
كيف تثبتون أن شيئاً لم يُفقد؟
بالمطابقة. لكل مجموعة بيانات نقارن عدد السجلات في المصدر والوجهة، وإجماليات المبالغ الرئيسية كالأرصدة والكميات، وعينات من السجلات تُفحص حقلاً حقلاً. وكل فرق إما يُصحَّح أو تفسره قاعدة موثقة، كدمج المكررات. ويعتمد صاحب البيانات التقرير قبل إيقاف النظام القديم.
ماذا تفعلون حين تكون جودة البيانات رديئة؟
نقيسها أولاً، ثم نترك القرار لأصحابها. فبعض المشكلات تُصلَح بقاعدة أثناء النقل، كتوحيد الصيغ أو دمج المكررات الواضحة. وبعضها يحتاج إلى شخص يختار السجل الصحيح. وبعضها يُفضَّل تركه في الأرشيف. ونقل البيانات الرديئة كما هي إلى نظام جديد هو أكثر أسباب خيبة الأمل شيوعاً في مشاريع الاستبدال، لذلك تأخذ هذه المرحلة وقتها الكافي.
ما مقدار التاريخ الذي ينبغي أن ننقله؟
ما يكفي لتسيير العمل والوفاء بمتطلبات الاحتفاظ القانونية، وهو عادةً أقل من التاريخ كله. فالمعاملات المفتوحة والعملاء الحاليون والتاريخ القريب تُنقل في العادة كاملة. أما السجلات القديمة المغلقة فكثيراً ما يمكن أن تبقى في أرشيف قابل للبحث، فيصغر حجم النقل ويصبح النظام الجديد أنظف. نعرض الخيارات مع الجهد اللازم لكل منها، ويتخذ فريقا المالية والامتثال القرار.
كم ستبقى الأنظمة متوقفة أثناء الانتقال النهائي؟
يتوقف ذلك على حجم البيانات وطريقة استخدام الأنظمة، وتكشف لنا التجارب المدة بدقة. ويُخطَّط لمعظم عمليات الانتقال في فترة هادئة، مع تجميد النظام القديم ريثما يكتمل التشغيل النهائي والفحوص. وحين يجب أن يكون التوقف قصيراً جداً، ننقل معظم البيانات مسبقاً، ولا ننقل أثناء الانتقال إلا التغييرات الأخيرة.
هل يمكنكم نقل البيانات من نظام لا يتيح التصدير؟
في الغالب نعم. إذا أمكن الوصول إلى قاعدة البيانات، قرأناها مباشرة. وإلا استخدمنا واجهة المورّد أو التقارير المجدولة، أو القراءة الآلية للشاشات كحل أخير. ولكل طريق حدوده التي نشرحها قبل البدء. وتحمل الأنظمة القديمة أيضاً قواعد في شيفرتها لا تكشفها البيانات وحدها، لذلك نعمل مع مستخدم يعرف النظام منذ زمن طويل لتفسير القيم غير المعتادة.