ويعد تقدير احتياجات الذاكرة خطوة حاسمة في تخطيط مشاريع كبيرة لتجهيز البيانات، وتساعد التقديرات الدقيقة على ضمان توافر الموارد الكافية للنظم لمعالجة البيانات بكفاءة دون الإفراط في تقدير التكاليف، مما يتيح زيادة التكاليف، ويوفر هذه المادة نهجا تدريجيا لتحديد الذاكرة اللازمة لتجهيز مجموعات البيانات الكبيرة.

فهم حجم البيانات وتجهيزها

وتشمل الخطوة الأولى تقييم الحجم الإجمالي للبيانات التي يتعين تجهيزها، ويشمل ذلك البيانات الأولية، والنتائج الوسيطة، وبيانات النواتج، ويساعد فهم حجم البيانات في تقدير الذاكرة المطلوبة في كل مرحلة من مراحل التجهيز.

تحديد مهام التجهيز التي ينطوي عليها الأمر، مثل التصفيف أو التجميع أو التحول، وقد تكون لكل مهمة مطالب مختلفة بالذاكرة استنادا إلى التعقيد وحجم البيانات.

سجل حسابي لخزن البيانات

(ج) حساب الذاكرة اللازمة لتخزين البيانات، ويشمل ذلك مضاعفة حجم البيانات حسب عوامل تُعزى إلى هياكل البيانات ورؤوسها العامة، وعلى سبيل المثال، فإن المعالجة في الذاكرة تتطلب في كثير من الأحيان حيزا إضافيا للأرقام القياسية والعوازل والمتغيرات المؤقتة.

تقدير الذاكرة لكل عنصر من عناصر البيانات ولخص هذه الاحتياجات للحصول على مجموع احتياجات التخزين.

' 1` " مذكرة تقديرية لتجهيز النفقات العامة "

وتتطلب مهام تجهيز الوثائق مزيدا من الذاكرة للخرافيزميات والبيانات المؤقتة والرؤوس العامة للنظام، والنظر في تعقيد العمليات وحجم مجموعات البيانات التي يتم تجهيزها في وقت واحد.

استخدام الصيغة التالية كمبدأ توجيهي:

Estimated Memory = Data Storage + Processing Overheads + Buffer]

النمط العملي للتقدير الدقيق

  • ابدأ بعينات بيانات فعلية إلى مجموعات بيانات أكبر
  • حساب تحميلات تجهيز الذروة والتوافق.
  • إدراج حاجز قدره 20 إلى 30 في المائة لتلبية الاحتياجات غير المتوقعة.
  • Review system documentation for specific memory requirements of tools used.