شہری اینڈمپ؛ اسٹرکچرل انجینئری؛
الورۃ الورۃ کے ساتھ ساتھ وسیع ڈیٹا سیٹوں پر عملی کوششیں
Table of Contents
بڑے ڈیٹا سیٹوں میں ڈیٹا کی تیاری میں مہارت سے ایک عام چیلنج ہوتا ہے. بیرونی طرز کے ایلمینٹس ڈیٹا کو منظم کرنے کے لیے بنایا گیا ہے جو بنیادی یادداشت میں مکمل طور پر مناسب نہیں ہو سکتا. یہ Alphalms system I/O آپریشنز، بڑے ڈیٹا درخواستوں کے لیے مناسب بنا دیتے ہیں۔
باہر کی بابت سیکھنا
بیرونی اقسام میں ڈیٹا کو انفلیشن میں تقسیم کرنا، ہر چیک انفرادی طور پر، اور پھر تقسیم شدہ حصص کو ترتیب دینا شامل ہے۔اس عمل میں ڈیٹا کا صرف ایک حصہ یاد میں ڈالا جاتا ہے، وسائل کے استعمال کو کم کرنے کے عمل کو۔
عملی تکنیک
بڑے ڈیٹا کے لیے بیرونی نوعیت کی کئی تکنیکیں ترتیب دیں:
- Multi-way Merge: میرونگ کئی مختلف طریقوں سے گزرنے والے گزر بسرات کی تعداد کو بے حد کم کرتا ہے۔
- Buffered I/O: [flowers] پڑھنے / لکھنے کے دوران ڈسک رسائی کو وقتا فوقتاً استعمال کرتے ہیں۔
- Parallel processing:] متعدد اداروں میں مختلف قسم کے کام کرنے والے عمل کو تیز کرنے کے عمل کو تیز کرنے کی کوشش کرنا۔
- Indexing: پر منظم ڈیٹا پر انڈیکس بنانے کی سہولت کے لیے تیز رفتار سے جلد کی تلاش میں لگ جاتی ہے۔
اصلاحی معاملات
بیرونی نوعیت کا اطلاق کرتے وقت مندرجہ ذیل پر غور کریں:
- اس طرح کی یادداشتیں چنک سائز کا تعین کرنے کے لئے دستیاب ہیں ۔
- دیر تک کم کرنے کے لئے ڈسک رسائی کے نمونے تلاش کریں.
- بیرونی ملاپ طرح طرح کے مؤثر طریقے استعمال کریں.
- بوتلوں کو روکنے کے لئے مینارِنگہبانی کے ذریعے استعمال کیا جاتا ہے