إدماج الدرك مع أجهزة الاستشعار الأخرى: تقنيات الدمج من أجل رسم الخرائط

وقد أصبح إدماج المعهد الوطني للبحوث الزراعية المستقلة والمراجعة المتكاملة حجر الزاوية في نظم الخرائط والتصورات الحديثة، حيث إن نظم الدمج المتعددة أجهزة الاستشعار التي تنطوي على كشف الضوء وفرز (LiDAR)، والكاميرات، ووحدات القياس غير الذاتي، قد اعتُمدت على نطاق واسع في ميادين مثل القيادة المستقلة والروبوتات بسبب قدراتها على التصور التكميلي، ومن خلال الجمع بين البيانات المستمدة من مصادر متعددة، فإن هذه النظم الجغرافية تخلق نماذج بيئية شاملة تتغلب على القيود المتأصلة.

فهم أساسيات ارتقاء أجهزة الاستشعار

إن الانشطار الحسّي يمثل نهجاً متطوراً إزاء التصور البيئي يُعزز مواطن القوة في طرائق الاستشعار المتعددة بينما يعوض عن نقاط ضعفه الفردية، ويُعدّ ارتياب الاستشعار جزءاً من نموذج التصور، ونريد أن نُنذر البيانات من أجهزة استشعار رؤيتنا، إما أن تضيف الازدواج أو اليقين أو أن تستغل استخدام أجهزة الاستشعار المتعددة، والمبدأ الأساسي وراء الدمج في أجهزة الاستشعار هو أن مختلفاً تستوعب جوانباً مُ مُوحَّدة.

وتتضح أهمية تكاثر أجهزة الاستشعار عند دراسة القيود المفروضة على أجهزة الاستشعار الفردية، إذ توفر الكاميرات معلومات ساكنة عالية الاستبانة ولكنها حساسة إزاء التغيرات في النسيج والظل والظروف الجوية الضارة مثل الضباب أو المطر الثقيل، وتوفر ليدار هيكلا جغرافيا دقيقا، ومع ذلك فإن أداءها قد يتدهور على السطحات المظهرية أو على المدى الطويل، وعلى النقيض من ذلك، تحتفظ أجهزة الاستشعار بالردار بمستوى عال من الموثوقية في ضوء منخفض ولكنها ذات طابع مكاني.

Typesors Commonly Integrated with LIDAR

وعادة ما تدمج نظم الخرائط والتصور الحديثة بين نظام " ليد آر " (LIDAR) وبين عدة أنواع من الاستشعار التكميلي، ويسهم كل منها في قدرات فريدة على أداء النظام عموما.

آلة تصوير

وتمثل أجهزة الاستشعار بالكاميرا واحدة من أكثر المكملات شيوعاً وقيمة لنظم LIDAR، وتتزايد اعتماد نظم التصور الحديثة لجهات الاستشعار غير المتجانسة التي تدمج أجهزة الاستشعار ذات الرؤية الأوعية مع وحدات قياس الليديات للتغلب على القيود الخاصة بالطرائق، وفي حين أن كاميرات الوصل تحمل مقياساً للدموع الكثيف والحل المكاني العالي، فإنها تواجه قيوداً متأصلة في تقدير الأعماق الضوئي نظراً لضآلة في القياس الجغرافي.

وتوفر الكاميرا معلومات ساكنة، ولكنها تفتقر إلى معلومات دقيقة عن بعد للهدف، بينما تقدم الرابطة معلومات دقيقة عن عمقها، ولكن مع حل متفرقة، وهذه العلاقة التكميلية تجعل عملية دمج الكاميرات والسجلات المحلية فعالة بشكل خاص بالنسبة لمهام الكشف عن الأجسام وتصنيفها، وتبرز الكاميرات عند تحديد أنواع الجسم، والعلامات المطالعة، واكتشاف علامات الممر، وفهم السياق الرئوي من خلال معلومات عن اللون والنسيج.

وقد دفعت الابتكارات الأخيرة إلى زيادة التكامل بين الكاميرات والمعهد الدولي للبحث والتطوير في مجال الطاقة، وأعلنت شركة كيوكيرا تطوير جهازها الفريد من نوعه " حساسات الوقود " ، وهو أول برنامج دولي للكشف عن الأضرار، ينسق بين الفؤوس البصرية للكاميرا و " ليدار " في جهاز الاستشعار الواحد، وهذا التصميم الفريد يسمح بالحصول على بيانات غير مجهزة بالمبارالاكات، وهو ما كان من قبل غير قابل للاستدامة.

Radar Sensors

وتوفر أجهزة استشعار الرادار، ولا سيما نظم رادار حديثة من نوع 4D، معلومات تكميلية حاسمة للشبكة الدولية للحد من الكوارث، وقد برزت عملية دمج رادار ليدار و 4D كحل واعد لكشف الأجسام من 3D في ظروف معقدة وضارة، وقد تحول الباحثون إلى ليدار بدمج راداري من 4D، مما أدى إلى زيادة قوة هذين الأسلوبين، وفي حين يقدم برنامج ليدار معلومات مكانية مفصلة، فإن رادارا يوفر معلومات قوية في ظروف الطقس المعاكسة.

قدرة الرادار على اختراق الضباب والمطر والثلوج والغبار تجعله ثميناً لعملية جميع الطقس، على عكس (ليدار) التي يمكن أن تتحلل بدرجة كبيرة من الجسيمات الجوية، فإن الرادار يحتفظ بأداء ثابت في ظروف الطقس الصعبة، بالإضافة إلى أن الرادار يمكنه أن يقيس بشكل مباشر سرعة الأجسام من خلال التحول في دوبلر، يقدم معلومات عن الحركة التي تكمل القياسات المكانية لـ(ليدار).

ويضم إطار نموذجي للتأخر في التفويض طرائق للتصوير الآلي، وطرق الرادار لتصنيف الجسم في القيادة المستقلة، وإدماج جميع أنواع الاستشعار الثلاثة - الكاميرا، ورابطة لندن الدولية للبحوث الزراعية، ورادار - نظاماً للتصورات قوي للغاية قادر على العمل بشكل موثوق عبر مختلف الظروف البيئية.

GPS and GNSS Modules

وتوفر نماذج النظام العالمي لتحديد المواقع ونظام السواتل العالمي للملاحة معلومات مطلقة لتحديد المواقع تكمل القياسات المكانية النسبية لشبكة ليدار، بينما تقدم وحدات قياس الموقع الشبكي لشبكة ليدار في وضع خرائط محلية مفصلة وكشف الأجسام القريبة، تقدم الشبكة العالمية لتحديد المواقع/النظم العالمية لسواتل الملاحة إحداثيات مرجعية عالمية تمكن النظام من فهم موقعه في سياق جغرافي أوسع.

ويكتسي إدماج النظام العالمي لتحديد المواقع مع نظام ليدار أهمية خاصة بالنسبة للتطبيقات التي تتطلب رسم خرائط جغرافية مرجعية، مثل المسح، والتفتيش على الهياكل الأساسية، والملاحة المستقلة على مسافات طويلة، وتساعد بيانات النظام العالمي لتحديد المواقع على أساس نظام ليدار، في وضع أولي، وتمنع الانجراف في تقديرات المواقع على فترات العمليات الممتدة، وفي البيئات الحضرية التي قد تكون فيها إشارات النظام العالمي لتحديد المواقع قد تدهورت أو غير متاحة، يمكن أن تؤدي عملية تحديد المواقع على أساس نظام تحديد المواقع إلى تحسين دقة.

وحدات القياس غير القانوني

وحدات القياس غير المتجانسة هي عناصر أساسية في نظم المسح التي تعتمد على نظام LIDAR، وتوفر قياسات عالية التردد للحركة تكمل الملاحظات المكانية للشركة، ومن خلال تعزيز القدرات التكميلية للمستشعرات غير المتجانسة مثل الكاميرات، والكشف عن النور والفرز، ووحدات القياس غير المباشر، وضع الباحثون أطراً للتصور المتعدد الوسائط يعززان إلى حد كبير من موقع التصوير.

ويقيّم الاتحاد الدولي لجمعيات الصليب الأحمر والهلال الأحمر سرعة سرعة سرعة سرعة سرعة استخدام النظام لتتبع تحركاته بين المسح الضوئي للسجلات المسوحة، وهذا أمر له قيمة خاصة لأن أجهزة الاستشعار التابعة للسجلات المحلية تعمل عادة على ترددات منخفضة نسبيا (10-20 هرتز بالنسبة للعديد من النظم)، في حين يمكن أن تقدم وحدات الرصد المتكاملة قياسات بمئات أو آلاف الهرتز، وتساعد بيانات الحركة العالية التردد IMU على تداخل نوعية وتوجهات قياسية أكثر دقة.

ويمكن أن تدمج البحوث المقبلة أجهزة استشعار أكثر للمركبات، مثل الرادار المليمتر، ووحدات القياس غير الجوي، والكاميرات ذات الحمراء، لجمع بيانات بيئية أغنى، والجمع بين بيانات وحدة الرصد الدولي وقياسات LIDAR أساسي في خوارزميات محلية بسيطة ورسم الخرائط، مما يتيح للآليات والمركبات المستقلة بناء الخرائط مع تتبع مواقعها في نفس الوقت ضمن تلك الخرائط.

كاميرات المراقبة الحرارية

كما أن الكاميرات ذات الأشعة تحت الحمراء الحرارية تمثل نوعاً من أجهزة الاستشعار المتخصصة، وإن كانت تتزايد أهميتها، لنظم دمج أجهزة الاستشعار، التي تجمع بين آلة تصوير حرارية ذات أعراض تحت الحمراء ومجس لليدار، يمكن أن تكتشف وتتعرف بشكل موثوق على الأجسام حتى في البيئات التي تتسم بضعف الرؤية، مثل النهار والليل، كما أن الكاميرات ذات الحمراء الحرارية تلتقط، بصورة موثوقة، أشياءاً ذات ضوء شمسي منخفض وشديد.

وخلافاً لكاميرات الـ (آر جي بي) التقليدية التي تعتمد على الضوء المرئي، فإن الكاميرات الحرارية تكشف عن الإشعاع بالأشعة تحت الحمراء التي تنبعث منها الأجسام على أساس درجة حرارتها، مما يجعلها فعالة بشكل خاص لكشف المشاة والحيوانات والمركبات بغض النظر عن ظروف الإضاءة، ودمج بيانات الكاميرا الحرارية بالقياسات المكانية الدقيقة للشركة ينشئ نظاماً قوياً للكشف يحافظ على الأداء أثناء العمل الليلي وفي ظروف صعبة للرؤية حيث تكافح الكاميرات التقليدية.

هيكليات ومقاييس الاستشعار

ويمكن تنفيذ عملية تكاثر الحساسات على مختلف المستويات المعمارية، وكل منها له خصائص متميزة ومزايا ومتطلبات حسابية، ويعتبر فهم مستويات الاندماج هذه أمرا أساسيا لتصميم نظم فعالة متعددة الاستشعار.

الدمج المبكر (التدفق على مستوى الأرض)

ويجمع الاندماج المبكر، المعروف أيضاً بدمج مستوى منخفض أو مستوى البيانات، بين بيانات الاستشعار الخام قبل حدوث أي عملية تجهيز رفيعة المستوى، أما الاندماج المبكر (التصنت الأقل مستوى) فيتعلق بدمج البيانات الأولية، أما الاندماج في مرحلة متأخرة فيتعلق بدمج الأجسام (إدماج أجهزة الاستشعار على مستوى عال) أو المسارات (التصنيف على مستوى عال) عند القيام بربطة أجهزة الاستشعار المبكر.

وتختلف أساليب الدمج اختلافاً كبيراً؛ وتستعمل بعض الأساليب التبكير في الاندماج للجمع بين بيانات الاستشعار الخام قبل إطعامها إلى نموذج واحد، بينما تستخدم أساليب أخرى التبخر في مرحلة اتخاذ القرار، وتجمع بين نواتج الاستشعار الفردي في مرحلة اتخاذ القرار، وفي سياق عملية الاندماج في الكاميرا، ينطوي التبكير في الدمج عادة على إسقاط سحابات النقاط المسماة " ليدار " على صور الكاميرات أو تحويل نوعي البيانات إلى حيز تمثيل مشترك قبل التجهيز.

وتتحول الغيوم المتحركة إلى طائرات تصويرية للحصول على صورة عمق 2D، وبتصميم مجموعة من الدمج بين السمات لربط فروع تجهيز الغطس وأجهزة المعالجة بالأشعة فوق البنفسجية، تطبق استراتيجية دمج الملامح المتعددة لتكامل البيانات المتعددة الوسائط، ويتيح هذا النهج للخوارزمية الدمجية تعزيز الروابط في البيانات الأولية ويمكن أن تستخرج معلومات أكثر من معالجة كل تدفق من مسارات الاستشعار بصورة مستقلة.

وتشمل مزايا الاندماج المبكر القدرة على استغلال الروابط المحمومة بين طرائق الاستشعار وربما الدقة العالية عندما تتوافر بيانات تدريبية كافية، غير أن الاندماج المبكر يطرح أيضا تحديات: فهو يتطلب معايرة مكانية وزمنية دقيقة بين أجهزة الاستشعار، ويمكن أن يكون مكثفا حسابيا، وقد يكون حساسا إزاء الفشل في الاستشعار أو تدهور نوعية البيانات من إحدى الطرائق.

ارتقاء في المرحلة المتوسطة (التدفق على مستوى العضوية)

إن دمج المشهد الأوسط يعمل على مستوى المعالم، يجمع بين التمثيلات الوسيطة المستخرجة من كل طريقة استشعارية، ونموذج جديد متعدد المراحل لدمج الأشعة الليدارية يشمل الدمج في المراحل المتوسطة ودمج الطور متأخر، مقترح، يدمج خط الاستدلال الجغرافي للشركة مع الثراء الرئوي القائم على الكاميرا عن طريق التبريد الهرمي.

في عملية الاندماج على مستوى المعالم، يتم تجهيز بيانات كل جهاز استشعار من خلال مراحل أولية لاستخراج السمات قبل حدوث الإندماج، على سبيل المثال، قد يتم معالجة الغيوم المُنطلقة من خلال طبقة التكسين وربط الشقوق، بينما تمر صور الكاميرات عبر طبقات الشبكة العصبية للثورة، ثم يتم الجمع بين الخرائط المُنتجة من كلا الشكلين باستخدام مختلف استراتيجيات الإندماج مثل دمج وحدات الفرز أو آليات الاهتمام أو التعليم.

وتعطي الملامح الجغرافية للخريم المكيّفة والملامح المسمّاة للأشعة الليدرامية والكاميرات المسمّاة عن طريق ترجيح الانتباه عبر القنوات، وتعزيز التمثيل المتعدد الوسائط عن طريق إعطاء الأولوية الدينامية للقنوات الإعلامية، وقد أصبحت آليات الاندماج القائمة على الاهتمام شائعة بشكل خاص في السنوات الأخيرة، حيث أنها تتيح للنظام أن يثقل بصورة دينامية مساهمة مختلف طرائق الاستشعار القائمة على موثوقيتها وأهميتها في حالات محددة.

ويتيح الاندماج على مستوى النسيج توازنا بين التكامل الدقيق للدمج في مرحلة التبكير وطريقة التبكير في الاندماج، ويتيح لكل طريقة استشعار أن تُعالج بالهيكلات المتخصصة التي تُحسّن على هذا النوع من البيانات، مع تمكين التفاعلات الغنية عبر الوسائط على مستوى السمات.

موجة متأخرة (الارتفاع الرفيع المستوى)

ويجمع التبخر المتأخر، الذي يسمى أيضاً بدمج مستوى القرار أو المستوى الرفيع، بين نواتج الخوارزميات المستقلة للكشف أو التتبع التي تجري على كل طريقة من وسائل الاستشعار، وتبين النتائج أن سرعة الدمج خفيفة الوزن يمكن أن تحقق درجة عالية من الموثوقية بينما تظل فعالة من الناحية الحسابية، مما يجعلها مناسبة لنظم القيادة المستقلة ذاتياً في الوقت الحقيقي.

وفي هياكل التبشير المتأخرة، يعمل كل جهاز استشعار بشكل مستقل لكشف الأشياء أو تقدير المواقف أو أداء مهام أخرى تتعلق بالتصورات، ثم تجمع نتائج هذه الأنابيب المستقلة للتجهيز باستخدام خوارزميات جمعيات، وعندما يتم ذلك في فترة زمنية متأخرة، نريد أن نقيم الرابطة بين النتائج (صناديق متنقلة) وبالتالي نمتلك خوارزميات مثل الغوريدي الهنغارية وآلمانفيلتر لحلها.

ويرتكز نهجنا على تقنيات التبكير في الاندماج، وتمكين نماذج الاستشعار المستقلة، والسماح باستراتيجيات الاندماج المرنة، فالطبيعة النموذجية للتأخر في الاندماج توفر عدة مزايا: يمكن تطوير أجهزة الاستشعار وتحسينها على نحو مستقل، والنظام أقوى من الفشل في أجهزة الاستشعار الفردية، ومن الأسهل إضافة أو إزالة أجهزة الاستشعار دون إعادة تصميم خط الأنابيب بأكمله.

أما التبخر فيكون على نحو جيد جداً بالنسبة للنظم التي لديها أجهزة استشعار غير متجانسة والتي قد تعمل في ترددات مختلفة أو تكون لها مجالات مختلفة من حيث النظر، والمبادلة هي أن التأخر في الاندماج قد لا يستوعب وجود ارتباطات دقيقة بين طرائق الاستشعار بقدر ما هو فعال من النُهج السابقة للاندماج، مما قد يؤدي إلى انخفاض طفيف في الأداء في الظروف المثالية.

النُهج الهجينة للوقود

وتتزايد استخدام نظم أجهزة الاستشعار الحديثة لنهج هجينة تجمع بين مستويات الاندماج المتعددة من أجل الاستفادة من مزايا كل منها، وتميل أساليب الاندماج الهجينة إلى تحقيق أعلى مستوى من القوة، ولكن تعقيدها وتكاليف التدريب ومتطلبات مجموعات البيانات المتعددة أجهزة الاستشعار المتزامنة إلى الحد من الانتشار العملي.

وقد يستخدم هيكل الصمامات الهجينة التبكير في الدمج من أجل أزواج أجهزة الاستشعار المقترنة بشدة (مثل LIDAR وكاميرات مثبتة في نفس السكن)، بينما يستخدم الدمج المتأخر لدمج أجهزة استشعار إضافية مثل الرادار أو النظام العالمي لتحديد المواقع، ويتيح هذا النهج المتعدد المستويات لمصممي النظم أن يُحدّدوا استراتيجية الدمج الأمثل لكل مجموعة من أجهزة الاستشعار استنادا إلى خصائصهم ومتطلبات التزامن، والقيود المفروضة على حسابهم.

التقنيات والوحدات الأساسية للوقود

ويتطلب تنفيذ عملية الدمج الفعالة للمستشعرات وجود خوارزميات متطورة يمكن أن تتصدى لتحديات الجمع بين مصادر البيانات غير المتجانسة، وتشكل عدة تقنيات أساسية العمود الفقري لنظم الاندماج الحديثة.

(كالمان) يصور ويعرض (كالمان) للتصوير

ويمثل مرشح كالمان أحد أهم الخوارزميات المستخدمة على نطاق واسع في عملية تطهير أجهزة الاستشعار، وهو يوفر طريقة مثالية لتقدير حالة نظام دينامي من القياسات المزعجة، مما يجعلها مثالية لجمع البيانات من أجهزة الاستشعار المتعددة ذات الخصائص الضوضاء المختلفة ومعدلات التحديث.

وفي نظم الإندماج القائمة على الـ(ليدار) تستخدم مرشحات كالمان عادة لتتبع الأجسام المتحركة عن طريق الجمع بين قياسات المواقع من (ليدار) والمعلومات عن سرعة التنبؤات من الرادار أو الحركة من بيانات الاتحاد الدولي للمرشح، ويحتفظ المرشح بتقدير محتمل لحالة الجسم (الوضع، السرعة، التسارع) ويستكمل هذا التقدير مع وصول القياسات الجديدة من مختلف أجهزة القياس المقدرة إلى قياسات.

ويوسع نطاق مصفاة كالمان الموسع نطاق المرشح الأساسي لـ " كالمان " ليعالج ديناميات النظام غير الخطي ونماذج القياس المشتركة في تطبيقات العالم الحقيقي، وعلى سبيل المثال، تنطوي العلاقة بين قياسات موقع " ليدار " وموقع المركبات على تحولات غير قياسية جغرافية، مما يجعل " EKF " خيارا طبيعيا لدمج " LIDAR-IMU " في نظم الملاحة.

(محرر (كالمان

ويوفر فيلم كالمان غير المُركَّز نهجاً بديلاً لمعالجة النظم غير الخطية التي كثيراً ما تفوق أداء فيلم كالمان الموسَّع، ويُستخدم مرشح كالمان غير المُركَّز للتنبؤ الدقيق بحالة حركة الأجسام غير الخطية، وتُضاف معلومات عن الحركة الجسمية إلى وحدة مطابقة الاتحاد البرلماني الدولي لتحسين دقة المطابقة في عملية جمع البيانات.

وبدلاً من أن يُدرج الصندوق وظائف غير خطية كما يفعل، يستخدم تقنية عينات محددة لاستخلاص متوسط وتزامن توزيع الدولة من خلال مجموعة من نقاط العينات المختارة بعناية، وهذا النهج يوفر عادة تقديرات أكثر دقة للنظم غير الخطية العالية، مع الحفاظ على الكفاءة الحسابية مقارنة بإطار EKF.

في سياق عملية دمج (ليدار) للشركة، (المملكة المتحدة) ذات قيمة خاصة لتتبع الأشياء ذات الأنماط المعقدة للحركة مثل المركبات التي تتحول أو تتحول إلى مرشدين، تحسين الدقة في التنبؤ بالحركة يعزز قدرة النظام على الحفاظ على مسارات متسقة حتى عندما يتم خلع الأجسام مؤقتاً أو عندما تكون القياسات المشعرة مزعجة.

فرز الجسيمات

وتمثل مرشحات الجسيمات، المعروفة أيضا بأساليب مونت كارلو المصفورة، توزيع الدولة باستخدام مجموعة من العينات المثقلة (الجسيمات) بدلا من التوزيع المتماثل، مما يجعل مرشحات الجسيمات مناسبة بشكل خاص للتعامل مع النظم غير الساحلية العالية، والضوضاء غير الغوسية، والتوزيع المتعدد الوسائط الذي يمكن أن ينشأ في سيناريوهات الدمج المعقدة.

في موقع (ليدار) ورسم الخرائط، تستخدم مرشحات الجسيمات عادةً في مشاكل التمركز العالمي حيث لا يعرف الموقع الأولي أو غير مؤكدة إلى حد كبير، كل جزيئات تمثل فرضية عن حالة النظام (مثل موقع الروبوت)، وترجيح الجسيمات على أساس كيفية تفسيرها لقياسات الاستشعار الملاحظة، وعلى مر الزمن، تتجمع الجسيمات نحو الدولة الحقيقية مع إزالة الافتراضات غير المحتملة.

وتأتي مرونة مرشحات الجسيمات بتكلفة حسابية، حيث أنها تتطلب عادة مئات أو آلاف الجسيمات لتمثيل التوزيعات المعقدة بدقة، غير أن التحسينات الحديثة في أجهزة الحاسوب والحساب قد جعلت مناظر الجسيمات عملية بصورة متزايدة لتطبيقات الوقت الحقيقي.

ارتقاء عميق يقوم على التعلم

وقد أدى التعلُّم العميق إلى تطوُّر أجهزة الاستشعار في السنوات الأخيرة، مما أتاح التعلم النهائي لاستراتيجيات الاندماج مباشرة من البيانات، وهذا الاستعراض يحلل تقنيات مواءمة البيانات وتجهيزها، ومختلف مستويات دمج البيانات، والدور التحويلي للتعلم الآلي، وخوارزميات التعلم العميق، بما في ذلك النماذج التأسيسية الناشئة، وهذا التآزر، الذي يدعمه التعلُّم العميق، سيحسن قدرتنا على رصد الظروف السطحية للأراضي بمزيد من الدقة والوثوقية.

ويمكن أن تتعلم هياكل الشبكة العصبية من أجل دمج أجهزة الاستشعار علاقات معقدة وغير خطية بين مختلف طرائق الاستشعار التي يصعب أو يتعذر عليها أن تصيغ بالنهج التقليدية، وشبكات العزل الثورية ذات فعالية خاصة في معالجة الغيوم والصور المصورة التي تستخدمها أجهزة الاستشعار من طراز LIDAR، بينما يمكن للشبكات العصبية المتكررة والمحولات أن تُظهر معالونات مؤقتة في بيانات الاستشعار المتتابعة.

وثمة نهج جديد آخر للدمج، هو " ديففلور " ، يحفز نماذج الانتشار على جذب الملامح المتعددة الوسائط ويولد تمثيلا قويا للمركبات ثنائية الفينيل متعددة البروم، ويمكن للنموذج، باستخدامه للتحسينات الوراثية، أن يستعيد المعلومات عن الطريقة المفقودة أو المفسدة، ويحسن استقرار التصور تحت التحلل، ويمكن لهذه التقنيات المتقدمة للتعلم العميق أن تعالج الإخفاقات المستشعرية وأن تحافظ على أداء قوي حتى عندما توفر طريقة واحدة بيانات متدهورة أو مفقودة.

وقد أصبحت آليات الاهتمام مهمة بوجه خاص في عملية الاندماج العميق القائمة على التعلم، حيث تتيح هذه الآليات للشبكة أن ترجح بصورة دينامية مساهمة أجهزة الاستشعار المختلفة استنادا إلى موثوقيتها وأهميتها في سياقات محددة، فعلى سبيل المثال، قد تتعلم شبكة الاندماج الاعتماد بدرجة أكبر على السجل في ظروف منخفضة الضوء حيث يتحلل أداء الكاميرا، مع التركيز على بيانات الكاميرات في بيئات متينة حيث توفر معلومات ثرية.

نظرية ديمبستر شافر

وتوفر نظرية " ديمبستر - شافر " للأدلة إطارا رياضيا لجمع الأدلة من مصادر متعددة بدرجات مختلفة من عدم اليقين، وتستخدم استراتيجية متطابقة بين القطاعات والوحدة، تستند إلى احتمال وجود نقطة مركزية من بعد، ونظرية " ديمبستر - شافر " المحسنة، في أداء عملية دمج الثقة من الدرجة الواحدة للحصول على نتيجة الكشف النهائية عن الاندماج.

وعلى عكس النهج البيزيزية التي تتطلب توزيعا دقيقا للاحتمالات، يمكن لنظرية ديمبستر - شافر أن تمثل عدم اليقين والجهل صراحة، وهذا يجعل من المفيد بصفة خاصة بالنسبة لتصورات الصمامات التي قد تكون فيها أجهزة الاستشعار المختلفة مستويات مختلفة من الثقة في قياساتها أو حيث قد لا يكون بمقدور بعض أجهزة الاستشعار تقديم معلومات عن جوانب معينة من البيئة.

في عملية دمج أجهزة الكشف عن الأجسام، يمكن لنظرية ديمبستر شافر أن تجمع بين الثقة في التصنيف من كلا الشكلين، وحساب الحالات التي يكون فيها جهاز استشعار واحد غير مؤكد أو يقدم معلومات متضاربة، وقاعدة النظرية مجتمعة تكفل أن الأدلة المتسقة من أجهزة الاستشعار المتعددة تعزز الثقة العامة، في حين يتم التعامل مع الأدلة المتضاربة بطريقة مبدئية.

معايرة: مؤسسة الاندماج الفعال

إن التحديد الدقيق بين أجهزة الاستشعار أمر حاسم للغاية من أجل الاندماج الفعال، وقد أدى هذا التطبيق الواسع النطاق إلى تزايد الطلب على معايرة دقيقة للمستشعرات، وبدون معرفة دقيقة بالعلاقات المكانية والزمنية بين أجهزة الاستشعار، لا يمكن للخوارزميات الدمجية أن تربط بشكل صحيح القياسات من مختلف الطرائق، مما يؤدي إلى تدهور الأداء أو فشل النظام الكامل.

معايرة المكان (المعايير الخارجية)

ويحدّد معايرة المكانة النسبية والتوجه بين مختلف أجهزة الاستشعار، إذ إن تطوير تكنولوجيا الصمامات باستخدام الكاميرات والجهاز الليدري المائي للمركبات المستقلة يتطلب وضعاً نسبياً دقيقاً (بما في ذلك المعلومات المتعلقة بالوضع والاتجاه) من أجهزة الاستشعار بالكاميرات وجهاز الاستشعار الليداري كضرورة مطلقة، ويمكن تحقيق ذلك بإيجاد مصفوفة التحويل بين أجهزة الاستشعار المتباينة باعتبارها مشاكل بارامترات خارجية.

وفيما يتعلق بدمج أجهزة الليدار - الكيميرا، فإن المعايرة الخارجية تنطوي على تحديد مصفوفة التناوب وناقل الترجمة التي تحول نقاطا من إطار التنسيق الخاص بشركة ليدار إلى إطار تنسيق الكاميرا، ويتيح هذا التحول توقع نقاط ليدار على صور الكاميرات أو على أجهزة التصوير التي ترتبط بقياسات 3D LIDAR.

وتُتخذ عدة أرقام من بيانات العينات لحساب معايير القياس المتأصلة والمتأصلة بحيث يعمل الدمج على البيانات في الوقت الحقيقي بأقل قدر من الخطأ في الإسقاطات، وعادة ما ينطوي الاحتياطات على استخلاص بيانات عن أهداف المعايرة المصممة خصيصا والتي تكون واضحة لكلا المستشعرين، ثم حل مشكلة التعظيم لإيجاد معايير التحول التي تنسق الملاحظات على أفضل وجه.

وتشمل نُهج المعايرة الحديثة أساليب قائمة على الأهداف باستخدام لوحات الحاسب أو علامات الـ 3D المتخصصة، والأساليب التي لا تستهدفها والتي تستغل الملامح الطبيعية في البيئة، وتقنيات المعايرة التلقائية التي تصقل باستمرار معايير المعايرة أثناء التشغيل العادي، وقدرة الاستشعار عن طريق الاتصال المباشر باستخدام أجهزة الحاسوب المصممة على أساس نوع الجنس مع نظام ليدار، مع القدرة على ضمان قياس جغرافي دقيق ومتسما بين وحدات الإنتاج.

معايرة مؤقتة (تتزامن زمني)

وتعالج المعايرة الزمنية الموازية بين قياسات أجهزة الاستشعار المختلفة، وبعض دراسات الصمامات تحتاج إلى مصابيح دقيقة جدا وموجّهة جيدا للكاميرات وقياسات الاتحاد الدولي للمحاسبة، غير أن هذه المصابيح تتأثر بعوامل متعددة، بما في ذلك الاختلافات في مصادر الساعة، وآليات الحفز، وحالات التأخير في نقل المواد، وازدحام البيانات، والجليس، والانجراف، حيث أن كل جهاز استشعار يُظهر تأخيرات مختلفة، لا محالة، تحدث.

وبالنسبة للمنابر المتحركة، يمكن أن تتسبب حتى المكافآت الصغيرة في حدوث أخطاء كبيرة في الدمج، وإذا كانت المركبة تسافر على مسافة 30 مترا في الثانية، فإن فترة 10 ملايين ثانية تعوض عن ذلك تؤدي إلى سوء فهم مكاني يتراوح بين قياسات الاستشعار بين 30 سنتيمتر، وهذا يمكن أن يؤدي إلى تدهور شديد في أداء الاندماج، ولا سيما بالنسبة لمهام مثل تعقب الجسم أو تقدير الحركة.

ومن الناحية المثالية، يمكن لنظام مكرس للمعدات أن يؤدي بصورة متزامنة إلى الحصول على البيانات لجميع أجهزة الاستشعار، وهو حل سبق اعتماده في التطبيقات التي تتطلب مواءمة زمنية عالية الدقة، مثل دمج أجهزة الاستشعار المتعددة في نظام ليدار، والكاميرات، والرادار المزودة بموجات ميليمترات في القيادة المستقلة، ويوفر تزامن المعدات أدق توقيت، ولكن طرق المقارنة بين البرمجيات يمكن أن تحقق أيضاً تقديراً مقبولاً للأداء.

معايرة الأصيلة

وبالإضافة إلى المعايرة الخارجية بين أجهزة الاستشعار، يجب أن يُعادل كل جهاز استشعار منفرد ليصحح التشوهات الداخلية وعدم الدقة، وبالنسبة للكاميرات، تحدد المعايرة الضمنية معايير مثل طول التركيز، ونقطة الوصل الرئيسية، ومعاملات التشويه الحساسية، وقد تنطوي أجهزة الاستشعار ذات الكثافة الارتدادية، على تصحيح الأخطاء في الزوايا، والمقاييس.

ويعد التعادل الدقيق للمعايرة الطبيعية شرطا مسبقا لتحقيق التوازن والتدخين الجاهزين، وقد يؤدي التجاوزات في البارامترات المتأصلة إلى الانطلاق عبر خط الأنابيب، ويمكن أن يتدهور أداء النظام عموما بدرجة كبيرة، وكثيرا ما تأتي أجهزة الاستشعار الحديثة بمعايرة المصنع، ولكن قد يكون من الضروري تحديد معايرة ميدانية لبيان التغيرات الناجمة عن الإجهاد الميكانيكي أو تفاوت درجات الحرارة أو التراكم.

تطبيقات ارتشال جهاز الاستشعار في ليدار

ويتيح إدماج القانون الدولي الخاص بالبحوث الدولية للحد من الكوارث في أجهزة الاستشعار التكميلية أداء قويا عبر مجموعة واسعة من التطبيقات، لكل منها احتياجات وتحديات فريدة.

المركبات المستقلة

وربما تمثل القيادة المستقلة أكثر التطبيقات طلباً وشديدة الطلب في مجال ضخ أجهزة الاستشعار التابعة للرابطة الدولية لتيار، وقد أدى التقدم في تكنولوجيا الاستشعار والنمو الكبير في القدرة الحاسوبية إلى زيادة الاهتمام بالاستدماج المتعدد أجهزة الاستشعار للتطبيقات مثل القيادة المستقلة، ومن بين هذه العمليات، أصبح الدمج المتعدد أجهزة الاستشعار استراتيجية أساسية في قيادة المركبات، ودعم التحديد المحلي الدقيق، والتصور الشامل للبيئات المعقدة.

وقد طبقت القيادة الذاتية على نطاق واسع في التطبيقات التجارية والصناعية، إلى جانب رفع مستوى نظم التوعية البيئية، وتعتمد المهام من قبيل تخطيط المسارات، وتتبع مسارات المسارات، وتجنب العقبات على القدرة على كشف الأجسام وتراجع المواقع في الوقت الحقيقي، وتجميع المركبات المسماة بالكاميرات والرادارات والجهاز العالمي لتحديد المواقع، وجهاز الرصد الدولي، على نحو شامل، وكشف وتتبع العقبات الأخرى.

ومن خلال التحقق من البيانات التي يتم جمعها لحساب الذات، يُعتبر أداء الكشف عن الاندماج وتتبعه أفضل بكثير من أداء جهاز الاستشعار الوحيد، ويتيح الاندماج المتعدد أجهزة الاستشعار التكاثر والارتداد اللازمين لتطبيقات القيادة المستقلة ذاتياً، بما يكفل قدرة المركبة على الحفاظ على الوعي بالحالة حتى لو فشل فرادى أجهزة الاستشعار أو قدم بيانات متدهورة في ظروف صعبة.

وفي البيئات الحضرية التي تتسم بأنماط حركة المرور المعقدة، تُستخدم فيها أجهزة الصمامات المُستقلة للأجهزة اللاسلكية والكهربائية في الكشف عن مختلف مستخدمي الطرق وتصنيفهم، بما في ذلك المركبات، والمشاهير، والدوائر، وفي الطرق السريعة، يمكن الجمع بين الرادارات والرادار أن يُعتمد عليه في الكشف عن الثلوج البعيد المدى وقياس سرعة الضبط التكييفي للرحلات وتجنب الاصط.

المراسم الآلية والمنابر المتنقلة

ويستخدم الآليون المتنقلون في مختلف المجالات ضخ أجهزة الاستشعار التابعة للشركة من أجل الملاحة والتلاعب والتفاعل مع بيئتهم، ويستخدم روبوتات الخدمات التي تعمل في البيئات الداخلية ضخ أجهزة الكاميرا للكشف عن العقبات، والتعرف على الأجسام، والتنقل بأمان حول الناس، ويستخدم الروبوتات المتنقلة الصناعية في المستودعات والمصانع صمامات الاستشعار من أجل تحديد المواقع بدقة وتجنب الاصطدام في البيئات الدينامية.

إن إدماج ليدار مع الاتحاد الدولي للاتصالات البحرية مهم بشكل خاص بالنسبة للملاحة الآلية، مما يتيح تقدير الحركة بدقة وبناء الخرائط من خلال خوارزميات حركة تحرير السودان، ويوفر المعهد قياسات مكانية للبيئة، بينما تساعد بيانات الاتحاد في تتبع حركة الروبوت بين المسح الضوئي للسجلات الأرضية، وتحسين دقة واتساق الخرائط الناتجة.

ويستفيد الآليون المتطورون من أجهزة التلاعب المتقدمة من ضخ أجهزة الليدار - الكيميرا للتعرف على الأجسام وتخطيط المصيد، وتوفر الكاميرا معلومات ساكنة عن هوية الجسم ومثوله، بينما توفر شركة ليدار معدات هندسية دقيقة من 3D لازمة لتخطيط حركة خالية من الاصطدام ومسكات ثابتة.

Unmanned Aerial Systems (UAS)

ويتزايد استخدام نظام المحاسبة الموحّد (المنظومات الجوية غير المأهولة) في جميع التطبيقات المدنية والعسكرية والعلمية، وأصبح نشر الطائرات بدون طيار في المناطق الحضرية على مقربة من المناطق الحضرية أمرا شائعا بشكل متزايد، لا سيما أثناء البعثات التي تُنفَّذ خارج خط البصر (BVLOS) أو في أساليب مستقلة تماما.

ويعرض هذا العمل عملية دمج أجهزة الحاسوب والبرمجيات في أجهزة الاستشعار الجاهزة للكشف عن الألغام الأرضية ومجسات الرادار التي تستخدم فيها جهازا آليا من طراز بيكسوك وجهازا من طراز Raspberry، بهدف تطوير تطبيقات الكشف عن العقبات، أما بالنسبة للطائرات التي تعمل في بيئات معقدة، فإن صمامات أجهزة الاستشعار تتيح الملاحة الآمنة عن طريق الكشف عن العقبات مثل المباني، وخطوط الكهرباء، والأشجار، والطائرات الأخرى.

وتثير القيود المفروضة على وزن الطائرات وقوتها تحدياً كبيراً في اختيار أجهزة الاستشعار والاندماج، إذ توفر أجهزة الاستشعار ذات الوزن الخفيف، مقترنة بالكاميرات، وتوفر وحدة التفتيش المشتركة حلاً عملياً للكشف عن العقبات التي تعترض الطائرات الصغيرة بدون طيار، وتسمح عملية دمج هذه أجهزة الاستشعار بتطبيقات مثل التفتيش على الهياكل الأساسية، ورصد الزراعة الدقيقة، وعمليات البحث والإنقاذ، والمسح الجوي.

الزراعة الدقيقة

وتعتمد الروبوتات الزراعية بشكل متزايد على صمامات الاستشعار في منطقة ليدار لرصد الملاحة والمحاصيل بصورة مستقلة، ولمعالجة عدم كفاية دقة أساليب الملاحة التقليدية ذات الاستشعار الوحيد في بيئات زراعية كثيفة من البساتين المزروعة، تقترح هذه الورقة طريقة لاستخراج خطوط الملاحة القائمة على الدمج في بيئات الزراعة، وهي طريقة تدمج نموذجا للكشف عن النسيج الجغرافي الذي يقوم على أساس اليوف 8 - نظام سواتل CBAM.

وتظهر التجارب الميدانية أن طريقة الملاحة القائمة على الدمج المقترحة تحسن دقة الملاحة على أساليب الاستشعار الواحد وطرق الفصل الترميزي، مما يقلل متوسط الخطأ الأفقي إلى 5.2 سنتيمتر، وينتج عن ذلك خطأ جانبي متوسط قدره 6.6 سم، ويحقق معدل نجاح في الملاحة يبلغ 95.4 في المائة، وتثبت هذه النتائج فعالية الرؤية ونهج الليزدر - الارتجية في بيئة ملاحية معقدة أو محسوبة.

وبالإضافة إلى الملاحة، فإن دمج الكيمياء الليديّة يتيح رصد المحاصيل المفصّل، بما في ذلك قياس ارتفاع النباتات، وتقدير حجم الكوب، وكشف الفواكه، والجمع بين قياسات الـ 3D المحددة التي تحتوي على اللون والنسيج المحتوي على كاميرات، يوفر معلومات شاملة عن تطبيقات الزراعة الدقيقة مثل تطبيق المعدل المتغير للأسمدة ومبيدات الآفات، والتنبؤ بالمحاصيل، والكشف عن الأمراض.

نظم المعلومات الجغرافية ورسم الخرائط

ويعد رصد الأراضي بدقة وفي الوقت المناسب أمراً حاسماً للتصدي للتحديات البيئية والاقتصادية والمجتمعية العالمية، بما في ذلك تغير المناخ والتنمية المستدامة والتخفيف من حدة الكوارث، وفي حين أن بيانات الاستشعار عن بعد التي توفر مصادر واحدة توفر قدرات هامة، فإن القيود المتأصلة مثل التدخل في الغطاء السحابي (الطائفي)، أو الضوضاء المضاربة (الرادار)، أو المعلومات المستنقعة المحدودة (LiDAR) كثيراً ما تعوق التمييز الشامل والقوي لسطحات الأرضية.

ويتيح دمج نظام ليدار المزود بالصور البصرية والبيانات الرادارية تطبيقات شاملة لرصد الأراضي ورسم الخرائط، وتنتج نظماً للمسح الأرضي البري والأرضي، مقترنة بكاميرات عالية الاستبانة، نماذج مفصلة من 3D من الأرض والمباني والهياكل الأساسية، وتدعم هذه النماذج التطبيقات بما في ذلك التخطيط الحضري، وتقييم مخاطر الفيضانات، وجرد الغابات، والدراسات الاستقصائية الأثرية.

وتتيح نظم الخرائط المتنقلة التي تدمج LIDAR، والكاميرات، والنظام العالمي لتحديد المواقع، والاتحاد الدولي للاتصالات السلكية واللاسلكية بشأن المركبات جمع بيانات 3D ذات إشارات جغرافية على امتداد شبكات الطرق بكفاءة، وتدعم هذه النظم تطبيقات مثل تقييم حالة الطرق، وإدارة الأصول، ووضع خرائط عالية التعريف للمركبات المستقلة.

التشغيل الآلي الصناعي ومراقبة الجودة

وتستخدم عمليات التصنيع واللوجستيات تركيب أجهزة الاستشعار التابعة لوكالة ليدار للتفتيش الآلي ومراقبة الجودة ومناولة المواد، ويتيح الجمع بين القياسات البُعدية المحددة التي يقوم بها المعهد الوطني للبحث والتطوير والبحث البصري بواسطة أجهزة التصوير تقييما شاملا للجودة للأجزاء المصنعة، وكشف الانحرافات الأرضية والاختلالات السطحية على السواء.

وتستخدم المركبات الآلية المصحوبة بمرشدين في المستودعات والمصانع صمامات من طراز LIDAR إلى جانب الملاحة وكشف العقبات، ونقل المواد في بيئات دينامية مع عمال بشريين ومعدات أخرى، مما يوفر هامش الموثوقية والسلامة اللازمين للتعاون بين البشر والأعباء في الأوساط الصناعية.

ويستفيد من عملية ضخ الكاميرا التي تستخدمها شركة ليدار لتوليد المواد من أجل تحديد المواقع على الجسم، كما أنها تقدم مواقع دقيقة من ثلاثة دي أشياء في صناديق ملتوية، بينما تتيح الكاميرات التعرف على الأجسام واختيار نقاطها استنادا إلى السمات البصرية.

التحديات التقنية في مجال ارتياد أجهزة الاستشعار في المناطق الجافة

ورغم التقدم الكبير، لا يزال تطويع أجهزة الاستشعار التابعة للرابطة يواجه عدة تحديات تقنية يتعين على الباحثين والمهندسين التصدي لها.

رابطة البيانات والمراسلات

ولا يزال إنشاء مراسلات صحيحة بين القياسات من أجهزة الاستشعار المختلفة يشكل تحديا أساسيا في عملية دمج أجهزة الاستشعار، ويجب ربط نقاط البحث والتطوير بأجهزة التكسير المناظرة في صور التصوير، أو أن تكون أجهزة الاستشعار المختلفة مطابقة لنفس الأجسام المادية، ويمكن أن تؤدي الرابطات غير الصحيحة إلى أخطاء في الدمج تتدهور بدلا من تحسين الأداء.

وتصبح مشكلة جمع البيانات تحدياً خاصاً في البيئات المتناثرة التي لها أشياء مماثلة كثيرة، أو عندما تُستبعد جزئياً، ويمكن أن تنشأ حالات من الغموض في المراسلات عندما تكون الأجسام المتعددة قريبة معاً أو عندما تكون القياسات المشعرة مزعجة، ويجب أن تعالج الخوارزميات الدقيقة الوثيقة هذه الغموض مع الحفاظ على الكفاءة الحسابية اللازمة لعمليات التفرغ.

معالجة الفشل في البيانات المتدهورة

يجب أن تواكب نظم الاستشعار في العالم الحقيقي حالات الفشل المستشعر، ونوعية البيانات المتدهورة، والظروف البيئية المختلفة، التحديات مثل ضوضاء الرادار التي تسببها الأمطار، وتدهور الصور المنخفضة الضوء، وتأثير الطقس المعاكس على أداء أجهزة الاستشعار لم يتم دراستها دراسة دقيقة، وينبغي أن يقيّم العمل المقبل قدرة الخوارزمية على التكيف في ظل ظروف مختلفة من الأرصاد الجوية عن طريق جمع مجموعات بيانات خاصة بالطقس واستخدام تقنيات التكيف مع المجالات.

ويجب أن تكتشف الخوارزميات التي تُستخدم في عمليات الدمج عندما تقدم أجهزة الاستشعار الفردية بيانات غير موثوقة وأن تعدل استراتيجية الدمج وفقا لذلك، وهذا يتطلب رصد صحة أجهزة الاستشعار، وكشف الشذوذ في نواتج الاستشعار، وإعادة الوزن الدينامي للمستشعرات استنادا إلى الموثوقية المقدرة، ويجب أن تحافظ النظم على الأداء المقبول حتى عندما يفشل جهاز استشعار أو أكثر تماما، ويهين بشكل متعمد بدلا من الفشل الضار.

التعقيد الحاسوبي وأدائه في الوقت الحقيقي

ويجب أن تجهز خوارزميات الصمامات كميات كبيرة من البيانات من أجهزة الاستشعار المتعددة في الوقت الحقيقي، مما يعرض تحديات كبيرة في مجال الحساب، ويمكن أن تولد أجهزة الاستشعار التابعة للرابطة ملايين النقاط في الثانية، بينما تنتج الكاميرات صورا ذات استبانة عالية في إطار يتراوح بين 30 و60 إطارا في الثانية أو أكثر.

وقد حافظت الطريقة المقترحة على فترات استنباط مستقرة، حيث بلغ متوسطها 147 متراً لكل إطار، مع ارتفاع فترات التأخير في بعض الأحيان فحسب، ومن المهم عدم حدوث انجراف تراكمي في الوقت أثناء العملية المطولة، مما يشير إلى الاستقرار الزمني، وهذا الافتراض يلبي الاحتياجات في الوقت الحقيقي لكشف المركبات في سيناريوهات الطرق التي تتراوح بين منخفضة ومتوسطة.

ويمكن أن تكون نُهج التوحيد العميقة القائمة على التعلم، مع تحقيق الدقة العالية، متطلبة بشكل خاص من حيث الحساب، ويتطلب تحقيق التوازن بين الدقة والكفاءة الحاسوبية تصميما دقيقا للهيكل، وتقنيات الاستخدام الأمثل مثل اختبار النماذج وتحديد الكمية، واستخدام مسرعات متخصصة في المعدات مثل وحدات التجهيز العالمي للبيانات ومجهزات المقاييس المكرَّسة.

صيانة المعايرة والحفر

ويمكن أن تتغير مع مرور الوقت مع معايير قياس درجة الحساسية بسبب الاهتزازات الميكانيكية، واختلاف درجات الحرارة، وشيخوخة المكونات، والآثار المادية، وهذا المعايرة تتدهور تدريجياً في أداء الاندماج إذا لم يتم اكتشافها وتصويبها، ويتطلب الحفاظ على معايرة دقيقة في النظم التشغيلية إما إعادة التصحيح اليدوي أو تقنيات المعايرة الآلية على الإنترنت التي ترصد وتضبط باستمرار معايير المعايرة.

ويجب أن تميز أساليب المعايرة على الإنترنت بين التغيرات الفعلية في المعايرة والاختلالات المؤقتة في القياس، وتحديث معايير المعايرة بطريقة تحفظية لتجنب عدم الاستقرار، ويكتسي التحدي أهمية خاصة بالنسبة للمنابر المتنقلة التي تعمل في بيئات قاسية حيث يعاني المستشعرون من ضغط ميكانيكي كبير وتقلبات في درجات الحرارة.

توافر البيانات والتكيف مع دومان

ويتطلب التدريب والتحقق من صحة الخوارزميات القائمة على التعلُّم العميق مجموعات بيانات كبيرة متزامنة ومع بيانات معارة من أجهزة الاستشعار المتعددة إلى جانب شروح الحقيقة الأرضية، ويميل الدمج الهجين إلى تحقيق أعلى مستوى من القوة، ولكن تعقيدها وتكاليف التدريب ومتطلبات مجموعات البيانات المتعددة الاستشعار المتزامنة إلى الحد من الانتشار العملي.

وعلاوة على ذلك، فإن خوارزميات الاندماج التي تم تدريبها على البيانات المستمدة من بيئة أو تشكيلة استشعارات قد لا تعمم بشكل جيد على مختلف الظروف، كما أن هناك حاجة إلى تقنيات التكيف المستمر لنقل استراتيجيات الاندماج العلمي عبر مختلف أنواع الاستشعار، والتشكيلات المتصاعدة، وبيئات التشغيل دون الحاجة إلى إعادة تدريب واسعة النطاق.

التقنيات المتقدمة في مجال الوقود والاتجاهات الناشئة

ولا يزال مجال دمج أجهزة الاستشعار التابعة لرابطة ليدار يتطور بسرعة، حيث تُشكِّل عدة تقنيات واتجاهات ناشئة التطورات المقبلة.

بيان عين الطيور

ظهور مشاهد عين الطيور كأسلوب قوي لدمج أجهزة الاستشعار المتعددة في تطبيقات القيادة المستقلة

إن تصور الشغل الرئوي الدقيق للـ 3D ضروري لتنقله بشكل مستقل في بيئات معقدة ذات أجسام مختلفة وغير نظامية، في حين أن الأساليب التي تركز على الرؤية تعاني من عدم الدقة في قياس الأرض، فإن النهج القائمة على الـ (ليدار) تفتقر في كثير من الأحيان إلى معلومات ثرية، ولتناول هذه القيود، فإن نظام MS-Occ، وهو إطار جديد متعدد المراحل لدمج الأشعة الليدرائية يشمل الدمج في منتصف المدة، والتصنيع في مرحلة العطل.

وتبسِّط عمليات تمثيل المركبات الفوقية الفوقية الكثيفة مهام التصور، مثل كشف الأجسام وتتبعها والتنبؤ بالحركة، وذلك بتوفير إطار مرجعي مكاني ثابت، كما أنها تيسر إدماج المعلومات المتعلقة بالخرائط وتتيح التعليل المتعدد الجوانب الفعال في سياق سيناريوهات القيادة.

مهندسو الطاقة المتحولون - المزودون بأجهزة

وقد حققت هياكل التحول، التي وضعت أصلا لتجهيز اللغات الطبيعية، نجاحا ملحوظا في رؤية الحاسوب، وتطبق بشكل متزايد على عملية تطهير أجهزة الاستشعار، وتتيح آليات اهتمام المترجمين وضع نماذج مرنة للعلاقات بين مختلف طرائق الاستشعار والمواقع المكانية، والتعلم من أجل التركيز على المعلومات الأكثر أهمية لكل مهمة.

وتتيح آليات الرعاية الشاملة للمتحولين إمكانية التدفق الفعال للمعلومات من أجهزة الاستشعار غير المتجانسة عن طريق تعلم الروابط بين السمات من مختلف الطرائق، ويمكن لهذا النهج أن يستوعب أوجه المعالين المعقدة التي يصعب طباعتها باستخدام تقنيات الدمج التقليدية، مما قد يؤدي إلى تحسين الأداء فيما يتعلق بمهام التصور الصعبة.

التكيف مع موجة البرمجيات

وتتجه نظم الاندماج الحديثة نحو استراتيجيات التكيف التي تكيف مع المعالم الدينامية للاندماج استنادا إلى الظروف البيئية وموثوقية الاستشعار، ويقترح خط الأنابيب للجهاز الليداري + 4D لدمج الرادار استحداث آلية لتوحيد المقاييس تكيفية توحد المساهمات الرادارية حسب ظروف المشاهد، مما يزيد من قوة عندما تصبح أي من الطرائق غير موثوقة.

ولا ينظر الاندماج في إطار التوعية بالسياقات فقط في قياسات الاستشعار الحالية بل أيضا في السياق الأوسع للحالة، بما في ذلك نوع المشهد، والظروف الجوية، والإضاءة، والأداء التاريخي، ويمكن لهذه النظم، من خلال تكييف استراتيجية الاندماج مع السياق المحدد، أن تحافظ على أداء قوي في طائفة أوسع من ظروف التشغيل مقارنة بنُهج الاندماج الثابتة.

الحلول المتكاملة للمعارف الصلبة

إن دمج البرمجيات الصلبة يمضي قدماً إلى أبعد من مجرد تركيب أجهزة استشعار متعددة على نفس المنصة إلى وحدات الاستشعار المتكاملة حقاً، وقد أعلنت تكنولوجيات الإنيوفيز أول مجموعة طويلة اللون من الـ ليدار مع الكاميرات التي أعلنت مؤخراً عن إينوفيزيتري ليدار، وخلقت وحدة متجانسة من أجهزة الاستشعار المصممة لخفض تعقيدات التكامل بين الـ OEM.

وتوفر حلول المعدات المتكاملة عدة مزايا: تبسيط التكامل الميكانيكي، ومعايرة المصنع التي لا تزال مستقرة على مدى عمر المنتج، وتزامن مستوى المعدات مع التوقيت الدقيق، وتقليص تعقيد النظام، ويمكن لهذه الفوائد أن تقلل بدرجة كبيرة من الحواجز التي تحول دون نشر نظم الصمامات في تطبيقات الإنتاج.

نماذج المؤسسة والتعلم في مجال النقل

وقد بدأت نماذج المؤسسات الكبيرة التي تم تدريبها على مجموعات البيانات المتنوعة تؤثر على عملية دمج أجهزة الاستشعار، وتتعلم هذه النماذج التمثيل العام الذي يمكن تكييفه لمهام الاندماج المحددة التي تنطوي على كميات صغيرة نسبيا من البيانات الخاصة بكل مهمة، وهذا النهج يبشر بتقليص الاحتياجات من البيانات اللازمة لنظم دمج التدريب وتحسين التعميم على مختلف أجهزة الاستشعار والبيئة.

وتتيح تقنيات التعلم في مجال النقل إمكانية استخدام المعارف المكتسبة من تشكيلة واحدة من أجهزة الاستشعار أو مجال تطبيقات أخرى، مما قد يعجل في التنمية ويقلل من الحاجة إلى جمع البيانات وشروحها على نطاق واسع لكل سيناريو جديد من سيناريو النشر.

أفضل الممارسات لتنفيذ ارتشاء أجهزة الاستشعار التابعة لرابطة ليدرا

ويتطلب التنفيذ الناجح لنظم دمج أجهزة الاستشعار التابعة للرابطة الاهتمام بالعديد من الاعتبارات العملية خارج الخوارزميات الأساسية.

اختيار الاستشعار والتجمع

ويعد اختيار أجهزة الاستشعار المناسبة وتشكيلها أمرا أساسيا لأداء نظام الاندماج وينبغي اختيار أجهزة الاستشعار على أساس خصائصها التكميلية مع مراعاة متطلبات التطبيق المحددة، والبيئة التشغيلية، والقيود مثل التكلفة، والحجم، والوزن، واستهلاك الطاقة.

ويجب أن ينظر وضع أجهزة الاستشعار في مجال التداخل، والآثار الاستبعادية، والازدياد في الاستقرار، كما أن التداخل الكافي بين مجالات الاستشعار من وجهة النظر ضروري للدمج الفعال، ولكن التجاوز المفرط قد يضيع الموارد، وينبغي أن تقلل المواقع المتحركة من اليقظة وأن تقدم آراء واضحة بشأن البيئة ذات الصلة مع حماية أجهزة الاستشعار من الضرر.

إجراءات المعايرة المنهجية

إن إنشاء وصيانة معايرة دقيقة أمر حاسم بالنسبة لأداء الدمج، وينبغي أن تكون إجراءات المعايرة منهجية ومكررة وموثوقة جيدا، وينبغي أن يتم معايرة أولية في ظروف خاضعة للمراقبة مع أهداف ذات جودة عالية من المعايرة، وينبغي التحقق من دقة المعايرة من خلال قياسات مستقلة.

وينبغي إجراء عمليات فحص معايرة منتظمة للكشف عن الانجراف، لا سيما بعد أي اضطراب ميكانيكي أو تعرض بيئي، ويمكن أن تساعد إجراءات التحقق من المعايرة الآلية على تحديد متى يلزم إعادة التأهيل دون أن تتطلب تدخلا يدويا.

الهندسة المعمارية للبرمجيات الآلية

وينبغي تصميم برامجيات نظام الوقود مع الأخذ في الاعتبار بالنموذج والقدرة على الصيانة والقوة، وتتيح البنى الموحدة تطوير واختبار خطوط الأنابيب الفردية لتجهيز أجهزة الاستشعار بصورة مستقلة قبل الاندماج وتبسيط التنمية وتزييفها.

ومن الضروري أن تُستخدم النظم التشغيلية لمعالجة الأخطاء والتسامح إزاءها، وينبغي أن تكتشف البرامجيات حالات الفشل في الاستشعار، وقضايا جودة البيانات، وأخطاء التجهيز، وأن تستجيب على النحو المناسب للحفاظ على تشغيل النظام.

التقييم والاختبار

ومن الضروري التحقق الشامل لضمان استيفاء نظم الاندماج لمتطلبات الأداء في جميع ظروف التشغيل المتوخاة منها، وينبغي أن يشمل الاختبار الظروف الاسمية وكذلك الحالات التي تكون فيها حافة، وحالات الفشل في الاستشعار، والظروف البيئية الصعبة.

وينبغي وضع قياسات كمية للأداء وقياسها بصورة منهجية، وبالنسبة لمهام التصورات، قد تشمل القياسات دقة الكشف، والمعدلات الإيجابية والباطلة، والخطأ في تحديد المواقع، والطابع المعالج، وينبغي أن يستخدم الاختبار كلا من مجموعات البيانات المسجلة لإعادة التكاثر والتشغيل الحي في البيئات التمثيلية.

التحسين والرصد المستمرين

وينبغي أن تشمل نظم الاندماج المنشورة قدرات الرصد لتتبع الأداء على مر الزمن وتحديد فرص التحسين، كما أن بيانات الاستشعار في مواقع العمل، ونواتج الاندماج، ومقاييس الأداء تتيح إجراء تحليلات خارج الشبكة لفهم سلوك النظام وتحديد أساليب الفشل.

وينبغي أن تُبلغ التغذية الناتجة عن النشر التشغيلي التحسينات المتكررة في خوارزميات الاندماج، وإجراءات المعايرة، وتشكيل النظم، وهذه الدورة المستمرة للتحسينات ضرورية لتحقيق الأداء العالي في تطبيقات العالم الحقيقي والحفاظ عليه.

الاتجاهات والفرص البحثية في المستقبل

ولا يزال مجال دمج أجهزة الاستشعار التابعة لرابطة ليدرا يوفر فرصا عديدة للبحث والتطوير التي ستشكل نظما في المستقبل.

تعزيز الروبوت في الظروف الضارة

ولا يزال تحسين أداء نظام الاندماج في الظروف البيئية الصعبة يمثل اتجاها بحثيا هاما، ففي حين أن النظم الحالية تؤدي أداء جيدا في الظروف الاسمية، فإن الأداء يمكن أن يتدهور بدرجة كبيرة في ظروف الأمطار الغزيرة أو الضباب أو الثلج أو الإضاءة الشديدة، كما أن وضع استراتيجيات للدمج تحافظ على الأداء القوي في جميع الظروف البيئية أمر حاسم بالنسبة للتطبيقات الحرجة المتعلقة بالسلامة.

وتشمل فرص البحث وضع نماذج أفضل لتدهور المستشعرات في ظل ظروف سلبية، ووضع استراتيجيات للتدخُّل التكيفي تستجيب للظروف المتغيرة، واستكشاف طرائق جديدة لأجهزة الاستشعار تكمل أجهزة الاستشعار التقليدية في البيئات الصعبة.

كفاءة المنابر المكثفة للموارد

وتتطلب العديد من التطبيقات دمج أجهزة الاستشعار على المنهاجات ذات الموارد الحاسوبية المحدودة، مثل الطائرات الآلية الصغيرة أو الآلية المتنقلة أو نظم السيارات المدمجة، ولا يزال وضع خوارزميات للدمج تحقق أداء عاليا مع متطلبات حاسبية ضئيلة يشكل تحديا هاما.

وتشمل اتجاهات البحث البحث البحث عن بنية عصبية لشبكات الدمج الفعالة، وتفكك المعارف لضغط نماذج كبيرة، والنُهج الهجينة التي تجمع بين الخوارزميات التقليدية الفعالة وبين عناصر التعلم العميق المستهدفة.

الدمج المفسَّر والمتمثل في تفسير

ومع تزايد تعقيد نظم الاندماج، لا سيما مع اتباع نُهج التعلم العميق، فإن فهم أسباب جعل النظم قرارات معينة أمراً متزايد الأهمية، ويمكن أن تساعد تقنيات المحاسبة القابلة للتفشي على أجهزة الاستشعار في تطوير نظم التطهير، وبناء الثقة مع المستعملين، وتلبية المتطلبات التنظيمية للتطبيقات الحرجة المتعلقة بالسلامة.

وتشمل فرص البحث تطوير تقنيات التصوير الضوئي للدمج المتعدد أجهزة الاستشعار، وإنشاء هياكل للدمج يمكن تفسيرها، ووضع أساليب لقياس حجم وربط ثقة نظام الاندماج وعدم التيقن.

توحيد المعايير والتخصيص

وستستفيد الأوساط المعنية بدمج أجهزة الاستشعار من المعايير الموحدة، ومجموعات البيانات، وبروتوكولات التقييم التي تتيح المقارنة العادلة بين مختلف النُهج، وفي حين أن مجموعات البيانات مثل تكنولوجيا المعلومات والاتصالات، والنوّهات، ومجموعة البيانات المفتوحة، كانت قيمة، فإن مواصلة وضع معايير متنوعة وصعبة تشمل أجهزة الاستشعار المختلفة، والبيئات، والمهام ستؤدي إلى إحراز تقدم.

ويمكن لجهود توحيد الوصلات البينية للمستشعرات، وإجراءات المعايرة، وصيغ البيانات أن تقلل من تعقيد التكامل وتيسر نقل التكنولوجيا بين نظم البحث والإنتاج.

التكامل مع التخطيط والمراقبة على مستوى رفيع

فمعظم البحوث الحالية تعالج دمج أجهزة الاستشعار كمشكلة تصورية منفصلة عن التخطيط والمراقبة في المراحل النهائية، ويمكن أن يؤدي التكامل بين التصور والتخطيط والمراقبة إلى زيادة فعالية أداء النظام عموما عن طريق السماح لمتطلبات التخطيط بالتأثير على استراتيجيات الاندماج وعدم التيقن في الاندماج من أجل استنارة قرارات التخطيط.

وتمثل نُهج التعلم من نهاية إلى نهاية التي تتضافر في تحقيق التصور والتخطيط والتحكم اتجاهاً واحداً لهذا التكامل، رغم أن تحديات كبيرة لا تزال قائمة في تدريب هذه النظم بأمان وضمان إمكانية التفسير.

خاتمة

وقد أصبح إدماج المعهد الدولي لبحوث التنمية الزراعية في أجهزة الاستشعار التكميلية من خلال تقنيات الدمج المتطورة أمرا أساسيا لرسم الخرائط والتصورات القوية عبر العديد من التطبيقات، إذ يجمع بين القياسات المكانية المحددة التي تبلغ 3D للشركة مع الثراء الرئوي للكاميرات، والقدرة على الدار، وتتبع حركة الاتحاد الدولي للاتصالات، والوضع العالمي لنظام تحديد المواقع، ونظم الصمامات المتعددة أجهزة الاستشعار تحقق الأداء الذي يتجاوز بكثير ما يمكن أن يوفره أي جهاز استشعار واحد.

وقد تطور هذا المجال من النُهج البسيطة للدمج المبكر إلى هياكل متطورة للتعلم العميق يمكن أن تجمع بين طرائق الاستشعار على أساس السياق والموثوقية، وتستخدم نظم الاندماج الحديثة تقنيات تتراوح بين التصفية الكلاسيكية لآل كالمان وبين هياكل المحولات المتطورة ونماذج الانتشار، وكلها مزايا محددة بالنسبة لمختلف التطبيقات والقيود.

ويتطلب التنفيذ الناجح لعملية دمج أجهزة الاستشعار اهتماما دقيقا باختيار أجهزة الاستشعار، والمعايرة، وتصميم الخوارزميات، والتحقق من صحتها، وما زالت تحديات جمع البيانات، ومعالجة حالات الفشل في الاستشعار، والحفاظ على الأداء في الوقت الحقيقي، وضمان القدرة على العمل عبر مختلف الظروف تدفع البحث والتطوير في الميدان.

ومع تزايد انتشار النظم المستقلة في مجالات النقل والروبوت والزراعة والتطبيقات الصناعية، فإن أهمية دمج أجهزة الاستشعار الموثوق بها لن تزيد إلا، فالاتجاهات الناشئة، بما في ذلك الحلول المتكاملة للمعدات، والنماذج التأسيسية، واستراتيجيات الاندماج التكيّفي، تعد بأن تجعل هذه النظم أكثر قدرة وكفاءة وإمكانية الوصول إليها.

وبالنسبة للممارسين الذين يتطلعون إلى تنفيذ نظم إعادة دمج أجهزة الاستشعار في القانون الدولي، فإن المفتاح هو فهم مواطن القوة والقيود التكميلية لمختلف أجهزة الاستشعار، واختيار هياكل الاندماج الملائمة لمتطلبات وقيود التطبيق، والاستثمار في معايير دقيقة والتحقق، ونظم التصميم التي لها قوة وقابلية للاستمرار، وتوفر الموارد والتقنيات التي تناقش في هذه المادة أساسا لوضع نظم فعالة متعددة الاستشعار للتصنيف تتيح رسم خرائط قوية وتصورات في تطبيقات العالم الحقيقي.

For more information on LIDAR technology and applications, visit the American Society for Photogrammetry and Remote Sensing. To explore autonomous vehicle perception systems, see resources from the ]SAE International. Forroidics applications, the