שיטות הטובות ביותר עבור אימות נתונים ובקרת איכות בסקרי הידרוגרפיים

סקרים הידרוגרפיים תחת ניווט בטוח, בנייה offshore, ניטור סביבתי וניהול אזור החוף.הנתונים המיוצרים -bathymetry, קרקעי הרכב, פרופילי עמודה מים, וסיכוןים submerged - חייבים לעמוד בסטנדרטים דיוק קפדניים.אפילו שגיאות קטנות יכול להוביל למקרי ריצוף, עבודה יקרה, או הערכות סביבתיות פגומות.

הבנת אימות נתונים בסקרי הידרוגרפיים

אימות נתונים שנאספו נתונים תואם למפרט מוגדר, הוא ללא שגיאות ברוטו, והוא שלם.זה עונה לשאלה: "האם מדדנו את מה שהתכוונתנו למדוד, והוא המדידה בתוך סובלנות מקובלת?", אימות שונה מ- QC ב- QC זה מקיף את מערך התהליכים הרחב יותר המבטיחים שלמות נתונים, בעוד אימות הוא תת-קבוצה מסוימת ממוקדת בנכונות ובמכלול.

ב הידרוגרפיה, משימות אימות נפוצות כוללות בדיקת פרופילים מהירות הקול, אימות היערכות חיישן (מחיאות כפיים), אימות דטום ותיאום מערכת עקביות, ובדיקה מגמות זמניות לסחף כלי.ללא אימות שיטתי, הטיה שיטתית - כגון חיישן תנועה לא מעוגן - יכול להפיץ באמצעות הנתונים שלא נקטו, מחריב את המודל הסופי או התרשים.

שיטות היעילות ביותר עבור אימות נתונים

הנהלים הבאים מתייחסים למקורות העיקריים של טעות באיסוף נתונים הידרוגרפיים ועיבוד.הם צריכים להיות מיושם בכל שלב, החל מבדיקות טרום-ניתוחיות ועד לסקירה הסופית של המוצר.

קלבריות ובדיקות ציוד

כל חיישן המשמש בסקר הידרוגרפי דורש קיטוב קבוע.(FLT:0) פרופילים מהירות מהירות גבוהה של תיקון 1 (CTDs, XBTs, או פרופילי כלי שיט נעים) צריך להיות פרוס לעתים קרובות כי טמפרטורת המים והצלה משתנה עם עומק, גאות ועונה.

מעקב בזמן אמת

מעקב אחר נתונים כפי שהוא נרכש מאפשר למפעילים לתפוס את הבירות, את הספייקים, או רעש פתאומי לפני שהם הופכים משובצים ב- Dataset. תוכנת רכישה מודרנית מספקת תצוגות בזמן אמת של נתונים של קרן גולמית, חיישנים עזר, ומדדי בריאות המערכת.

פערים בלתי צפויים או טיפות באמבטיה.
שינויים במעמקים שאינם תואמים לתכונות ידועות.
שינויים פתאומיים בגישה כלי שיט (roll, המגרש, heave) אשר עשויים להצביע על תקלה ב-Firt.
GNSS מציבה אינדיקטורים איכותיים (למשל, PDOP, מספר לוויינים, RTK תיקון מצב).

ניטור בזמן אמת כולל גם את ⁇ :0 אינדיקטורים איכות מקוונת אינדיקטוריםFLT:1 ; כמו סדרה של זמן באם שאריות או פרופילים בבדיקה חוצה-מבחנים עם זרמי חפיפה. כאשר בעיה מזוהה, קו הסקר צריך להיות מיד re-run או המכשיר נבדק. גישה זו פרואקטיבית מפחיתה מאמץ לאחר עיבוד למנוע אובדן נתונים.

ניכוי מסנן ו- Noise Reduction

נתונים הידרוגרפיים של Raw מכילים רעש מבועות, שומות על סימנט, מתעוררות כלי שיט והתערבות ממקורות אקוסטיים אחרים.אלגוריתמים אוטומטיים מסננים להסיר מופרנים ברורים תוך שמירה על החזרה קרקעית ים בתוקף כוללים:

(ב) ,0) , פילטרים של רונג-גייט (Rande-gated filters) אשר אינם כוללים החזרים מחוץ לחלון עומק תקף.
(ב) ,0) , פילטרים מבוססי חנינה 1 (Amplitude) אשר דוחים דבורים חלשות או רועשות.
(ב) ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ ⁇
(ב) [15] ,9,2, על בסיס מקבילות ב', כדי להסיר החזרים מרשימים בנתונים רבבים.

פרמטרים מסנן חייב להיות מוגדר על פי מפרט סקר - אגרסיבי מדי יכול להסיר תכונות אמיתיות (למשל, ספינת); lenient מאפשר רעש לפוצץ את פני השטח.זה חכם לשמור עותק של נתונים גולמיים, לא מטומטמים ולהקליט את כל ההגדרות המסנן עבור שבילי ביקורת.אימות כרוך בדיקה חזותית משטחים מסונן ומשווה אותם ל subtered subets in Problemets.

Cross-Validation with Multiple Data מקורות

החלת חיישן יחיד או מעבר יחיד מגבירה את הפגיעות לשגיאות שיטתיות.התפלות צלב משווה מדידות עצמאיות ממכשירים שונים או מקווי סקר חופפים כוללים:

השוואת נתונים רבבים עם קווי קולר יחיד-באם לאורך אותו המסלול.
באמצעות פרופיל מהירות קול שני (מנוס אחר) לעיבוד תת-קבוצה של נתונים ובדיקה של הבדלים עומק.
מעבר לצלחות מקווי סקר סמוכים: המעמקים באזור החפיפה צריכים להתאים בתוך תקציב אי הוודאות האנכי של הסקר.
השוואת מודלים של קרקע דיגיטלית מעובד (DTMs) עם נתונים מראש ברזולוציה גבוהה (למשל, לידר-דריביות, אם זמין).

חסרונות העולה על חקירה טרום שנקבעה לסף - לעתים קרובות חושפים חיישן לא מצופה, תיקונים משוחדים לא מובנת או לתאם את המערכת בצורה לא נכונה. לתעד כל תוצאה של הפסקת צלב ופעולות תיקון נלקחות.

אישור תגובה

לאחר רכישת, הנתונים עוברים שלבים עיבוד: תיקון גאות, תיקון מהירות קול, סינון, סינון, גישור וניקוי. אימות בכל שלב הוא חיוני.הבדיקות שלאחר עיבוד של מפתח כוללות:

(בשיתוף פעולה עם ההרחבה) (UBE (Combined Unquity and Bathymetry Estimator) ניתוח פני השטח של ההרחבה:0CUBE (Combined Unquity and Bathing nodes where is high.
(ב) ,0) , מיפוי רחמים (ב) - הבטחת כל אזור יש מספיק צלילות לתאי רשת למפרטים.
(ב) ,0) ,Vertical LivingualsFLT:1, השוואת עומקים אחרונים נגד מדד גאות או תחזיות מודל האוקיינוס.
(ב) ,0) ,Edge תואם את ה- 1:1 - אימות מעברים חלקה בין קווי סקר או וינטג'ים.

באופן אוטומטי, תסריטי אימות אוטומטיים (למשל, שימוש ב- Python או בכלים מסחריים) יכולים להשוות נתונים סופיים נגד קבוצה של כללים והפרות דגל.עם זאת, סקירה ידנית של הידרוגרף מנוסה נותר חיוני לזיהוי פריטים עדינים שאלגוריתמים מפספסים.סקירה עצמאית סופית לפני הלידה היא סימן ההיכר של תהליך אימות.

בקרת איכות

בעוד אימות מתמקד תיקון נתונים, QC כוללת את המסגרת הרחבה המבטיחה נתונים עקביים, ניתנים להערכה, וביקורתיים לאורך צינור הסקר. QC הוא מוטבע בהליכים, אימונים, תיעוד, וראייה יתר.

נוהלי הפעלה סטנדרטיים (SOPs)

כל צוות סקר צריך לכתוב SOPs המפרט כל משימה: מראש ציוד ההתקנה, פרוטוקולי קיטור, פרמטרים של רכישת נתונים, עיבוד זרימת עבודה, ואימות בדיקות.SOPs חייב להיות נבדק ועודכן באופן קבוע - לפחות שנה או כאשר ציוד או שינוי תוכנה.היישומים עקביים שלהם כי מפעילים שונים לייצר תוצאות דומות, והם משמשים הכשרה עבור צוות חדש.

תחזוקה רגילה של ציוד ולוח זמנים של קלברציה

תחזוקה מונעת מפחיתה את הסבירות של סחף חיישן או כישלון. צור יומן תחזוקה עבור כל מכשיר מרכזי (multibeam, יחיד-beam, חיישן תנועה, velocimeter קול, GNSS) כי רשומות תאריכים של שירות, תוכנה / עדכונים אישור, ותוצאות calibration יש לבצע בדיקה סטנדרטית או בדיקה מיידית.

הכשרה והסמכת

האלמנט האנושי הוא לעתים קרובות הקישור החלש ביותר.ספק הכשרה מקיפה לכל אנשי הסקר - לא רק על איך להפעיל ציוד אלא גם על איך לזהות בעיות איכות נתונים. הסמכת מארגונים כגון ארגון הידרוגרפי הבינלאומי (IHO) או גופים לאומיים (למשל, החברה ההידרוגרפית) להפגין יכולת רענן רגילה על כלי תוכנה חדשים, שיטות מתפתחות, ולומדות מסקרים קודמים לטפח שיפור תרבותי מתמשך של תרופות; מוביל בעיות רענן קבועות של חשיבה על פני תרבות של חשיבה.

מסמכים ו- Metadata

תיעוד מקיף מאפשר התאמה והגנה על איכות הנתונים במהלך ביקורת או אתגרים משפטיים.כל סקר צריך ליצור תיעוד metadata הכולל:

תאריך סקר, כלי שיט וצוות.
מודלים של Instrument, מספרים סידוריים, גרסאות קושחה.
תוצאות ותאריך קצר.
תנאים סביבתיים (Weather, Sea state, פרופילי מהירות קול).
היסטוריה של עיבוד: כלי תוכנה, הגדרות פרמטר, עריכה ידנית.
בדיקות אימות שבוצעו ותוצאות.

אימוץ מערך metadata סטנדרטי (למשל, ISO 19115 ימי הרחבה או מסגרת IHO S-100 metadata) מבטיח עקביות על פני פרויקטים ומאפשר שימוש חוזר בעתיד.

ביקורת וביקורת

אין אדם אחד האחראי על ייצור והשלמתו של תהליך ביקורת עמיתים שבו הידרוגרף שני בודק באופן עצמאי את הנתונים המעובדים, יומני אימות, ומוצרים סופיים.סקירה של פירס צריך להיות מתועד וכל חילוקי דעות נפתרים לפני הזנת תקופתיים של ביקורת פנימית תקופתית - כל שישה חודשים או אחרי פרויקטים עיקריים - להעריך תאימות עם SOPs וזיהוי אזורים לשיפור.

יישום מערכת ניהול איכות

שילוב אימות אישי ו- QC משמש למערכת ניהול איכות פורמלית (QMS) מספק מבנה ורציפות. A QMS מבטיח כי איכות בנויה לכל תהליך, לא רק לבדוק בסוף רכיבי מפתח של QMS יעילים עבור סקרים הידרוגרפיים כוללים:

(FLT:0) מדיניות קוויאליזציה של מדיניות LT:1 - הצהרה ברורה של מחויבות לעמוד בדרישות הלקוח וסטנדרטים רגולטוריים (למשל, IHO S-44, Category ZOC).
(ב) ,0) הוראות עבודה והוראות עבודה (FIRLT:1) - מסמכים מפורטים המכסים את כל פעילויות הסקר מגיוס לארכיון.
(ב) [ה]התערות:0] ,[דרוש מקור], כל אחד מבני הצוות הוכשר על הליכים וציוד רלוונטיים.
(FLT:0) פעולה נכונה ומחסילה (CAPA)IRLT:1 - תהליך רשמי לטיפול בבלתי-רפורמות ומניעת הישנות.
(FLT:0) Manage ReviewveFLT:1 - מפגשים קבועים כדי לבחון מדדים איכותיים, ביקורת על ממצאי משוב הלקוח, ואחריו הקצאת משאבים לשיפורים.

ניתן ליישם QMS באמצעות גליונות אלקטרוניים פשוטים או להשתלב בפלטפורמה דיגיטלית. ארגונים רבים משתמשים בשילוב של מערכת ניהול תוכן עבור תיעודFLT:1 ולוחם QC ייעודי לדוגמה, זרימות עבודה ב Directus יכול לנתב דוחות אימות נתונים, תעודות קיטור, ו metadata עבור חתימה אוטומטית, צמצום ידני מעל ראש.

מלכודות נפוצות ב- Data אימות ו- QC

אפילו קבוצות מנוסים נופלות למלכודת המערערת את איכות הנתונים.מודעות למכשולים אלה מסייעות בתכנון אמצעים מונעים:

(FLT:0)הסתמכות על אוטומציה של 1:1 אלגוריתמים יכולים להסוות שגיאות שיטתיות אם הפרמטרים מוגדרים רחב מדי או אם המודל הבסיסי הוא פגם.תמיד לאמת תפוקה אוטומטית עם בדיקות עצמאיות.
(FLT:0) תיקונים יציבים של ריצוף 1 (FLT:0) באמצעות מודלים של אזור דיכאי שגוי או לא מתאימים להסתגל לדמטומים מקומיים יכולים להציג שגיאות אנכיות ברמה מטר.
(ב) ,0) ,העברת מטבוליזם של מטא-נתונים 1 (הראשונה ל-1) שנים לאחר מכן, סקר עשוי להיות צורך להיבחן מחדש עבור פרויקט חדש.
(FLT:0)Failure לעדכן את SOPsveFLT:1) - ככל מכשירים ותוכנות מתפתחים, נהלים ישנים הופכים מיושן. A stale SOP מוביל לאי עקביות ולא ציות עם הסטנדרטים האחרונים.
(FLT:0) מיפוי ידני של ההרחבה 1 - משטחים אוטומטיים "נקיים" עדיין יכולים להכיל חפצים, במיוחד סביב מדרונות תלולים, ספינות או במים רדודים מאוד.

כיוונים עתידיים: אוטומציה ולמידה של מכונות

התפתחויות בחיישנים ומחשוב הן דוחפות QC מבדיקות ידניות, לאחר-העובדות ועד ימינו, מערכות חכמות.מודלים של למידת מכונות יכולים כעת לזהות omaomalies בענני נקודה רב-ממדם, לסווג סוגים של קרקעית ים, ולעמוד בתשואות חשודות הרבה יותר מהר מאשר מפעילי זיהוי סטנדרטיים של מערכות הפעלה אוטומטית של כלי רכב מסוג CVS (F) ללא פיקוח קבוע של כלי רכב (C) ודרישות אידיאולוגיות) באופן קבועות (C) באופן דומה, כולל של כלי רכב אוטונומיים) ו-FV-FUS) באופן קבוע (אופטיים).

אימוץ פלטפורמה לניהול נתונים מודרני יכול גם לייעל את זרימת העבודה של QC. לדוגמה, באמצעות CMS חסר ראש כמו FLT:0DirectusFLT:1 כדי לנהל metadata סקר, דוחות אימות, ו QC Checklists מאפשר שיתוף פעולה בזמן אמת ובקרת גרסה.

מסקנה

אימות נתונים יעיל ובקרת איכות הם סלע של סקרים הידרוגרפיים אמינים.על ידי יישום קלודה שיטתית, ניטור בזמן אמת, סגמנטציה בין-זמן, בדיקות פוסט-מעבדות קפדניות, צוותי סקר יכולים להבטיח שהמידע שלהם עומד בדרישות הדיוק המחמירות של יישומים ימיים מודרניים, חשוב גם הוא מסגרת QC הרחבה יותר: נהלים סטנדרטיים, הכשרה מקיפה, תיעוד יסודי ותרבות של שיפור מתמשך כמו גם מדדים מאובטחים, אך לא פחות חשוב, אלא גם לא פחות, אלא גם כן, אלא גם כן, אלא גם כן, אלא גם כן, אלא גם שיפור יעיל של אבטחה גבוהה יותר, אלא גם כן, כל אמצעי אבטחה, ללא כל אמצעי אבטחה, אלא גם כן, ללא כל אמצעי אבטחה, אלא גם כן, אלא גם כן, אלא גם כן, ללא כל אמצעי אבטחה מתקדמים, אלא גם כן, אלא גם כן, אלא גם כן, ללא כל אמצעי אבטחה, ללא מדדים, אלא גם כן, ללא מדדים, אלא גם כן, אלא שיפור יעיל יותר, אלא גם כן, ללא מדדים מתקדמים, אלא גם כן, אלא גם כן, ללא מדדים מתקדמים, ללא כל אמצעי אבטחה, אלא גם כן, ללא כל אמצעי אבטחה, אלא גם כן, אלא שיפור יעיל יותר, אלא גם כן, אלא גם