יסודות עיבוד אותות דיגיטליים במערכות מעקב וידאו

הבנת עיבוד אותות דיגיטליים ב- Modern Video Surveillance

מערכות מעקב וידאו התפתחו מטלוויזיות אנלוגיות סגורות (CCTV) המתקיימות מערכות אקולוגיות דיגיטליות חכמות המסוגלות לנתח בזמן אמת וקבלת החלטות אינטליגנטיות.בלב השינוי הזה שוכנת FLT:0Digital Signal Processing (DSP) לעמוד ב-DSPLT:1 .DSP ממיר אותות חשמליים מחיישנים מצלמה לזרמים וידאו ברורים, המאפשרים תכונות כגון זיהוי, דרישות אבטחה בסיסיות, ואבטחת מידע, , , עיצוב של אנשי אבטחה בסיסיים, אבטחה ואבטחת מידע, , כיום, אבטחה מבוססת על ידי אבטחה.

מה זה Digital Signal Processing?

עיבוד אותות דיגיטליים הוא מניפולציה מתמטית של אותות דיגיטליים - כגון מסגרות וידאו, אודיו או חיישן נתונים - כדי לשפר את איכות, לחלץ מידע, או דחוס את הנתונים עבור שידור ואחסון.בניגוד לעיבוד אנלוגי, אשר משתמש רמות מתח מתמשך, DSP עובד עם ערכים נומריים דיסקרטיים מיוצגים בינאריים בינארי.זה מאפשר פעולות מדויקות, חוזרות ונשנות, תכנות על האות.

במעקב וידאו, האות נובע מ חיישן התמונה של המצלמה (בדרך כלל CMOS או CCD) חיישן זה ללכוד אור והופך אותו למתח אנלוגי. An אנלוגי-to-דיגיטלי ממיר (ADC) ואז דגימות את המתח במרווחים רגילים, ומייצר זרם של ערכי פיקסל דיגיטליים.

השורשים של DSP חוזרים בשנות ה-60 עם התפתחות של מהיר פורייה (FFT), אבל זה לא היה עד הזמינות של מעבדי אותות דיגיטליים זולים בשנות ה-90 כי מעקב וידאו החל לאמץ DSP ברצינות. היום, שבבי DSP ייעודי, FPGAs, ו CPUים חזקים להתמודד עם משימות אלה במצלמות, מקליטי אינטרנט (NVRs), שרתי ענן.

פונקציות ליבה של DSP ב- Video Surveillance

DSP מבצע מספר פונקציות בסיסיות המשפיעות ישירות על הביצועים והיכולות של מערכות מעקב.כל פונקציה מסתמכת על אלגוריתמים ספציפיים שנועדו להתמודד עם אתגרים ספציפיים בלכידת וידאו וניתוח.

שיפור

(ב) ב[[1966]], [[1924]]]], [[1924]]]]]], [[1924]]]]]], [[1924]]]]]], [[1924]]]]]]]]]], [[1924]]]]]]]], [[1924]]]]]]]]]]]]]], [[1924]]]]]]]]]]]], [[1924]]]]]]]]]]]]]]]], [[1924]]]]]]]]]]]]]]]]]]]]]]]]]], [[1924]]]]]]]]]]]]]]]], [[1924]]]]]]]]]]]]]]]]]]]]]]]]]] [[1924]]]]]]]]]]]] [[1924]]]] [[1924]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]]] [[1924]]]]]]]]]]]], [[1924]]]]]]]]]], [[1924]]]]]]]]]], [[1924]]]]]] [[[[1966]]]]]]]] [[1924]]]]]] [[[[1924]]]]]]]] [[[[1924]]]]]] [[[[1924]]]]]]]] [[[[1924]]]]]]]] [[[[[[[[1924]]]]

זיהוי ואובייקטים מעקב

אחד המאפיינים הנפוצים ביותר של DSP למעקב הוא זיהוי תנועה. אלגוריתמים בסיסיים להשוות מסגרות וידאו רצופים פיקסל על ידי פיקסל; כל שינוי משמעותי בערכי פיקסל גורם אזעקה.שיטות מתקדמות יותר להשתמש ב-FLT:0 ⁇ subtractionFLT:1 כדי לבנות מודל של סצינה סטטית ולאחר מכן דגל כל אובייקטים עבור חזית.

וידאו Compression

(הסרטונים הדיגיטליים המדכאים) מייצרים כמות עצומה של נתונים – זרם 1080p ב-30 מסגרות לשנייה יכול לדרוש כמעט 1.5 Gbit/s. DSP אלגוריתמים לדחיסה, כגון H.264 (AVC), H.265 (HEVC), והקוד החדש יותר H.266 (VVC), להפחית את דרישות רוחב הפס והאחסון על ידי הסרת מידע מגובה בתוך מסגרת אחת (in-264) ו-HDR) ו-HDR266 (p) ו-Hinterpine) באופן קבוע (pine) ל-Hinterpine) ב-R266 (pine) ו-H.

זיהוי פנים ותיקון אובייקטים

DSP מאפשר ניתוח מתקדם על ידי הפקת תכונות ממסגרות וידאו.להכרה פנים, המעבד מזהה ציוני דרך מרכזיים (עיניים, האף, הפה) ומייצר תבנית מתמטית (הטבעה) שניתן להשוות נגד מסד נתונים. בדומה, ⁇ :0license:0license הצלחת זיהוי (LPR) 1 משתמש DSP כדי לאתר דמויות של כלי רכב, אפילו תחת תאורה שונה ומבדילה בין אובייקטים מסוכנים, לבין חומרים מזיקים לאלגוריתמים של מערכות לא מזיקות, לעתים קרובות.

עיבוד אודיו

מצלמות מעקב רבות כוללות מיקרופון.DSP מעבדות אותות אודיו כדי לסנן רעש רקע, לזהות צלילים ספציפיים כמו שבירה זכוכית או יריעות אקדח, וסינון אודיו עם וידאו. Noise דיכוי וביטול הד הם פעולות DSP נפוצות שמשפרות את הבהירות השמע עבור תקשורת דו-כיונית במערכות בין-קו או כתובת ציבוריות.

כיצד DSP עובד: שרשרת האות

הבנת זרימת נתוני וידאו באמצעות מערכת מעקב מסייעת להבהיר היכן משתלב DSP.השרשרת מורכבת בדרך כלל ממספר שלבים:

(ב) לכידת תמונה: ⁇ FLT:1 אור עובר דרך העדשה ומכה את החיישן.החיישנים מפצילים מתח אנלוגי ביחס לעוצמה האור עבור כל פיקסל.
(FLT:0) אנלוג-ל-Digital Conversion:FLT ( 1:1 ADC) ממיר את המתח האנלוגי למספר דיגיטלי (למשל, 8 סיביות לרמות אפורות סטנדרטיות 256 מעלות, 10bit או גבוה יותר עבור HDR).
(FLT:0)Pre-Processing (DSP): ההרחבה: Raw נתונים דיגיטליים של Raw נקיים - תיקון פיקסל, הסרת עדשות סינון, וסינון רעש.שלב זה עשוי גם לבצע איזון לבן אוטומטי והתאמה לחשיפה לחשיפה לחשיפה לחשיפה לחשיפה לחשיפה.
(FLT:0)Enhancement and Analytics (DSP): ההרחבה 1 (DSP): האות הנקי עובר שיפור ניגודיות, WDR, חדד, ולאחר מכן משימות אנליטיות כמו זיהוי תנועה או זיהוי אובייקטים.
(ב) ⁇ :0) , (DSP): ההרחבה של וידאו מועצמת היא מוצפנת באמצעות קודק כדי לייצר זרם דחוס (למשל, H.265).
(FLT:0) Transmission/Storage:FLT:1, הזרם המדחוס נשלח מעל הרשת ל-NVR, מערכת ניהול וידאו (VMS), או אחסון בענן.הסוף המקבל עשוי לפענח ולעבד מחדש את הסרטון לתצוגה או ניתוח נוסף.

DSP יכול להיות מיושם בחומרה ייעודית (DSP שבבי), CPUs למטרות כלליות עם ספריות אופטימיזציה (למשל, Intel IPP, ARM NEON), GPUs, או מאיצים מיוחדים של AI.הבחירה תלויה בכוח העיבוד הנדרש, צריכת החשמל, ומגבלות עלות של המצלמה או הרשומה.

מפתח DSP Algorithms בפירוט

כמה אלגוריתמים הם יסוד למעקב מודרני DSP.כאן אנו חודרים עמוק יותר לתוך אלה המשפיעים ביותר.

ניכוי רעש

רעש אינו אחיד - זה משתנה עם בהירות סצינה ו הגדרות מצלמה. אלגוריתמים לירידה ברעש הסתגלות לנתח את המאפיינים המקומיים של כל שכונה של פיקסל ולהתאים את כוח המסנן בהתאם. הפחתה רעש ספטלטלטלטלטלטלאלי עובד על מסגרת אחת, בעוד הפחתה של רעש זמני מקטין מסגרות קודמות כדי להבחין בין רעש נייח לבין תנועה בפועל. מסנן זמני אגרסיבי מדי יכול לגרום לממצאים כאשר תנועה היא כה מתקדמת, איזון DSP מודרני זה.

טווח דינמי רחב (WDR)

WDR משלב שני תמונות שצולמו בזמנים שונים של חשיפה למסגרת אחת.האלגוריתם בוחר את הפיקסלים הנחשפים כראוי מכל לכידת: אזורים אפלים מהחשיפה הארוכה, ותחומים בהירים מהחשיפה הקצרה.DSP חייבים להתאים את התמונות האלה בדיוק כדי להימנע מקידוד שגוי, ואז למזג אותם בצורה חלקה. WDR אמיתי מייצר תמונה סופית עם פרטים גלויים בשני הצללים העמוקים ומדגישים בהירים, תכונה קריטית עבור חניה, הרבה, וסביבות קמעונאיות.

המונחים: tioral Filtering (MCTF)

MCTF הוא טכניקה מתקדמת בשימוש גם בהפחתה רעש ודחיסה.זה מעריך את התנועה בין מסגרות ולאחר מכן מסננים לאורך מסלול תנועה ולא עמדות פיקסל קבוע.זה משמר אובייקטים נעים תוך הפחתת רעש. MCTF הוא אינטנסיבי מבחינה חישובית אבל מספק איכות וידאו מעולה, במיוחד בתנאי תאורה נמוכה שבו רעש הוא נפוץ.

עיצוב רקע וForeground Segment

גילוי תנועה לעתים קרובות מסתמכ על בניית מודל סטטיסטי של הרקע - לדוגמה, מודל שילוב Gaussian (GMM) המייצג את כל התפלגות הצבעים של פיקסל לאורך זמן. כאשר פיקסל חדש מתפוגג באופן משמעותי מהמודל, הוא מסווג כמו אלגוריתמים DSP לעדכן את המודל כדי להתאים לשינויים הדרגתיים כמו מחזורי אור יום או צל.

היתרונות של שימוש ב-DSP ב- Video Surveillance

השילוב של DSP הופך מצלמה פשוטה למכשיר קצה אינטליגנטי.היתרונות המוחשיים כוללים:

(FLT:0) איכות התמונה בתנאים קשים: ההרחבה 1 (Dyverph:1) עם WDR, ירידה ברעש ושיפור ניגודיות, מצלמות מספקות גם תמונות ניתנות להשגה באור נמוך, תאורה אחורית או ערפל.זה משפר ישירות את היכולת לזהות חשודים או אירועים.
(FLT:0) בזמן אמת התראה ותגובה: DSP מאפשר זיהוי מיידי של אירועים - אדם לא מורשה נכנס לאזור מוגבל, רכב במהירות דרך שער, או אובייקט שמאל במרחב הציבורי.
(FLT:0) לחנך את Bandwidth ו- Storage Costsrov:FLT 1:1 Efficient דחיסה (H.265 / H.264) ובקרת bitrate אינטליגנטית להפחית את שיעור הנתונים ב- 50–80% בהשוואה לסטנדרטים קודמים.זה מוריד את העלות הכוללת של הבעלות על אחסון וידאו ותשתיות רשת.
(FLT:0) Advanced Analytics:FLT:1ir על ידי ביצוע ניתוח בקצה המצלמה, מערכות מעקב להפחית את העומס על שרתים מרכזיים. Edge DSP מעבד מאות זרמי וידאו בו זמנית, המאפשר פריסות רחבות היקף או ארגוניות ללא משאבים אחוריים מכריעים.
(FLT:0) אלגוריתמים של גילוי גבוה: אלגוריתמים DSP יכולים להיות מכוונים להפחית את האזעקות השקריות.לדוגמה, אזורי רגישות, מסננים בגודל האובייקט, ותנועת לא אנושית המסננים למנוע התראות מעצים מתפתלים או חיות קטנות.

אתגרים ומגבלות

בעוד DSP מביא יכולות עוצמתיות, הוא מציג אתגרים שמעצבי המערכת חייבים לטפל בהם:

(FLT:0) דרישות חישוביות: FLT:1 הפעלת אלגוריתמים מרובים - הפחתה, גילוי תנועה, דחיסה ו- AI בהקצאת - יכול לעלות על כוח העיבוד הזמין במצלמות בעלות נמוכה.זה עשוי לדרוש חומרה יקרה יותר או הפסקת סחר בין תכונות.
עיבוד DSP אינטנסיבי:0 (Latency:FLT:1) מוסיף עיכוב בין לכידת תמונות ופלט וידאו. עבור יישומים בזמן אמת כגון ניטור חי או בקרת שער אוטומטי, שקיפות מוגזמת יכולה להיות בעייתית.
(FLT:0) Power Contion:FLT:1 ביצועים גבוהים של DSP צ'יפס לצרוך יותר כוח, המהווה גורם קריטי עבור סוללות מופעל או מצלמות IP המכוונים לעוצמה על Ethernet (PoE) גבולות (בדרך כלל 15-30 W). ניהול הrmal דורש גם תשומת לב במסגרים בחוץ.
(FLT:0) אלגוריה טאנינג: ההרחבה 1 (למשל, סף רעש, רגישות בתנועה, יחס תערובת WDR) חייב להיות מוזן לכל סביבה מסוימת. אלגוריתמים מחווננים עניים יכולים לזלזל בביצועים - יתר על כן ירידה ברעש אגרסיבי יכול לחלחל פרטים, בעוד שיותר מדי WDR יכול ליצור הזנחה לא טבעית.
(FLT:0) חששות פרטיות: FLT:1ir Analytics כמו זיהוי פנים מעלה סוגיות משפטיות ואתיות. מערכות DSP חייב לכלול אמצעי הגנה פרטיות כגון הצפנה, אנונימיות נתונים, ובקרת גישה קפדנית לציית לתקנות כמו GDPR.

מגמות עתידיות בDSP עבור מעקב

תחום עיבוד אותות דיגיטליים ממשיך להתפתח במהירות, מונע על ידי התקדמות באינטליגנציה מלאכותית, חומרה ותקני דחיסה.

אינטגרציה למידה עמוקה

DSP מסורתי משתמש באלגוריתמים בעלי מבנה ידני (למשל, מסננים קבועים, גילוי תנועה מבוסס הכלל) רשתות עצביות עמוק יכולות ללמוד עיבוד אופטימלי מהנתונים, להוציא שיטות מסורתיות במשימות כגון זיהוי אובייקטים, פלמנטציה סמנטית, וגילוי אנומלי.DSPing - כגון Hailo-8, Google Edge TPU ו- NVIDIA Jetson - כוללים כיום יחידות עיבוד עצביות (NPU) המאפשרות למידה נמוכות, כגון זיהוי של יכולות למידה וחיזוי של אינטליגנציה מלאכותית.

צוק ותהליכים מקומיים

במקום לשלוח את כל הסרטון לשרת מרכזי, עיבוד נוסף נעשה ישירות על המצלמה או אפליקציה קרובה קצה. Edge DSP מקטין רוחב פס, מוריד עלויות אחסון בענן, ומבטיח ניתוח גם אם חיבור הרשת יאבד.

סטנדרטים חדשים

H.266/Versatile Video Coding (VVC), שהושלם בשנת 2020, מבטיח עד 30% דחיסה טובה יותר מאשר H.265.VVC מסתמכת על אלגוריתמי DSP מורכבים עוד יותר, אבל זה יאפשר 4K ו-8K מעקב ב bitratesss .בינתיים, JPEG XS מציע דחיסה ללא אובדן ראייה עם קוצר רוח אולטרה סגול, מתאים לייצור ובדיקה משפטית.

Multispectral ו- 3D DSP

מצלמות מעקב מתרחבות מעבר לאור גלוי.החיישנים, חיישנים עומק-הזמן-של מצלמות טיסה, ו- LiDAR מייצרים אותות הדורשים DSP מיוחד.שלב וידאו גלוי ורמימי (היתוך) מספק זיהוי חזק בכל מזג האוויר ותנאי תאורה. 3D מאפשר לאנשים לספור, מדידה, וניתוח דיקור.

מסקנה

עיבוד אותות דיגיטליים הוא הגיבור הלא-טונג של מעקב וידאו מודרני, להמיר בשקט נתוני חיישן גולמי לתוך זרמי וידאו ברורים, אינטליגנטי כי צוותי אבטחה להסתמך על.משיפור תמונה בסיסית בניתוח מונע בזמן אמת AI, DSP תחת כל התקדמות משמעותית בתעשייה.כפי שטכנולוגיות DSP ממשיכות להתבגר - שיפור יעילות למידה עמוקה, שיפור יעילות דחיסה, ועיבוד מתקדם מערכות קצה-surveillance יהפכו יותר אבטחה יעילה יותר, כי כיום אבטחה יעילה יותר, היא יעילה יותר, עבור אבטחה יעילה יותר, לא יעילה יותר, היא יעילה יותר, היא יעילה יותר, עבור אבטחה יעילה יותר, היא יעילה יותר, יותר, אבטחה יעילה יותר, יותר, היא אבטחה יעילה יותר, עבור אבטחה יעילה יותר, עבור אבטחה יעילה יותר, יותר, יותר, יותר, יותר, יותר, עבור אבטחה יעילה יותר, יותר, יותר, יותר, עבור אבטחה יעילה יותר, אבטחה יעילה יותר, עבור אבטחה יעילה יותר, יותר, יותר, יותר, אבטחה יעילה יותר, יותר, יותר, יותר, יותר, יותר, עבור אבטחה יעילה יותר, פיתוח אבטחה יעילה יותר, אבטחה יעילה יותר, יותר, יותר, אבטחה יעילה יותר, עבור אבטחה יעילה יותר, היא כבר עובד אבטחה יעילה יותר, יותר, יותר, יותר, יותר, יותר, יותר, יותר, יותר, יותר, פיתוח אבטחה יעילה יותר