Inleiding tot Deltamodulatie in digitale videosignaalverwerking

Digitale video is alomtegenwoordig geworden in het moderne leven, van streamingdiensten en videoconferenties tot surveillance en medische beeldvorming. De kernuitdaging in digitale videoverwerking vertegenwoordigt enorme hoeveelheden visuele informatie. Analoge videosignalen moeten worden omgezet in digitale vorm voor opslag, transmissie en verwerking, en de keuze van conversietechniek heeft direct invloed op bandbreedte, stroomverbruik en beeldkwaliteit. Onder de verschillende analoge-naar-digitale conversiemethoden, deltamodulatie valt op voor zijn eenvoud en geschiktheid in specifieke real-time videotoepassingen. Terwijl puls-codemodulatie (PCM) de dominante methode is in vele gebieden, biedt deltamodulatie unieke voordelen wanneer systeemkosten, vermogen en bandbreedte op een premium staan. Dit artikel voorziet in een uitgebreide exploratie van deltamodulatie in de context van digitale video-signaalverwerking, met betrekking tot zijn principes, toepassingen, voordelen, beperkingen en toekomstige relevantie.

Wat is Delta Modulatie?

Deltamodulatie is een differentiaal coderingstechniek die wordt gebruikt om analoge signalen om te zetten in digitale vorm. In tegenstelling tot conventionele PCM, die de absolute amplitude van elk monster quantiseert, codeert de deltamodulatie alleen het verschil (delta) tussen opeenvolgende samples. De output is een enkelvoudige digitale stroom: een '1' geeft aan dat het huidige monster hoger is dan de vorige, en een '0' geeft aan dat het lager is (of vice versa, afhankelijk van de conventie). Dit eenvoudige schema vermindert drastisch de datasnelheid en hardware complexiteit.

Het basis delta modulatie systeem bestaat uit een vergelijking, een lokale decoder (integrator) en een sampler. Op elk moment van de bemonstering wordt het ingangssignaal vergeleken met een gereconstitueerd signaal dat door de lokale integrator wordt gegenereerd. Het verschil wordt gequantiseerd tot een van twee niveaus, en dat bit wordt verzonden. De ontvanger integreert de bitstroom om het oorspronkelijke signaal te reconstrueren. De stapgrootte (de hoeveelheid die het gereconstrueerde signaal per bit verandert) is vastgesteld, wat zowel een eenvoud als een beperking is.

Voor langzaam wisselende signalen werkt de deltamodulatie zeer goed, waardoor een hoogwaardige reconstructie met minimale fout ontstaat. Echter, voor signalen met snelle veranderingen, kan de vaste stapgrootte te klein zijn om het signaal te volgen, wat leidt tot een fenomeen genaamd hellingsoverbelasting vervorming. Omgekeerd, voor zeer vlakke delen van het signaal, kan het systeem produceren stationaire geluid (granular noise) als gevolg van continue toggling rond de signaalwaarde.

Deltamodulatie vs. pulscodemodulatie

Om de rol van deltamodulatie in videoverwerking te waarderen, is het essentieel om deze te vergelijken met PCM, de meest gebruikte conversiemethode. In PCM, wordt elk monster een binaire code toegekend die de amplitude weergeeft. Bijvoorbeeld, 8-bit PCM biedt 256 mogelijke niveaus per monster, met een hoge betrouwbaarheid. Echter, dit vereist een hoge bit rate en complexe analoge-naar-digitale converters (ADC's).

Delta modulatie daarentegen gebruikt slechts één bit per monster. Bij dezelfde bemonsteringssnelheid vereist het veel minder bandbreedte. Echter, de vaste stapgrootte introduceert quantization ruis dat van nature anders is dan het geluid van PCM. Een belangrijke afweging is dat deltamodulatie het beste geschikt is voor signalen met beperkte bandbreedte en geleidelijke variaties. Videosignalen, die zowel gladde gradiënten als scherpe randen bevatten, stellen uitdagingen die deltamodulatie alleen niet altijd kan oplossen. Niettemin, voor toepassingen waar stroomverbruik en circuit eenvoud zijn belangrijker dan extreme betrouwbaarheid . zoals in draagbare apparaten of vroege digitale videosystemen .delta modulatie blijft een levensvatbaar alternatief.

Externe bron: Voor een gedetailleerde wiskundige vergelijking, zie Wikipedia: Delta Modulatie.

Adaptieve Deltamodulatie: Overkomen van basisbeperkingen

De belangrijkste verbetering ten opzichte van de basismodulatie van delta is adaptieve deltamodulatie (ADM). In ADM wordt de stapgrootte dynamisch aangepast op basis van het binnenkomende bitpatroon. Wanneer opeenvolgende bits hetzelfde zijn (wat een hellingsoverbelasting aangeeft), neemt de stapgrootte toe; wanneer bits vaak worden afgewisseld (wat granulair lawaai aangeeft), neemt de stapgrootte af. Deze aanpassing maakt het mogelijk om een veel breder bereik van signaaldynamiek te hanteren met behoud van redelijke geluidsprestaties.

Bij videoverwerking is ADM vooral waardevol omdat videosignalen zowel trage helderheidsovergangen (bijvoorbeeld een zonsondergangslucht) als scherpe randen (bv. objectgrenzen) bevatten. De adaptieve stapgrootte maakt het de encoder mogelijk snelle veranderingen te volgen zonder overbelasting van de helling en het granulair lawaai in uniforme gebieden te verminderen. Veel praktische deltamodulatiesystemen die in vroege videocodecs worden gebruikt, zijn gebaseerd op ADM. Moderne implementaties combineren ADM vaak met andere technieken zoals spectrale vormgeving en ruisvorming om de subjectieve kwaliteit verder te verbeteren.

Externe bron: Onderzoeksalgoritmen voor adaptieve step-size controle in IEEE papier op Adaptive Delta Modulatie (toegang kan beperkt zijn, maar abstracten zijn nuttig).

Toepassing in digitale videosignaalverwerking

Digitale videosignalen bestaan uit luminantie (Y) en chrominantie (U, V) componenten. Elk onderdeel is een continue golfvorm in het analoge domein voor digitalisering. Delta modulatie kan onafhankelijk van elk van deze componenten of op een gecombineerd composiet signaal worden toegepast. Het belangrijkste voordeel is dat de bitsnelheid drastisch wordt verlaagd in vergelijking met PCM-gebaseerde digitalisering, waardoor het mogelijk is om video's op te slaan op kanalen met beperkte breedte.

In vroege digitale videosystemen, zoals videotelefonie en goedkope bewaking, werd de deltamodulatie vaak gebruikt omdat er slechts een eenvoudige spanningsvergelijking en een integratiecircuit bij de encoder nodig was, en een soortgelijke integrator bij de decoder. Dit verminderde het aantal chips en het energieverbruik aanzienlijk. Zelfs vandaag de dag worden deltamodulatievarianten gebruikt in bepaalde nichegebieden waar eenvoud van het grootste belang is, zoals in ]camera-op-a-chip ontwerpen voor ultra-low-power IoT-apparaten.

Bovendien kan deltamodulatie worden toegepast in het temporale (interframe) domein. In plaats van pixelverschillen binnen een frame te coderen, kan het verschil tussen frames worden gecodeerd met behulp van deltamodulatie. Dit is in geest vergelijkbaar met motion-compensated restcodering die wordt gebruikt in moderne standaarden, hoewel op een veel grovere niveau.

Rol in de standaarden voor vroege videocompressie

Voordat op grote schaal op transformatie gebaseerde codecs zoals JPEG en MPEG werden toegepast, gebruikten verschillende videocompressiestandaarden differentiële coderingsmethoden die doen denken aan deltamodulatie. Bijvoorbeeld, de H.261[ norm (1990) gebruikte differentiële pulscodemodulatie (DPCM) voor het coderen van bewegingsvectoren en soms voor blokresten. DPCM is een generalisatie waarbij de voorspelling gebaseerd is op eerdere pixels, en het verschil wordt gequantiseerd met meer dan één bit. Deltamodulatie is de eenvoudigste vorm van DPCM met een 1-bits quantizer.

Zelfs in het tijdperk van H.264/AVC en H.265/HEVC wordt in de voorspelling van het binnenframe vaak gebruik gemaakt van differentiële codering. Zo kan de lossless compressiemodus in bepaalde codecs een vorm van voorspellende codering gebruiken die lijkt op adaptieve deltamodulatie. Hoewel moderne codecs sterk afhankelijk zijn van transformaties (DCT) en entropiecodering, blijven de principes van de deltamodulatie funderingsbasis voor het begrijpen van voorspellende codering.

Huidige relevantie in moderne codecs

Hoewel de deltamodulatie niet wordt gebruikt als een standalone codec voor mainstream video (bijv. Netflix of YouTube), leven de concepten ervan voort in hybride video-encoders. Het restsignaal na bewegingsvoorspelling wordt vaak gecodeerd met behulp van technieken die conceptueel vergelijkbaar zijn met adaptieve deltamodulatie. Bovendien kunnen in scherminhoudcodering en low-delay codering voor videoconferenties eenvoudige differentiële methoden effectief zijn wanneer bandbreedte extreem beperkt is.

Bovendien vindt de deltamodulatie toepassing in video over draadloze sensornetwerken en ]digitale video-uitzendingen naar handapparatuur (DVB‐H), waar energie-efficiëntie van cruciaal belang is. Naarmate randcomputers en IoT uitbreiden, zal de vraag naar ultra-low-power video-verwerking waarschijnlijk weer de belangstelling wekken voor minimalistische coderingssystemen zoals deltamodulatie.

Voordelen van Deltamodulatie

De volgende voordelen maken deltamodulatie aantrekkelijk voor specifieke digitale videotoepassingen:

  • Eenvoudige implementatie: Vereist alleen een vergelijkings-, integrator- en sampler. Geen complexe analoge-naar-digitale converter (ADC) met veel vergelijkings- of weerstandsladders. Dit vermindert siliciumoppervlak en kosten.
  • Laag energieverbruik: Omdat elk monster door één bit wordt vertegenwoordigd, draait de digitale schakeling met een lagere schakelsnelheid en is de analoge front-end minimaal. Ideaal voor apparaten op batterijkracht zoals draagbare camera's en wearables.
  • Inherent datacompressie: De one-bit-weergave vermindert de ruwe bitsnelheid. Voor langzaam wisselende signalen kan het compressieratio's bereiken die vergelijkbaar zijn met eenvoudige DPCM. Dit is gunstig voor smalbandkanalen (bv. analoge telefoonlijnen voor videogesprekken).
  • Goede prestaties voor lagefrequentievariaties: Luminantiegradiënten (zoals gladde lichtveranderingen) worden nauwkeurig gecodeerd met laag korrelig geluid wanneer de stapgrootte op de juiste wijze wordt gekozen.
  • Robuustheid van transmissiefouten: Omdat elke bit slechts een verandering overbrengt, beïnvloedt een enkele bitfout alleen het stapverschil, niet de absolute waarde. Bij integratorlekken vervalt de fout in de tijd, waardoor de deltamodulatie fouttoleranter is dan PCM voor burstfouten.

Beperkingen en mitigaties

Ondanks de voordelen ervan heeft de basismodulatie van delta opmerkelijke beperkingen die moeten worden aangepakt voor hoogwaardige videoverwerking:

  • Kwantiseringsgeluid (granulair geluid):[ In uniforme gebieden van het videosignaal, schakelt het gereconstrueerde signaal om de werkelijke waarde, waardoor zichtbare ruis (korrel) wordt geproduceerd. Verminderingen: gebruik adaptieve stapgrootte die tot een minimum vermindert wanneer het signaal vlak is, of gebruik maken van geluids-vorm feedback filters.
  • Vervorming van de hellingen: Wanneer het ingangssignaal sneller verandert dan de vaste stapgrootte per monster, kan de encoder de verandering niet volgen, waardoor grote fouten ontstaan. Dit manifesteert zich als vervaging of verlies van scherpe randen in video. Mitigaties: adaptieve stapgrootte (ADM) of met een hogere bemonsteringssnelheid (oversampling).
  • Vereist oversampling: Om kwaliteit vergelijkbaar met PCM te behouden, moet de deltamodulatie doorgaans een bemonsteringssnelheid hebben die aanzienlijk hoger is dan de Nyquist-snelheid. Oversampling verhoogt de bitsnelheid maar biedt nog steeds eenvoud. De trade-off tussen bemonsteringssnelheid en stapgrootte moet zorgvuldig worden geoptimaliseerd.
  • Niet geschikt voor complexe texturen: Hoogfrequent detail (bv. fijne patronen, tekst) genereert afwisselende bits die leiden tot hoge korrelgeluiden. Zelfs ADM worstelt omdat de stapgrootte nooit kan worden geregeld. In dergelijke gevallen is de deltamodulatie alleen onvoldoende, en een hybride benadering (bv. overstappen op PCM of het transformeren van codering voor drukke gebieden) is nodig.

Moderne systemen pakken deze beperkingen aan door deltamodulatie te combineren met andere coderingsinstrumenten. Bijvoorbeeld, sommige videocodecs gebruiken adaptieve schakelen[ tussen deltamodulatie voor gladde regio's en PCM/DPCM voor gedetailleerde gebieden. Daarnaast gebruikt sigma-deltamodulatie (een afgeleide) ruisvorming om quantisatiegeluid naar hoge frequenties te duwen, die vervolgens kunnen worden gefilterd, waardoor betere kwaliteit voor video ten koste van een hogere complexiteit wordt geboden.

Terwijl de video-industrie naar hogere resoluties (4K, 8K, HDR) en meeslepende formaten (VR, AR) gaat, blijft de druk voor efficiënte compressie intens. Hoewel transformerende codecs volwassen zijn, is er steeds meer interesse in leerde videocompressie met behulp van neurale netwerken. Interessant is dat sommige neurale netwerkontwerpen differentiële coderingslagen bevatten die de deltamodulatieprincipes nabootsen. De eenvoud van deltamodulatie is aantrekkelijk voor on-device-inferentie waar de stroom beperkt is.

Een andere veelbelovende richting is analog-to-information conversie voor videosensoren. Deltamodulatie kan direct worden geïntegreerd in beeldsensoren (on-pixel vergelijkingsapparaten) om een bit-stream output te produceren zonder een aparte ADC. Dit vermindert uitlezingsruis en kracht, waardoor ultrasnelle framesnelheden voor wetenschappelijke beeldvorming of gebarenherkenning mogelijk zijn.

Bovendien worden deltamodulatieconcepten gebruikt in neuromorfe camera's (event-based vision sensors). Deze sensoren geven eerder veranderingen dan absolute intensiteiten af, functionerend als een biologisch netvlies dat alleen gebeurtenissen uitzendt. Hoewel niet precies deltamodulatie, is het principe van het alleen maar overdragen van verschillen hetzelfde. Dergelijke technologieën zijn steeds relevanter voor autonome voertuigen en robotica.

Externe bron: Verken op gebeurtenissen gebaseerde visie in Nature paper on event cameras (abstract).

Conclusie

Deltamodulatie blijft een fundamentele techniek in digitale communicatie en signaalverwerking. De toepassing ervan in digitale videosignaalverwerking, hoewel overschaduwd door krachtigere codecs, blijft relevant in scenario's die een laag vermogen, eenvoud en real-time prestaties vereisen. Adaptieve deltamodulatie overwint de fundamentele beperkingen van hellingsoverbelasting en korrelgeluid, waardoor het geschikt is voor videosignalen met een matig dynamisch bereik. Hoewel moderne videocompressie berust op geavanceerde hybride codering, zijn de onderliggende principes van differentiële codering diep geworteld in de deltamodulatie.

Naarmate de technologie zich ontwikkelt naar ultra-low-power edge apparaten en neuromorfische sensoren, kan de deltamodulatie een nieuw belang vinden. Het begrijpen van de sterktes en beperkingen ervan stelt ingenieurs in staat om weloverwogen beslissingen te nemen over wanneer deze elegante methode wordt toegepast. Voor iedereen die betrokken is bij het ontwerpen van videosystemen is een solide greep in de deltamodulatie essentieel voor het optimaliseren van de afweging tussen kwaliteit, bandbreedte en vermogen.

Externe bron: Voor een inleiding over digitale communicatie, zie Alle Over Circuits: Inleiding tot Deltamodulatie.

Externe bron: De erfenis van differentiële codering in videocompressie is goed gedocumenteerd in vcodex: Inleiding tot videocompressie.