Использование дельта-модуляции в цифровой обработке видеосигналов

Введение в дельта-модуляцию при обработке цифровых видеосигналов

Цифровое видео стало повсеместно в современной жизни, от потоковых услуг и видеоконференций до наблюдения и медицинской визуализации. Основная проблема в цифровой обработке видео представляет собой огромные объемы визуальной информации эффективно. Аналоговые видеосигналы должны быть преобразованы в цифровую форму для хранения, передачи и обработки, а выбор метода преобразования непосредственно влияет на пропускную способность, энергопотребление и качество изображения. Среди различных аналого-цифровых методов преобразования дельта-модуль отличается своей простотой и пригодностью в конкретных видеоприложениях в реальном времени. В то время как импульсно-кодовая модуляция (PCM) является доминирующим методом во многих областях, дельта-модульирование предлагает уникальные преимущества, когда стоимость системы, мощность и пропускная способность находятся на уровне премиум. Эта статья обеспечивает всестороннее исследование дельта-модуляции в контексте цифровой обработки видеосигнала, охватывая его принципы, приложения, преимущества, ограничения и будущую актуальность.

Что такое дельта-модуляция?

Дельта-модулирование — это метод дифференциального кодирования, используемый для преобразования аналоговых сигналов в цифровую форму. В отличие от обычного PCM, который квантовает абсолютную амплитуду каждого образца, дельта-модульирование кодирует только разницу (дельту) между последовательными образцами. Выход представляет собой однобитный цифровой поток: «1» указывает, что текущий образец выше предыдущего, а «0» указывает, что он ниже (или наоборот, в зависимости от конвенции). Эта простая схема резко снижает скорость передачи данных и сложность аппаратного обеспечения.

Базовая система дельта-модуляции состоит из компаратора, локального декодера (интегратора) и сэмплера. В каждый момент выборки входной сигнал сравнивается с реконструированным сигналом, генерируемым локальным интегратором. Разница квантуется до одного из двух уровней, и этот бит передается. Приемник интегрирует битовый поток для реконструкции исходного сигнала. Закрепляется размер шага (количество реконструированного сигнала изменяется на бит), что является одновременно простотой и ограничением.

Для медленно изменяющихся сигналов дельта-модулирование работает очень хорошо, производя качественную реконструкцию с минимальной ошибкой. Однако для сигналов с быстрыми изменениями фиксированный размер шага может быть слишком мал для отслеживания сигнала, что приводит к явлению, называемому искажением перегрузки наклона. И наоборот, для очень плоских участков сигнала система может производить холостый шум (гранулированный шум) из-за непрерывного переключения вокруг значения сигнала.

Delta Modulation vs. модуляция с кодом импульса

Чтобы оценить роль дельта-модуляции в обработке видео, необходимо сравнить ее с PCM, наиболее широко используемым методом преобразования. В PCM каждому образцу присваивается двоичный код, представляющий его амплитуду. Например, 8-битный PCM обеспечивает 256 возможных уровней на образец, предлагая высокую точность. Однако для этого требуется высокая битрейтность и сложные аналого-цифровые преобразователи (ADC).

Для дельта-модуляции, напротив, используется только один бит на образец. При одинаковой скорости отбора проб требуется гораздо меньше пропускной способности. Однако фиксированный размер шага вводит шум квантования, который отличается по своей природе от шума PCM. Ключевой компромисс заключается в том, что дельта-модультация лучше всего подходит для сигналов с ограниченной пропускной способностью и постепенными вариациями. Видеосигналы, которые содержат как гладкие градиенты, так и острые края, создают проблемы, которые дельта-модультация сама по себе не всегда может решить. Тем не менее, для приложений, где потребление энергии и простота схемы более важны, чем крайняя точность, например, в портативных устройствах или ранних цифровых видеосистемах, дельта-модульция остается жизнеспособной альтернативой.

Внешний ресурс: Подробное математическое сравнение см. Википедия: Дельта-модуляция.

Адаптивная дельта-модультация: преодоление основных ограничений

Наиболее значительным улучшением по сравнению с базовой дельта-модулированием является адаптивная дельта-модулирование (ADM). В ADM размер шага динамически регулируется на основе входящего битового рисунка. При одинаковых последовательных битах (указывается состояние перегрузки наклона) размер шага увеличивается; при частом чередовании битов (указывается гранулированный шум) размер шага уменьшается. Эта адаптация позволяет ADM обрабатывать гораздо более широкий диапазон динамики сигнала при сохранении разумной шумопроизводительности.

В видеообработке ADM особенно ценен, поскольку видеосигналы содержат как медленные переходы яркости (например, закатное небо), так и острые края (например, границы объекта). Адаптивный размер шага позволяет кодеру отслеживать быстрые изменения без чрезмерной перегрузки наклона и уменьшать гранулированный шум в однородных областях. Многие практические системы дельта-модуляции, используемые в ранних видеокодеках, были основаны на ADM. Современные реализации часто сочетают ADM с другими методами, такими как спектральное формование и формование шума, для дальнейшего улучшения субъективного качества.

Внешний ресурс: Алгоритмы исследования адаптивного управления пошаговой размерностью в IEEE в статье по адаптивной дельта-модуляции (доступ может быть ограничен, но рефераты полезны).

Применение в цифровой обработке видеосигналов

Цифровые видеосигналы состоят из светимости (Y) и цветности (U, V) компонентов. Каждый компонент представляет собой непрерывную форму волны в аналоговом домене до оцифровки. Дельта-модулирование может применяться к каждому из этих компонентов независимо или к комбинированному композитному сигналу. Ключевое преимущество заключается в том, что битрейт резко снижается по сравнению с оцифровкой на основе PCM, что делает возможным передачу или хранение видео по каналам с ограниченной пропускной способностью.

В ранних цифровых видеосистемах, таких как видеотелефония и недорогое наблюдение, часто использовалась дельта-модулирование, потому что для него требовался только простой компаратор напряжения и интегрирующая схема на кодере и подобный интегратор на декодере. Это значительно уменьшило количество чипов и энергопотребление. Даже сегодня варианты дельта-модуляции используются в некоторых нишевых областях, где первостепенное значение имеет простота, например, в камера на чипе конструкции для устройств IoT сверхнизкой мощности.

Кроме того, дельта-модулирование может применяться во временной (межкадровой) области. Вместо кодирования разностей пикселей в кадре, разница между кадрами может быть закодирована с использованием дельта-модуляции. Это похоже по духу на компенсированное движением остаточное кодирование, используемое в современных стандартах, хотя и на гораздо более грубом уровне.

Роль в ранних стандартах сжатия видео

До широкого внедрения кодеков на основе трансформаций, таких как JPEG и MPEG, в нескольких стандартах сжатия видео использовались методы дифференциального кодирования, напоминающие дельта-модулирование. Например, в стандарте H.261 (1990) использовалась дифференциальная импульсно-кодовая модуляция (DPCM) для кодирования векторов движения, а иногда и для остатков блока. DPCM является обобщением, где предсказание основано на предыдущих пикселях, а разница квантована с использованием более одного бита. Delta-модулирование является простейшей формой DPCM с 1-битным квантователем.

Даже в эпоху H.264/AVC и H.265/HEVC внутрикадровое предсказание часто использует дифференциальное кодирование. Например, режим сжатия без потерь в некоторых кодеках может использовать форму предиктивного кодирования, напоминающую адаптивную дельта-модулирование. Хотя современные кодеки в значительной степени полагаются на трансформацию (DCT) и энтропийное кодирование, принципы дельта-модуляции остаются основополагающими для понимания предиктивного кодирования.