Устройство формирования изображения



Устройство формирования изображения
Устройство формирования изображения
Устройство формирования изображения
Устройство формирования изображения
Устройство формирования изображения
Устройство формирования изображения

 


Владельцы патента RU 2543074:

Федеральное государственное бюджетное образовательное учреждение высшего профессионального образования "Санкт-Петербургский государственный электротехнический университет "ЛЭТИ" им. В.И. Ульянова (Ленина)" (RU)

Изобретение относится к области телевизионной техники. Техническим результатом является обеспечение устройства, позволяющего производить точную коррекцию уровня черного и усиление для разных каналов фотоприемника, используя лишь в качестве априорных данных захваченное изображение. Результат достигается тем, что устройство формирования изображения включает фотоприемник 1, содержащий два выходных устройства, каждый из которых подсоединен к одному из двух идентичных каналов I и II обработки видеосигнала, каждый из которых содержит последовательное соединение блока двойной коррелированной выборки 2, блока усилителя 3 и аналого-цифрового преобразователя 4, выход каждого из которых соединен с одним из входов блока привязки уровня черного 5. Далее происходит последовательная обработка в блоке деления 6, блоке построения гистограммы 7, блоке определения максимума 8, блоке формирования коэффициента поправки, выход которого соединен с входом блока усилителя в одном из каналов обработки. 5 ил.

 

Изобретение относится к области телевизионной техники и может быть использовано при проектировании телевизионных камер на фотоприемниках (ФП) с несколькими выходными устройствами, которые находят применение в камерах телевидения высокой четкости.

Для телевизионных камер телевидения высокой четкости стандарта 1080р ФП имеют 1920 активных пикселей по горизонтали и 1080 активных пикселей по вертикали, при частоте 25 кадров в секунду требуют частоты считывания данных 74,25 МГц. В то же время максимальная частота выходного устройства матричного прибора с зарядовой связью не может превышать 40 МГц. Это ограничение приводит к необходимости использования ФП с двумя выходными устройствами, позволяющего производить считывание половины всех пикселей через один выход, а вторую половину через другой выход с частотой считывания 37,125 МГц. Различие в коэффициентах преобразования выходных устройств приводит к тому, что на изображении появляется артефакт в виде разнояркости изображения относительно центральной оси. Таким образом, необходимо компенсировать различия между выходными устройствами ФП.

Известно устройство формирования изображения (U.S. Patent 6072603, Parks Cr., 2000), состоящее из ФП с двумя выходными устройствами, сигналы с которых поступают на вход одного из двух каналов обработки видеосигнала, каждый из которых включает блок двойной коррелированной выборки (БДКВ), блок усилителя (БУ), аналого-цифровой преобразователь (АЦП), блок таблицы преобразования (БТП), причем выходы БТП каждого из каналов соединены с входами блока памяти (БП).

В общем случае сигнал на выходе ФП имеет нелинейную зависимость от освещенности, причем из-за разброса параметров электрических цепей обработки видеосигнала эта зависимость может быть существенной для разных выходных устройств.

Процесс компенсации неравномерности коэффициентов преобразования выходных устройств ФП заключается в генерации таблиц преобразования, полученных в процессе калибровки, которая включает два этапа - регистрация тестового изображения и генерация таблицы преобразования.

В фокус оптической системы камеры помещается специальное тестовое изображение, содержащее плавные градиенты изменения яркости вдоль границ областей ФП и происходит съемка. После окончания времени накопления происходит процесс параллельного считывания зарядовых пакетов через два выходных устройства. Затем аналоговый сигнал каждого выходного устройства поступает на БДКВ, в котором устраняются шумы установки потенциала плавающей диффузионной области, фликкер-шум, низкочастотные наводки и ослабляется тактовая наводка. После сигнал усиливается в БУ до требуемого уровня и подвергается аналого-цифровому преобразованию. Далее цифровые видеоданные поступают на БТП, который на этапе калибровки пропускает входной сигнал на выход без изменений в БП, где сохраняются сигналы с двух каналов. Таким образом происходит захват одного или нескольких кадров тестового изображения.

После этого производится расчет коэффициентов в таблице преобразования, который заключается в следующем. Первый канал выбирается в качестве опорного, а значения для второго канала вычисляются согласно методу наименьших квадратов:

где x - значения сигнала первого канала, у - значения сигнала второго канала, m - число уровней квантования.

Коэффициенты aj являются решением уравнения

Все рассчитанные коэффициенты сохраняются в памяти, и процесс калибровки считается завершенным. При работе в обычном режиме через БТП проходит лишь один сигнал из двух.

Основным преимуществом данного устройства является точность степени коррекции свет-сигнальной характеристики. К недостаткам можно отнести необходимость оператора, который будет проводить повторную калибровку с изменением объекта съемки на тестовое изображение при изменении условий работы, таких как температура, общий уровень освещения. Это приводит к тому, что такое устройство не может работать автономно, что сужает спектр возможных применений.

Наиболее близким по совокупности существенных признаков к предлагаемому, является устройство формирования изображения, описанное в (U.S. Patent 7236199 В2, Hori et al. 2007), состоящее из ФП с двумя выходными устройствами, сигналы с которых, поступают на вход одного из двух каналов обработки видеосигнала, каждый из которых включает БДКВ, БУ, АЦП. После АЦП сигналы с двух каналов обработки последовательно проходят блок привязки уровня черного (БПУЧ), блок вычитания соседних пикселей (БВСП), блок суммирования разностей (БСР) и блок формирования коэффициента поправки (БФКП). Причем выход БФКП соединен с входом БУ одного из каналов.

На ФП, который разделен на две равные по размеру области, проецируется изображение. Пикселы, принадлежащие каждой из областей, последовательно считываются через собственное выходное устройство, неравномерность электрических параметров которых приводит к заметным артефактам на изображении. Сигнал с каждого выхода ФП сначала проходит через БДКВ, в котором устраняются шумы установки потенциала плавающей диффузионной области, фликкер-шум, низкочастотные наводки и ослабляется тактовая наводка. Затем сигнал усиливается в БУ до требуемого уровня и проходит аналого-цифровое преобразование. После чего в БПУЧ производится усреднение значения пикселов, закрытых от источника света. Если имеется возможность полностью перекрыть световой поток, то возможно использовать всю область ФП, если же такой возможности нет, то используют значения «темповых» пикселов по краям каждой из областей ФП. Итоговое значение уровня черного выбирается как среднее арифметическое из двух значений каждой из областей. После этого считают области, скомпенсированные по уровню черного. Затем производится компенсация по коэффициенту усиления для одного из каналов до уровня соответствующего опорному каналу. Для этого сначала вычисляется разность значений соседних пикселов в одной строке, но принадлежащих разным областям в БВСП. Такая операция производится в каждой строке изображения, на протяжении нескольких кадров. При этом разности значений соседних пикселов суммируются в БСР. На основании знака полученной суммы формируется решение об увеличении или уменьшении коэффициента поправки для одного из каналов в БФКП. Причем шаг изменения коэффициента поправки фиксирован.

Основным достоинством данного устройства является возможность компенсации различий в уровне черного и усиления для двух каналов на основе информации, полученной непосредственно из изображения объекта съемки, что позволяет работать системе в автоматическом режиме. Существенным недостатком является то, что коррекция коэффициента усиления производится с фиксированным шагом раз в кадр, что при большой разрядности АЦП и высокой требуемой точности может занимать до нескольких минут.

Технической задачей, решаемой изобретением, является компенсация различий в уровне черного и усиление для двух каналов за один кадр изображения с высокой точностью и простой реализацией, позволяющей работать с видеоизображениями высокой четкости в реальном времени.

Поставленная задача решается за счет того, что предлагаемое устройство, как и известное, содержит ФП, содержащий два выходных устройства, каждый из которых подсоединен к одному из двух идентичных каналов обработки видеосигнала, каждый из которых содержит последовательное соединение ДКВ, БУ и АЦП, а выход АЦП каждого из каналов соединен с одним из входов БПУЧ, имеющего два входа и два выхода, также включающее БФКП, выход которого соединен с входом БУ одного из каналов. Но в отличие от известного содержит последовательное соединение БД, два входа которого соединены с выходами БПУЧ, БФГ и БОМ, выход которого соединен с входом БФКП.

Изобретение поясняется чертежами, где на фиг. 1 показана схема предлагаемого устройства формирования изображения, на фиг. 2 - схематичное изображение ФП, на фиг. 3 поясняется способ привязки уровня черного для двух каналов обработки видеосигнала, на фиг. 4 показано распределение коэффициента поправки вдоль границы раздела областей ФП, на фиг. 5 показана гистограмма массива коэффициентов поправки.

Устройство работает следующим образом. Оптический сигнал проецируется на ФП (1), разделенный на две области и содержащий два выходных устройства. В данном изобретении в качестве ФП используется матричный прибор с зарядовой связью (МПЗС) с размером Ν×2М, где N - число строк, Μ - число столбцов в каждой области ФП. После процесса накопления осуществляется считывание зарядовых пакетов из МПЗС в направлении, указанном стрелками на фиг. 2. Далее каждый трехуровневый аналоговый сигнал с двух выходных устройств проходит через соответствующий канал обработки видеосигнала I и II (фиг. 1). Сигнал с выхода ФП в каждом канале поступает в БДКВ (2), в котором устраняются шумы установки потенциала плавающей диффузионной области, фликкер-шум, низкочастотные наводки и ослабляется тактовая наводка. Затем сигнал усиливается до требуемого уровня в БУ (3) и проходит АЦП (4).

Схематичное представление характеристики свет-сигнала для ФП с двумя выходными устройствами изображено на фиг. 3: 1 - характеристика для канала I, 2 -характеристика для канала II. Канал с меньшим значением уровня черного принимается за опорный (на фиг. 3 это канал I). Соответственно привязка уровня черного производится в БПУЧ (5) только в канале II на величину ΔUчер, которая характеризует разность уровня черного в каналах I и II. Значение уровня черного для каждого из каналов вычисляется путем усреднения всех «темповых» пикселей соответствующей области на ФП. Обычно ФП имеет не менее двух «темповых» строк и двух «темновых» столбцов на краях ФП. Далее определяется разность значений и производится привязка одного из каналов к опорному уровню (кривая 3 на фиг. 3).

Поскольку реальные изображения имеют достаточно большую пространственную избыточность, можно предположить с большой долей вероятности, что соседние пикселы изображения могут иметь одинаковое значение. Исходя из этого предположения соседние пикселы, находящиеся в одной строке, но в разных областях ФП с координатами i=1…N, j=Μ, с большой вероятностью будут иметь линейную зависимость

Yi,m=ki,m×xi,m,

где x - значения пикселов второй из области, у - значения пикселов второй из области, k - линейный коэффициент поправки. Поиск коэффициентов производится в БД (6) путем деления пикселей, принадлежащих областям 1 и 2 с координатами i.M, где i=l…N (фиг. 2). Поскольку изображение имеет также и неравномерность распределения яркости по полю, то коэффициент поправки зависит от координаты, что отображено на фиг. 4. Полученный массив коэффициентов поправки можно рассматривать как случайную величину. Оценить математическое ожидание этой случайной величины можно по плотности вероятности. Так, в БФГ (7) производится формирование гистограммы, которую можно трактовать как плотность вероятности поправочного коэффициента. При построении гистограммы учитываются только те значения поправочного коэффициента, которые лежат в пределах ±t от значения опорного канала, где t - допуск на неравномерность коэффициентов преобразования выходных устройств ФП, обычно лежащий в пределах от 2 до 20%. Это позволяет не принимать во внимание участки изображения, содержащие высокочастотные составляющие, значительно ухудшающие степень точности определения коэффициента поправки. Количество корзин разбиения при построении гистограммы выбирается исходя из требуемой точности определения коэффициента поправки

где R - количество корзин. При этом номер корзины r связан с коэффициентом поправки следующим образом:

kr=1 - t+ε·r.

После чего в БОМ (8) выделяется корзина, которая соответствует максимуму гистограммы, а номер будет определять искомый коэффициент поправки. На фиг. 5 изображены гистограммы поправочного коэффициента для разбиения на 8, 16, 64 корзины при t=20%. Затем в БФКП (9) значение искомого коэффициента поправки переводится в код, соответствующий усилению/ослаблению на требуемое количество дБ, и применяется в БУ соответствующего канала, который не был принят опорным. После этого считается, что изображение, сформированное ФП с двумя выходными устройствами, скорректировано по уровню черного и по усилению.

Достигаемый технический результат - устройство позволяет производить достаточно точную коррекцию уровня черного и усиления для разных каналов ФП без использования дополнительного оборудования, а используя лишь в качестве априорных данных захваченное изображение, что в совокупности с малыми требуемыми вычислительными затратами позволяет значительно расширить спектр задач, в которых используются камеры высокой четкости.

Устройство формирования изображения, включающее фотоприемник, содержащий два выходных устройства, каждый из которых подсоединен к одному из двух идентичных каналов обработки видеосигнала, каждый из которых содержит последовательное соединение блока двойной коррелированной выборки, блока усилителя и аналого-цифрового преобразователя, а выход аналого-цифрового преобразователя каждого из каналов соединен с одним из входов блока привязки уровня черного, имеющего два входа, которые соединены с входами блока привязки уровня черного, имеющего два выхода, также включающее блок формирования коэффициента поправки, выход которого соединен с входом блока усилителя одного из каналов, отличающееся тем, что дополнительно введено последовательное соединение блока деления, два входа которого соединены с выходами блока привязки уровня черного, блок построения гистограммы и блок определения максимума, выход которого соединен с входом блока формирования коэффициента поправки.



 

Похожие патенты:

Изобретение относится к устройству формирования изображения, такому как датчик изображения CMOS, и к системе камеры. Техническим результатом является формирование изображений или измерение при низкой интенсивности, с низким уровнем шумов, даже при низкой освещенности и с широким динамическим диапазоном.

Изобретение относится к формирователям сигналов изображения. Техническим результатом является уменьшение эффективной емкости затвора усиливающего транзистора без изменения площади затвора для значительного уменьшения общей паразитной емкости.

Изобретение относится к средствам формирования спектрозональных электронных изображений. Техническим результатом является обеспечение оперативного изменения ширины спектра спектрозональных видеокадров.

Изобретение относится к твердотельным устройствам формирования изображения. Техническим результатом является повышение чувствительности твердотельного устройства формирования изображения.

Изобретение относится к изобретение относится к устройствам формирования изображения. Техническим результатом является исключение обработки аналоговых сигналов, чтобы устранить шум в схеме, возникающий в AD преобразователе и при обработке аналоговых сигналов, без уменьшения числа диафрагмы пикселей.

Изобретение относится к устройству формирования изображений. Техническим результатом является повышение точности аналого-цифрового преобразования наряду с устранением увеличения масштаба схемы.

Изобретение относится к устройствам формирования изображения. Техническим результатом является предоставление твердотельного устройства формирования изображения и способа управления твердотельным устройством формирования изображения, которые могут реализовать обработку переполнения при сдерживании увеличения размеров схемы.

Изобретение относится к устройству захвата изображения и системе захвата изображения. Техническим результатом является обеспечить устройство захвата изображения, систему захвата изображения и способ управления устройством захвата изображения, которые препятствуют выполнению недопустимой операции, даже когда используется метод совместного использования пикселей.

Изобретение относится к твердотельному датчику изображения. Техническим результатом является увеличение коэффициента усиления без увеличения площади кристалла и изменения производительности.

Изобретение относится к устройствам формирования изображений. Техническим результатом является формирование цифровых данных пикселного сигнала высокого разрешения с высокой скоростью считывания без увеличения площади схемы и потребления мощности.

Изобретение относится к устройству формирования цветного изображения, которое подавляет формирование цветного муара (цветовых комбинационных искажений). Техническим результатом является подавление формирования ложного цвета высокочастотного сегмента посредством простой обработки изображения. Указанный технический результат достигается тем, что используется одноплатный элемент формирования цветного изображения, включающий: цветовые фильтры, имеющие матрицу цветовых фильтров, где цветовые фильтры всех цветов RGB периодически размещены на каждой линии в горизонтальном и вертикальном направлениях; фильтры взвешенного среднего, включающие в себя коэффициенты фильтра с равными пропорциями сумм коэффициентов фильтра каждого цвета на линиях в горизонтальном и вертикальном направлениях, используются для расчета средневзвешенных значений каждого цвета значений пикселей у пикселей в мозаичном изображении, выдаваемом из элемента формирования цветного изображения. При расчете значения пикселя иного цвета в положении пикселя целевого пикселя обработки устранения мозаичности в центральном сегменте фильтров взвешенного среднего значение пикселя целевого пикселя интерполируется на основании цветового отношения или цветового контраста рассчитанных средневзвешенных значений для оценки значения пикселя иного цвета. 12 з.п. ф-лы, 12 ил.

Изобретение относится к устройству формирования цветного изображения, которое подавляет генерацию цветовых комбинационных искажений (цветного муара). Техническим результатом является подавление генерации ложного цвета высокочастотной секции путем простой обработки изображения. Предложен элемент формирования цветного изображения с матрицей цветовых фильтров, включающей в себя периодически размещенные фильтры RGB, соответствующий цветам RGB и включающие в себя секции, где используются два или более фильтров G, которые вносят наибольший вклад в получение сигналов яркости, соседствуют друг с другом в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях (в четырех направлениях). На основании пиксельных значений пикселей G, соседствующих друг с другом в направлениях, какое из четырех направлений является направлением корреляции яркости, определяется с минимальными пиксельными интервалами. Пиксельное значение пикселя другого цвета в определенном направлении корреляции используется для вычисления пиксельного значения другого цвета в пиксельной позиции целевого пикселя обработки демозаицирования, выделенного из мозаичного изображения. Таким образом, пиксельное значение пикселя другого цвета точно оценивается. 4 н. и 8 з.п. ф-лы, 15 ил.

Изобретение относится к области цветного телевидения с высокой разрешающей способностью. Техническим результатом является улучшение качества восстановления отсутствующих значений пикселей сигналов цветовых составляющих, увеличение четкости изображений, уменьшение искажений и сохранение цветности. Предложено в способе формирования сигналов изображения, помимо внутрикадровой интерполяции (экстраполяции), использовать интерполяцию (экстраполяцию) по направлению распределения цветовых составляющих, при которой вычисление значений уровней отсутствующих пикселей цветовых составляющих каждого отдельного элемента сигнала изображения с фиксированными координатами осуществляется на основе использования значения уровней других цветовых составляющих указанного пикселя. Полученные с помощью интерполяции недостающие дискретные значения одних и тех же по координатам цветовых составляющих подвергают суммированию для получения результирующего значения пикселя цветовой составляющей, предварительно произведя умножение этих значений на весовые коэффициенты. Для увеличения точности восстановления недостающих значений цветовых составляющих интерполяция как по пространственному, так и по межцветовому направлениям осуществляется с вычислением значений промежуточных пикселей, для получения которых используются значения исходных, соседних с восстанавливаемым, пикселей. Также производится вычисление межпиксельных разностей, показывающих вклад каждого из значений промежуточных пикселей в итоговое значение восстанавливаемого пикселя. 2 н. и 4 з.п. ф-лы, 14 ил.

Изобретение относится к устройствам захвата изображений. Техническим результатом является предоставление элемента захвата изображения и устройства захвата изображения, которые уменьшают время переноса данных и устраняют потерю качества изображения. Результат достигается тем, что элемент захвата изображения генерирует значение оценки автоматической фокусировки, подлежащее использованию для захвата изображения в соответствии с сигналом изображения, соответствующим сигналу напряжения, полученному от первой группы пикселей среди множества пикселей. Элемент захвата изображения дополнительно выводит сигнал изображения, соответствующий сигналу напряжения, полученному от второй группы пикселей среди множества пикселей, в качестве сигнала отображения для визирования по экрану для отображения изображения. В соответствии со значением оценки автоматической фокусировки блок управления управляет механическо-оптическим блоком, имеющим фокусирующую линзу, и выполняет отображение для визирования по экрану на блоке отображения изображения в соответствии с сигналом отображения для визирования по экрану. 5 н. и 11 з.п. ф-лы, 22 ил.

Изобретение относится к телевидению и может быть использовано для пространственно-временной обработки изображений. Техническим результатом изобретения является обеспечение адаптации к уровню освещенности без каких-либо ограничений на значения отсчетов импульсной характеристики при выделении неподвижных и движущихся слабоконтрастных объектов на нестационарном фоне при пространственно-временной обработке изображений. Способ пространственно-временной обработки изображений на основе матриц ФПЗС заключается в пространственно-временной обработке изображения в виде свертки изображения, проецируемого на матрицу фоточувствительных приборов с зарядовой связью (ФПЗС), с импульсной характеристикой реализуемого пространственно-временного фильтра (ПВФ). Пространственно-временная свертка изображения осуществляется на двух матрицах фоточувствительных приборов с зарядовой связью. На одной из матриц производится свертка изображения с положительными отсчетами импульсной характеристики, а на второй - с отрицательными. Формируется разность сигналов с выходов фоточувствительных приборов с зарядовой связью как общего выходного.
Наверх