Элемент формирования цветного изображения

Элемент формирования цветного изображения

Иллюстрации

Показать все

Реферат

Область техники

Настоящее изобретение относится к элементу формирования цветного изображения и, в частности, к элементу формирования цветного изображения, который может подавлять генерацию цветного муара (цветовых комбинационных искажений) и повышать разрешение.

Уровень техники

Выходное изображение одноплатного элемента формирования цветного изображения является RAW-изображением (мозаичным изображением). Таким образом, в процессе интерполяции (обработки демозаицирования) пикселя пропущенного цвета из окружающего пикселя получается многоканальное изображение. В этом случае, существует проблема в характеристике воспроизведения высокочастотного сигнала формирования изображения. По сравнению с элементом формирования черно-белого изображения, в изображении, полученном с помощью элемента формирования цветного изображения, часто возникает ступенчатость, и важно расширить полосу воспроизведения для повышения разрешения при одновременном подавлении генерации цветного муара (ложного цвета).

Матрица Байера основных цветов, наиболее широко используемая в качестве цветовой матрицы в одноплатном элементе формирования цветного изображения, включает в себя пиксели зеленого цвета (G), размещенные в шахматном порядке, и пиксели красного (R) и синего (B) цветов, размещенные линия за линией. Таким образом, сигналы G сталкиваются с проблемой точности воспроизведения при генерации высокочастотных сигналов в наклонных направлениях, и сигналы R и B сталкиваются с проблемой точности воспроизведения при генерации высокочастотных сигналов в горизонтальном и вертикальном направлениях.

Черно-белый шаблон вертикальных полосок (высокочастотное изображение), показанный на фиг. 13(A), поступает в элемент формирования изображения в матрице Байера, показанный на фиг. 13(B), и шаблон сортируется по цветным матрицам Байера для сравнения цветов. Как показано на фиг. 13(C)-13(E), R формирует светлое и плоское цветное изображение, B формирует темное и плоское цветное изображение, и G формирует светлое и темное мозаичное цветное изображение. Несмотря на отсутствие разности плотностей (разности уровней) между RGB по отношению к исходному черно-белому изображению, изображение окрашивается в зависимости от цветовой матрицы и входной частоты.

Аналогично, черно-белое наклонное высокочастотное изображение, показанное на фиг. 14(A), поступает на элемент формирования изображения в матрице Байера, показанной на фиг. 14(B), и изображение сортируется по цветовым матрицам Байера для сравнения цветов. Согласно фиг. 14(C)-14(E), R и B формируют светлые и плоские цветные изображения, а G формируют темное и плоское цветное изображение. Предполагая, что значение черного равно 0, и значение белого равно 255, черно-белое наклонное высокочастотное изображение превращается в зеленое, поскольку только G равен 255. Таким образом, наклонное высокочастотное изображение не может верно воспроизводиться в матрице Байера.

В устройстве формирования изображения, использующем одноплатный элемент формирования цветного изображения, оптический фильтр низких частот, образованный анизотропным веществом, например, кристаллом, в общем случае размещается на передней стороне элемента формирования цветного изображения во избежание оптического ослабления высокочастотной волны. Однако, хотя окрашивание, обусловленное складыванием высокочастотного сигнала, можно уменьшать согласно способу, существует проблема соответственного снижения разрешения.

Для решения проблемы предложен элемент формирования цветного изображения, в котором матрица цветовых фильтров элемента формирования цветного изображения является трехцветной случайной матрицей, удовлетворяющей ограничениям, налагаемым на матрицу, в которой произвольный целевой пиксель соседствует с тремя цветами, включающими в себя цвет целевого пикселя на четырех сторонах целевого пикселя (PTL 1).

Также предложен датчик изображения в виде матрицы цветовых фильтров, причем датчик изображения включает в себя множество фильтров, которые отличаются спектральной чувствительностью, и первые и вторые фильтры из множества фильтров попеременно размещены с первым заранее определенным периодом в одном из диагональных направлений пиксельной сетки датчика изображения и попеременно размещены со вторым заранее определенным периодом в другом диагональном направлении (PTL 2).

Также предложена цветовая матрица, в которой в твердотельном элементе формирования цветного изображения трех основных цветов RGB, наборы из трех пикселей, включающие в себя горизонтально размещенные R, G и B, размещены зигзагообразно в вертикальном направлении для выравнивания частот появления RGB, и чтобы произвольные линии (горизонтальные, вертикальные и наклонные линии) в плоскости формирования изображения проходили через все цвета (PTL 3).

Кроме того, предложен элемент формирования цветного изображения, в котором R и B из трех основных цветов RGB размещены через каждые три пикселя в горизонтальном и вертикальном направлениях, и G размещен между R и B (PTL 4).

Библиография

Патентные источники

PTL 1

выложенная японская патентная заявка № 2000-308080

PTL 2

выложенная японская патентная заявка № 2005-136766

PTL 3

выложенная японская патентная заявка № 11-285012

PTL 4

выложенная японская патентная заявка № 8-23543

Сущность изобретения

Техническая задача

В элементе формирования цветного изображения, описанном в PTL 1, матрицы фильтров являются случайными, и каждый случайный шаблон нуждается в оптимизации при обработке демозаицирования (интерполяции) на более поздней стадии. Проблема состоит в трудоемкости обработки демозаицирования. Хотя случайные матрицы эффективны в отношении цветного муара в низкочастотной волне, случайные матрицы не эффективны в отношении ложного цвета на высокочастотном участке.

В датчике изображения, описанном в PTL 2, пиксели G (пиксели яркости) размещены в шахматном порядке. Таким образом, проблема состоит в том, что точность воспроизведения пикселей в области ограниченного разрешения (в частности, в наклонных направлениях) невысока.

Твердотельный элемент формирования цветного изображения, описанный в PTL 3, включает в себя фильтры всех цветов на произвольных линиях и имеет преимущество в возможности подавления генерации ложного цвета. Однако пропорции количеств пикселей RGB равны, и проблема состоит в том, что высокочастотная воспроизводимость ниже, чем в матрице Байера. В матрице Байера, пропорция количества пикселей G, которые вносят наибольший вклад в получение сигналов яркости, вдвое больше пропорций количеств пикселей R и B.

Между тем, в элементе формирования цветного изображения, описанном в PTL 4, пропорция количества пикселей G по отношению к количествам пикселей R и B больше, чем в матрице Байера, и существуют линии, содержащие только пиксели G в горизонтальном или вертикальном направлении. Таким образом, элемент формирования цветного изображения не эффективен в отношении ложного цвета на высокочастотном участке в горизонтальном или вертикальном направлении.

Настоящее изобретение призвано решить вышеописанные проблемы, и задачей настоящего изобретения является обеспечение элемента формирования цветного изображения, который может подавлять генерацию ложного цвета и повышать разрешение, и который позволяет упростить процесс на более поздней стадии по сравнению с традиционной случайной матрицей.

Решение задачи

Для решения задачи, изобретение согласно аспекту настоящего изобретения предусматривает одноплатный элемент формирования цветного изображения, включающий в себя цветовые фильтры в заранее определенной матрице цветовых фильтров, размещенной на множестве пикселей, образованных элементами фотоэлектрического преобразования, размещенные в горизонтальном и вертикальном направлениях, причем матрица цветовых фильтров включает в себя заранее определенный базовый шаблон матрицы, включающий в себя первые фильтры, соответствующие первому цвету, которые вносят наибольший вклад в получение сигналов яркости, и вторые фильтры, соответствующие двум или более вторым цветам, отличным от первого цвета, причем базовый шаблон матрицы повторяющимся образом размещен в горизонтальном и вертикальном направлениях, один или более первых фильтров размещены в каждой линии в горизонтальном, вертикальном и наклонном (С-В, С-З) направлениях матрицы цветовых фильтров, один или более вторых фильтров размещены в каждой линии в горизонтальном и вертикальном направлениях матрицы цветовых фильтров в базовом шаблоне матрицы, и пропорция количества пикселей первого цвета, соответствующего первым фильтрам, больше пропорций количеств пикселей каждого цвета из вторых цветов, соответствующих вторым фильтрам.

Согласно элементу формирования цветного изображения аспекта настоящего изобретения, первые фильтры, соответствующие первому цвету, который вносит наибольший вклад в получение сигналов яркости, размещены в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях матрицы цветовых фильтров. Таким образом, можно повысить точность воспроизведения обработки демозаицирования в высокочастотной области. Один или более вторых фильтров, соответствующих двум или более вторым цветам, отличным от первого цвета, размещены в каждой линии в горизонтальном и вертикальном направлениях матрицы цветовых фильтров. Таким образом, можно подавлять генерацию цветного муара (ложного цвета) и можно повышать разрешение.

В матрице цветовых фильтров, заранее определенный базовый шаблон матрицы повторяющимся образом размещен в горизонтальном и вертикальном направлениях. Таким образом, обработку демозаицирования (интерполяции) на более поздней стадии можно выполнять согласно повторяющемуся шаблону, и обработку на более поздней стадии можно упростить по сравнению с традиционной случайной матрицей.

Пропорция количества пикселей первого цвета, соответствующего первым фильтрам, и пропорции количеств пикселей каждого цвета из вторых цветов, соответствующих вторым фильтрам, различаются. В частности, пропорция количества пикселей первого цвета, который вносит наибольший вклад в получение сигналов яркости, больше пропорций количеств пикселей каждого цвета из вторых цветов, соответствующих вторым фильтрам. Таким образом, можно подавлять ступенчатость и обеспечивать хорошую высокочастотную воспроизводимость.

В элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, матрица цветовых фильтров включает в себя участок, где первые фильтры продолжаются для двух или более пикселей в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях.

В результате, направление малого изменения яркости (направление с высокой корреляцией) из горизонтального, вертикального и наклонных (С-В, С-З) направлений можно определить с минимальными пиксельными интервалами.

В элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, матрица цветовых фильтров включает в себя квадратную матрицу, соответствующую 2×2 пикселям, образованным первыми фильтрами. Пиксельные значения 2×2 пикселя можно использовать для определения направления с высокой корреляцией из горизонтального, вертикального и наклонных (С-В, С-З) направлений.

Предпочтительно, в элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, матрица цветовых фильтров в заранее определенном базовом шаблоне матрицы центрально симметрична относительно центра базового шаблона матрицы. В результате, можно уменьшить размер схемы для схемы обработки на более поздней стадии.

Предпочтительно, в элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, заранее определенный базовый шаблон матрицы является шаблоном квадратной матрицы, соответствующим N×N (N - целое число, большее или равное 4 и меньшее или равное 8) пикселей. Когда N меньше 4, условия матрицы цветовых фильтров согласно настоящему изобретению не выполняются. Когда N больше 8, обработка сигнала, например демозаицирование, усложняется, тогда как конкретных положительных результатов не удается добиться за счет увеличения размера базового шаблона матрицы.

Предпочтительно, в элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, заранее определенный базовый шаблон матрицы является шаблоном квадратной матрицы, соответствующим 6×6 пикселям.

Как описано, предпочтительно, чтобы заранее определенный базовый шаблон матрицы является шаблоном квадратной матрицы, соответствующим N×N пикселям, причем N - целое число, большее или равное 4 и меньшее или равное 8. Четное значение N более преимущественно при обработке демозаицирования, чем нечетное. Когда N равно 4, базовый шаблон матрицы не включает в себя участок, где первые фильтры продолжаются для двух или более пикселей в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях, что неблагоприятно для определения направления малого изменения яркости. Когда N равно 8, обработка сигнала является более трудоемкой по сравнению со случаем N, равного 6. Таким образом, наиболее предпочтительно, чтобы N было равно 6 в базовом шаблоне матрицы, т.е. чтобы шаблон квадратной матрицы соответствовал 6×6 пикселям.

Предпочтительно, в элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, матрица цветовых фильтров включает в себя первые фильтры в центре и четырех углах группы 3×3 пикселя, и группа 3×3 пикселя повторяющимся образом размещена в горизонтальном и вертикальном направлениях. Первые фильтры размещены в четырех углах группы 3×3 пикселей. Таким образом, если группа 3×3 пикселей повторяющимся образом размещена в горизонтальном и вертикальном направлениях, матрица цветовых фильтров включает в себя квадратную матрицу, соответствующую 2×2 пикселям первых фильтров. Пиксельные значения 2×2 пикселя можно использовать для определения направления с высокой корреляцией из горизонтального, вертикального и наклонных (С-В, С-З) направлений, и первые фильтры размещены в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях матрицы цветовых фильтров.

В элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, вторые фильтры могут размещаться в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях матрицы цветовых фильтров. В результате, можно улучшить воспроизводимость цветов в наклонных направлениях.

В элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, первым цветом является зеленый (G), и вторыми цветами являются красный (R) и синий (B).

Предпочтительно, в элементе формирования цветного изображения согласно другому аспекту настоящего изобретения, заранее определенный базовый шаблон матрицы является шаблоном квадратной матрицы, соответствующим 6×6 пикселям, и матрица цветовых фильтров включает в себя: первую матрицу, соответствующую 3×3 пикселям, причем первая матрица включает в себя фильтры G, размещенные в центре и четырех углах, фильтры B, вертикально размещенные по обе стороны фильтра G в центре, и фильтры R, горизонтально размещенные по обе стороны фильтра G в центре; и вторую матрицу, соответствующую 3×3 пикселям, причем вторая матрица включает в себя фильтры G, размещенные в центре и четырех углах, фильтры R, вертикально размещенные по обе стороны фильтра G в центре, и фильтры B, горизонтально размещенные по обе стороны фильтра G в центре, причем первые и вторые матрицы попеременно размещены в горизонтальном и вертикальном направлениях.

Базовый шаблон матрицы включает в себя фильтры G в квадратной матрице, соответствующей 2×2 пикселям, и базовый шаблон матрицы имеет минимальный размер, центрально симметричный относительно центра базового шаблона матрицы. Согласно матрице цветовых фильтров с конфигурацией, существует 2×2 пикселей G в четырех углах 5×5 пикселей при выделении 5×5 пикселей (локальной области мозаичного изображения) вокруг первой или второй матрицы. Пиксельные значения 2×2 пикселей G можно использовать для определения направления корреляции четырех направлений.

Положительные результаты изобретения

Согласно настоящему изобретению, первые фильтры, соответствующие первому цвету, который вносит наибольший вклад в получение сигналов яркости, размещены в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях матрицы цветовых фильтров, и пропорция количества пикселей первого цвета, соответствующего первым фильтрам больше пропорций количеств пикселей каждого цвета из вторых цветов, соответствующих вторым фильтрам двух или более цветов, отличных от первого цвета. Таким образом, можно повысить точность воспроизведения обработки демозаицирования в высокочастотной области и можно подавлять ступенчатость.

Один или более вторых фильтров, соответствующих двум или более вторым цветам, отличным от первого цвета, размещены в каждой линии в горизонтальном и вертикальном направлениях матрицы цветовых фильтров в базовом шаблоне матрицы. Таким образом, можно подавлять генерацию цветного муара (ложного цвета) для повышения разрешения.

В матрице цветовых фильтров согласно настоящему изобретению, заранее определенный базовый шаблон матрицы повторяется в горизонтальном и вертикальном направлениях. Таким образом, обработку демозаицирования (интерполяции) на более поздней стадии можно выполнять согласно повторяющемуся шаблону, и обработку на более поздней стадии можно упростить по сравнению с традиционной случайной матрицей.

Краткое описание чертежей

Фиг. 1 - схема, демонстрирующая первый вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению.

Фиг. 2 - схема, демонстрирующая базовый шаблон матрицы, включенный в матрицу цветовых фильтров элемента формирования цветного изображения согласно первому варианту осуществления.

Фиг. 3 - схема, демонстрирующая состояние, в котором базовый шаблон матрицы 6×6 пикселей, включенный в матрицу цветовых фильтров элемента формирования цветного изображения первого варианта осуществления, делится на матрицы A и матрицы B 3×3 пикселя, и размещение матриц A и матриц B.

Фиг. 4 - схема, используемая для объяснения способа определения направления корреляции из пиксельных значений пикселей G 2×2 пикселя, включенных в матрицу цветовых фильтров элемента формирования цветного изображения первого варианта осуществления.

Фиг. 5 - схема, используемая для объяснения понятия базового шаблона матрицы, включенного в матрицу цветовых фильтров элемента формирования цветного изображения.

Фиг. 6 - схема, демонстрирующая второй вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению.

Фиг. 7 - схема, демонстрирующая третий вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению.

Фиг. 8 - схема, демонстрирующая четвертый вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению.

Фиг. 9 - схема, демонстрирующая пятый вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению.

Фиг. 10 - схема, демонстрирующая шестой вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению.

Фиг. 11 - схема, демонстрирующая седьмой вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению.

Фиг. 12 - схема, демонстрирующая восьмой вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению.

Фиг. 13 - схема, используемая для объяснения проблемы традиционного элемента формирования цветного изображения с цветовыми фильтрами в матрице Байера.

Фиг. 14 - другая схема, используемая для объяснения проблемы традиционного элемента формирования цветного изображения с цветовыми фильтрами в матрице Байера.

Описание вариантов осуществления

Далее, предпочтительные варианты осуществления настоящего изобретения будут подробно описаны со ссылкой на прилагаемые чертежи.

Первый вариант осуществления элемента формирования цветного изображения

На фиг. 1 показана схема, демонстрирующая первый вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению. Фиг. 1, в частности, демонстрирует матрицу цветовых фильтров из цветовых фильтров, размещенных на элементе формирования цветного изображения.

Элемент формирования цветного изображения включает в себя: множество пикселей (не показано), включающих в себя элементы фотоэлектрического преобразования, размещенные в горизонтальном и вертикальном направлениях (двухмерную матрицу); и цветовые фильтры в матрице цветовых фильтров, показанной на фиг. 1, размещенные на светоприемных поверхностях пикселей. Один из цветовых фильтров трех основных цветов, красного (R), зеленого (G) и синего (B) размещен на каждом пикселе.

Элемент формирования цветного изображения не ограничивается элементом формирования цветного изображения типа ПЗС (прибором с зарядовой связью) и может относиться к другому типу элемента формирования изображения, например, являться элементом формирования изображения на основе КМОП (комплементарных транзисторов типа металл-окисел-полупроводник).

Признаки матрицы цветовых фильтров

Матрица цветовых фильтров элемента формирования цветного изображения первого варианта осуществления имеет следующие признаки (1), (2), (3), (4) и (5).

Признак (1)

матрица цветовых фильтров, показанная на фиг. 1, включает в себя базовый шаблон P матрицы (шаблон, указанный толстой рамкой), сформированный шаблоном квадратной матрицы, соответствующей 6×6 пикселям, и базовый шаблон P матрицы повторяющимся образом размещен в горизонтальном и вертикальном направлениях. Таким образом, матрица цветовых фильтров включает в себя фильтры каждого цвета R, G и B (фильтры R, фильтры G и фильтры B), размещенные с заранее определенным периодом.

Таким образом, фильтры R, фильтры G и фильтры B размещены с заранее определенным периодом. Таким образом, обработка демозаицирования (интерполяции) и пр. сигналов R, G и B, считываемых из элемента формирования цветного изображения, может осуществляться согласно повторяющемуся шаблону.

При выполнении процесса прореживания на основании базового шаблона P матрицы для уменьшения изображения, матрица цветовых фильтров уменьшенного изображения после процесса прореживания может быть идентична матрице цветовых фильтров до процесса прореживания. Таким образом, можно использовать общую схему обработки.

Признак (2)

В матрице цветовых фильтров, показанной на фиг. 1, фильтры G, соответствующие цвету (цвету G согласно варианту осуществления), который вносит наибольший вклад в получение сигналов яркости, размещены в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях матрицы цветовых фильтров.

Фильтры G, соответствующие пикселям яркости, размещены в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях матрицы цветовых фильтров. Таким образом, точность воспроизведения обработки демозаицирования в высокочастотной области может повышаться вне зависимости от направления высокочастотной волны.

Признак (3)

В базовом шаблоне матрицы для матрицы цветовых фильтров, показанной на фиг. 1, количества пикселей для пикселей R, пикселей G и пикселей B, соответствующих фильтрам R, G и B в базовом шаблоне матрицы, составляют восемь пикселей, двадцать пикселей и восемь пикселей, соответственно. Таким образом, отношение количеств пикселей для пикселей RGB составляет 2:5:2, и пропорция количества пикселей G, которые вносят наибольший вклад в получение сигналов яркости, больше пропорций количеств каждого из пикселей R и B других цветов.

Пропорция количества пикселей G и пропорции количеств каждого из пикселей R или B различны, и, в частности, пропорция количества пикселей G, которые вносят наибольший вклад в получение сигналов яркости, больше пропорций количеств каждого из пикселей R или B. Таким образом, можно подавлять ступенчатость при обработке демозаицирования, и можно повышать высокочастотную воспроизводимость.

Признак (4)

В матрице цветовых фильтров, показанной на фиг. 1, один или более фильтров R и B, соответствующих двум или более цветам, отличным от цвета G (цветам R и B согласно варианту осуществления) размещены в каждой линии в горизонтальном и вертикальном направлениях матрицы цветовых фильтров в базовом шаблоне P матрицы.

Фильтры R и B размещены в каждой линии в горизонтальном и вертикальном направлениях матрицы цветовых фильтров. Таким образом, можно подавлять генерацию цветного муара (ложного цвета). В результате, можно не размещать оптический фильтр низких частот для подавления генерации ложного цвета на оптическом пути от плоскости падения до плоскости формирования изображения оптической системы. Даже в случае применения оптического фильтра низких частот, можно применять фильтр с меньшим эффектом срезания высокочастотных составляющих для предотвращения генерации ложного цвета, и можно предотвращать потерю разрешения.

На Фиг. 2 показано состояние, в котором базовый шаблон P матрицы, показанный на фиг. 1, делится на четыре набора 3×3 пикселя.

Как показано на фиг. 2, базовый шаблон P матрицы можно рассматривать как шаблон, включающий в себя матрицы A 3×3 пикселя, окруженные рамкой сплошных линий, и матрицы B 3×3 пикселя, окруженные рамкой пунктирных линий, попеременно размещенные в горизонтальном и вертикальном направлениях.

Каждая из матриц A и B включает в себя фильтры G в качестве пикселей яркости, размещенных в четырех углах и в центре, и фильтры G размещены на обеих диагоналях. В матрице A фильтры R размещены в горизонтальном направлении, и фильтры B размещены в вертикальном направлении, по обе стороны фильтра G в центре. Между тем, в матрице B, фильтры B размещены в горизонтальном направлении, и фильтры R размещены в вертикальном направлении, по обе стороны фильтра G в центре. Таким образом, хотя позиционное соотношение между фильтрами R и B противоположно в матрицах A и B, в остальном, компоновка одинакова.

Матрицы A и B попеременно размещены в горизонтальном и вертикальном направлениях, как показано на фиг. 3, и фильтры G в четырех углах матриц A и B образуют фильтры G квадратных матриц, соответствующих 2×2 пикселям.

Фильтры G в качестве пикселей яркости размещены в четырех углах и в центре группы 3×3 пикселя в матрицах A и B, и 3×3 пикселя попеременно размещены в горизонтальном и вертикальном направлениях с образованием фильтров G в квадратных матрицах, соответствующих 2×2 пикселям. Матрицы удовлетворяют признакам (1), (2) и (3), а также признаку (5), описанному ниже.

Признак (5)

Матрица цветовых фильтров, показанная на фиг. 1, включает в себя квадратные матрицы, соответствующие 2×2 пикселям фильтров G.

Как показано на фиг. 4, 2×2 пикселя фильтров G выделяются для вычисления абсолютных значений разности пиксельных значений пикселей G в горизонтальном направлении, абсолютных значений разности пиксельных значений пикселей G в вертикальном направлении и абсолютных значений разности пиксельных значений пикселей G в наклонных направлениях (направлениях наклона вверх направо и наклона вверх налево). Таким образом, можно определить наличие корреляции в направлении с малым абсолютным значением разности из горизонтального, вертикального и наклонного направлений.

Таким образом, согласно матрице цветовых фильтров, информацию пикселей G с минимальными пиксельными интервалами можно использовать для определения направления с высокой корреляцией из горизонтального, вертикального и наклонного направлений. Результат определения направления можно использовать для процесса интерполяции (обработки демозаицирования) на основании окружающих пикселей.

Когда пиксели матрицы A или B 3×3 пикселя являются целевыми пикселями обработки демозаицирования, как показано на фиг. 3, и 5×5 пикселей (локальной области мозаичного изображения) выделяются вокруг матрицы A или B, существуют пиксели G 2×2 пикселя в четырех углах 5×5 пикселей. Пиксельные значения пикселей G 2×2 пикселя можно использовать для точного определения направления корреляции четырех направлений с использованием информации пикселей G с минимальными пиксельными интервалами.

Признак (6)

Базовый шаблон матрицы для матрицы цветовых фильтров, показанный на фиг. 1, центрально симметричен относительно центра базового шаблона матрицы (центр четырех пикселей G). Как показано на фиг. 2, матрицы A и B в базовом шаблоне матрицы также центрально симметричны относительно фильтра G в центре.

Симметрия позволяет уменьшить размер схемы и упростить схему обработки на более поздней стадии.

В базовом шаблоне P матрицы, обозначенные жирной рамкой, как показано на фиг. 5, матрицы цветовых фильтров первой и третьей линий из линий с первой по шестую в горизонтальном направлении включают в себя GBGGRG, матрица цветовых фильтров второй линии включает в себя RGRBGB, матрицы цветовых фильтров четвертой и шестой линий включают в себя GRGGBG и матрица цветовых фильтров пятой линии включает в себя BGBRGR.

На фиг. 5, предполагая, что базовый шаблон матрицы, полученный сдвигом базового шаблона P матрицы на один пиксель в горизонтальном и вертикальном направлениях, равен P′, и базовый шаблон матрицы, полученный сдвигом базового шаблона P матрицы на два пикселя в горизонтальном и вертикальном направлениях, равен P″, матрица цветовых фильтров остается неизменной, даже если базовые шаблоны матрицы P′ и P″ повторяющимся образом размещены в горизонтальном и вертикальном направлениях.

Таким образом, существует множество базовых шаблонов матрицы, которые могут формировать матрицу цветовых фильтров, показанную на фиг. 5, за счет повторного размещения базового шаблона матрицы в горизонтальном и вертикальном направлениях. В первом варианте осуществления, базовый шаблон P матрицы, в котором базовый шаблон матрицы центрально симметричен, называется для удобства базовым шаблоном матрицы.

Хотя в других вариантах осуществления, описанных ниже, также существует множество базовых шаблонов матрицы для каждой из матриц цветовых фильтров, иллюстративный будем именовать базовым шаблоном матрицы для матрицы цветовых фильтров.

Второй вариант осуществления элемента формирования цветного изображения

На фиг. 6 показана схема, демонстрирующая второй вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению. Фиг. 6, в частности, демонстрирует матрицу цветовых фильтров из цветовых фильтров, размещенных на элементе формирования цветного изображения.

Матрица цветовых фильтров элемента формирования цветного изображения второго варианта осуществления включает в себя базовый шаблон матрицы (шаблон, указанный толстой рамкой), сформированный шаблоном квадратной матрицы, соответствующей 4×4 пикселям. Базовый шаблон матрицы повторяющимся образом размещен в горизонтальном и вертикальном направлениях.

Как и в первом варианте осуществления, матрица цветовых фильтров включает в себя фильтры G, размещенные в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях матрицы цветовых фильтров, и включает в себя фильтры R и B, размещенные в каждой линии в горизонтальном и вертикальном направлениях матрицы цветовых фильтров.

Базовый шаблон матрицы центрально симметричен относительно центра базового шаблона матрицы.

Между тем, матрица цветовых фильтров не включает в себя квадратную матрицу, соответствующую 2×2 пикселям фильтров G. Однако матрица цветовых фильтров включает в себя фильтры G, соседствующие друг с другом в горизонтальном направлении, и фильтры G, соседствующие друг с другом в наклонных направлениях (направлениях наклона вверх направо и наклона вверх налево).

В вертикальном направлении существуют фильтры G поперек фильтра R или B. Таким образом, пиксельные значения пикселей G, соответствующих фильтрам G, можно использовать для определения корреляции в вертикальном направлении.

В базовом шаблоне матрицы для матрицы цветовых фильтров, показанной на фиг. 6, количества пикселей для пикселей R, пикселей G и пикселей B, соответствующих фильтрам R, G и B в базовом шаблоне матрицы, составляют четыре пикселя, восемь пикселей и четыре пикселя, соответственно. Таким образом, отношение количеств пикселей RGB составляет 1:2:1, и пропорция количества пикселей G, которые вносят наибольший вклад в получение сигналов яркости, больше пропорций количеств каждого из пикселей R и B других цветов.

Как описано, матрица цветовых фильтров элемента формирования цветного изображения второго варианта осуществления имеет такие же признаки, что и признаки (1), (2), (3), (4) и (6) матрицы цветовых фильтров элемента формирования цветного изображения первого варианта осуществления.

Третий вариант осуществления элемента формирования цветного изображения

На фиг. 7 показана схема, демонстрирующая третий вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению. Фиг. 7, в частности, демонстрирует матрицу цветовых фильтров из цветовых фильтров, размещенных на элементе формирования цветного изображения.

Матрица цветовых фильтров элемента формирования цветного изображения третьего варианта осуществления включает в себя базовый шаблон матрицы (шаблон, указанный толстой рамкой), сформированный шаблоном квадратной матрицы, соответствующей 5×5 пикселям, и базовый шаблон матрицы повторяющимся образом размещен в горизонтальном и вертикальном направлениях.

Как и в первом варианте осуществления, матрица цветовых фильтров включает в себя фильтры G, размещенные в каждой линии в горизонтальном, вертикальном и наклонных (С-В, С-З) направлениях матрицы цветовых фильтров, и включает в себя фильтры R и фильтры B, размещенные в каждой линии в горизонтальном и вертикальном направлениях матрицы цветовых фильтров.

В базовом шаблоне матрицы для матрицы цветовых фильтров, показанном на фиг. 7, количества пикселей для пикселей R, пикселей G и пикселей B, соответствующих фильтрам R, G и B в базовом шаблоне матрицы, составляют семь пикселей, одиннадцать пикселей и семь пикселей, соответственно. Таким образом, отношение количеств пикселей RGB составляет 7:11:7, и пропорция количества пикселей G, которые вносят наибольший вклад в получение сигналов яркости, больше пропорций количеств каждого из пикселей R и B других цветов.

Базовый шаблон матрицы не является центрально симметричным, и базовый шаблон матрицы не включает в себя квадратную матрицу, соответствующую 2×2 пикселям, формированным фильтрами G.

Матрица цветовых фильтров элемента формирования цветного изображения третьего варианта осуществления имеет такие же признаки, что и признаки (1), (2), (3) и (4) матрицы цветовых фильтров элемента формирования цветного изображения первого варианта осуществления.

Четвертый вариант осуществления элемента формирования цветного изображения

На фиг. 8 показана схема, демонстрирующая четвертый вариант осуществления одноплатного элемента формирования цветного изображения согласно настоящему изобретению. Фиг. 8, в частности, демонстрирует матрицу цветовых фильтров из цветовых фильтров, размещенных на элементе формирования цветного изображения.

Как и в третьем варианте осуществления, матрица цветовых фильтров элемента формирования цветного изображения четвертого варианта осуществления включает в себя базовый шаблон матрицы (шаблон, указанный толстой рамкой), сформированный шаблоном квадратной матрицы, соответствующей 5×5 пикселям, и базовый шаблон матрицы повторяющимся образом размещен в горизонтальном и вертикально