Устройство и способ формирования изображения и программа

Устройство и способ формирования изображения и программа

Иллюстрации

Показать все

Реферат

Область техники, к которой относится изобретение

Изобретение относится к устройству и способу формирования изображения и программе, и, в частности, оно относится к устройству и способу формирования изображения и программе, посредством которых можно более просто фиксировать композицию.

Уровень техники

Вообще говоря, в устройстве формирования изображения, таком как цифровая фотокамера или тому подобное, может быть две системы формирования изображения.

Например, было предложено устройство формирования изображения, имеющее направленную вперед фотокамеру, которая отображает то, что спереди от пользователя, и направленную назад фотокамеру, которая отображает то, что сзади пользователя (например, смотри патентную литературу 1).

Однако с вышеописанным устройством формирования изображения пользователь не может отображать один предмет одновременно в двух системах формирования изображения.

Кроме того, в обычной цифровой фотокамере в одной системе формирования изображения может быть выполнено переключение между стандартным режимом и широкоугольным режимом, но пользователь не может одновременно фиксировать композицию в каждом режиме.

Кроме того, была предложена фотокамера, которая имеет два модуля отображения, каждый из которых отображает изображение, которое было сформировано соответствующими системами формирования изображения. Однако, поскольку имеется два модуля отображения, пользователь должен определять композицию для каждого изображения.

Список упоминаемых документов

Патентная литература

PTL 1: публикация японской нерассмотренной патентной заявки номер 2007 - 60721

Сущность изобретения

Техническая задача

Как было сказано выше, осуществить простым способом фиксирование композиций двух изображений, имеющих различные диапазоны изображений, непросто.

Настоящее изобретение было сделано в свете вышесказанного и позволяет фиксировать композиции более простым способом.

Решение задачи

Устройство формирования изображения, соответствующее одному аспекту настоящего изобретения, включает в себя синтезирующее средство для того, чтобы синтезировать первое изображение, которое представляет собой изображенный объект, и второе изображение, имеющее диапазон изображения, отличный от первого изображения, таким образом, чтобы совмещать положения объекта; и средство отображения, предназначенное для того, чтобы отображать первое изображение и второе изображение, которые были синтезированы синтезирующим средством.

Устройство формирования изображения может дополнительно включать в себя средство формирования изображения, предназначенное для того, чтобы принимать свет из оптической системы и формировать первое изображение объекта; и извлекающее средство для того, чтобы извлекать из первого изображения второе изображение, которое является изображением, имеющим размер, отличный от первого изображения, и которое включает в себя объект, имеющий высокую степень фокусировки; при этом синтезирующее средство может синтезировать второе изображение, которое извлечено извлекающим средством, таким образом, чтобы положение объекта соответствовало первому изображению, и при этом средство отображения может отображать первое изображение соответствующего участка на заранее заданную область, имеющую тот же самый размер, что и второе изображение в области отображения, которая может отображать первое изображение полностью, и может отображать второе изображение, которое было синтезировано с первым изображением.

Средство отображения может усиливать и отображать второе изображение в области отображения.

Область отображения может представлять собой область, в которой первое изображение отображается полностью в случае, когда режим формирования изображения представляет собой стандартный режим, при котором формируется изображение, имеющее форматное соотношение, составляющее 4:3, и в которой заранее заданная область в области отображения представляет собой область, в которой отображается участок первого изображения в случае, когда режим формирования изображения представляет собой панорамный режим, при котором формируется изображение, имеющее форматное соотношение, составляющее 16:9.

Устройство формирования изображения может дополнительно включать в себя "обрезающее" средство для того, чтобы "обрезать" первое изображение заранее заданной области; и записывающее средство для того, чтобы записывать первое изображение, которое было "вырезано" "обрезающим" средством, и второе изображение, которое было извлечено извлекающим средством.

Синтезирующее средство может синтезировать первое изображение, которое было "вырезано" "обрезающим" средством, и второе изображение, которое было извлечено извлекающим средством, а записывающее средство может записывать первое изображение и второе изображение, которые были синтезированы синтезирующим средством.

Устройство формирования изображения может дополнительно включать в себя первое средство формирования изображения, предназначенное для того, чтобы принимать свет из первой оптической системы и формировать первое изображение объекта; второе средство формирования изображения, предназначенное для того, чтобы принимать свет из второй оптической системы и формировать второе изображение, которое имеет угол обзора, отличный от первого изображения объекта; и первое средство регулирования качества изображения, предназначенное для того, чтобы регулировать качество изображения для второго изображения таким образом, чтобы оно отличалось от качества изображения для первого изображения; при этом синтезирующее средство синтезирует первое изображение по отношению ко второму изображению таким образом, чтобы положения объекта совпадали со вторым изображением, у которого качество изображения было отрегулировано первым средством регулирования качества изображения.

Устройство формирования изображения может дополнительно включать в себя средство обнаружения предмета, предназначенное для того, чтобы обнаруживать предмет в пределах второго изображения; и второе средство регулирования качества изображения, предназначенное для того, чтобы регулировать качество изображения области предмета в пределах второго изображения, который был обнаружен средством обнаружения предмета, таким образом, чтобы оно отличалось от качества изображения для второго изображения, при этом синтезирующее средство синтезирует первое изображение и изображение предмета в области предмета в пределах второго изображения, у которого качество изображения было отрегулировано вторым средством регулирования качества изображения, таким образом, чтобы положения объекта совпадали, со вторым изображением.

Средство обнаружение предмета может обнаруживать в пределах второго изображения предмет, имеющий движение.

Средство обнаружения предмета может обнаруживать в пределах второго изображения лицо человека.

Устройство формирования изображения может дополнительно включать в себя средство анализа композиции, предназначенное для того, чтобы анализировать композицию второго изображения; и средство извлечения композиции, предназначенное для того, чтобы извлекать из второго изображения композицию с углом обзора, отличным от угла обзора первого изображения, основываясь при этом на композиции, проанализированной средством анализа композиции; при этом синтезирующее средство синтезирует первое изображение и извлеченное изображение композиции, извлеченной средством извлечения композиции, таким образом, чтобы положения объекта совпадали, со вторым изображением.

Второе средство формирования изображения может принимать свет из второй оптической системы для того, чтобы формировать второе изображение имеющим более широкий угол обзора объекта, чем первое изображение.

Устройство формирования изображения может дополнительно включать в себя средство корректирования искажения, предназначенное для того, чтобы корректировать искажение второго изображения, и средство корректирования оптической оси, предназначенное для того, чтобы согласовывать оптическую ось второй оптической системы с оптической осью первой оптической системы и определять положение первого изображения, синтезируемого со вторым изображением.

Первое средство регулирования качества изображения может регулировать уровень цветового сигнала второго изображения таким образом, чтобы он был ниже, чем уровень цветового сигнала первого изображения.

Устройство формирования изображения может быть дополнительно снабжено вторым средством регулирования качества изображения, предназначенным для того, чтобы регулировать качество изображения для первого изображения таким образом, чтобы оно отличалось от качества изображения второго изображения.

Второе средство регулирования качества изображения может регулировать уровень цветовых сигналов первого изображения таким образом, чтобы он был больше, чем уровень цветовых сигналов второго изображения.

Способ формирования изображения, соответствующий одному аспекту настоящего изобретения, включает в себя: этап синтезирования, на котором синтезируют первое изображение, которое представляет собой изображенный объект, и второе изображение, имеющее диапазон изображения, отличный от первого изображения; и этап отображения, на котором отображают первое изображение и второе изображение, которые были синтезированы при обработке данных на этапе синтезирования.

Программа в соответствии с одним аспектом настоящего изобретения заставляет компьютер выполнять обработку данных, включающую в себя: этап синтезирования первого изображения, которое представляет собой изображенный объект, и второго изображения, имеющего диапазон изображения, отличный от первого изображения; и этап отображения первого изображения и второго изображения, которые были синтезированы при обработке данных на этапе синтезирования.

В соответствии с аспектом настоящего изобретения синтезируется первое изображение, которое представляет собой изображенный объект, и второе изображение, имеющее диапазон изображения, отличный от первого изображения; и синтезированные первое изображение и второе изображение отображаются.

Полезные результаты изобретения

В соответствии с аспектом настоящего изобретения можно с большей легкостью утверждать композицию.

Краткое описание чертежей

Фиг.1 представляет собой схематический чертеж, показывающий пример внешнего вида цифровой фотокамеры как варианта реализации устройства формирования изображения, к которому применено настоящее изобретение.

Фиг.2 представляет собой схему, показывающую пример отображения формируемого изображения, которое формирует цифровая фотокамера.

Фиг.3 представляет собой структурную схему, показывающую пример функциональной конфигурации цифровой фотокамеры.

Фиг.4 представляет собой структурную схему, показывающую пример конфигурации модуля обработки изображения.

Фиг.5 представляет собой структурную схему, показывающую пример конфигурации модуля обработки изображения.

Фиг.6 представляет собой структурную схему, показывающую пример конфигурации модуля обработки изображений.

Фиг.7 представляет собой структурную схему, показывающую пример конфигурации модуля обработки изображения.

Фиг.8 представляет собой структурную схему, показывающую пример конфигурации модуля обработки изображения.

Фиг.9 представляет собой структурную схему, показывающую пример конфигурации модуля обработки изображения.

Фиг.10 представляет собой блок-схему алгоритма, описывающую обработку данных при отображении изображения в цифровой фотокамере, показанной на Фиг.3.

Фиг.11 представляет собой схему, описывающую обработку данных при корректировании искажения, проводимую в модуле корректирования искажения.

Фиг.12 представляет собой схему, описывающую обработку данных при корректировании искажения, проводимую в модуле корректирования искажения.

Фиг.13 представляет собой схему, описывающую обработку данных при корректировании оптической оси, проводимую в модуле корректирования оптической оси.

Фиг.14 представляет собой схему, описывающую настройку размера изображения для основного изображения и вспомогательного изображения при синтезирующей обработке данных в модуле синтезирования.

Фиг.15 представляет собой структурную схему, показывающую другой пример конфигурации цифровой фотокамеры.

Фиг.16 представляет собой структурную схему, показывающую пример конфигурации модуля обнаружения предмета.

Фиг.17 представляет собой структурную схему, показывающую пример конфигурации модуля обнаружения предмета.

Фиг.18 представляет собой структурную схему, показывающую пример конфигурации модуля обработки изображения.

Фиг.19 представляет собой блок-схему алгоритма, описывающую обработку данных при отображении изображений в цифровой фотокамере, показанной на Фиг.15.

Фиг.20 представляет собой блок-схему алгоритма, описывающую пример обработки данных при обнаружении предмета.

Фиг.21 представляет собой блок-схему алгоритма, описывающую пример обработки данных при обнаружении предмета.

Фиг.22 представляет собой схему, показывающую пример синтезированного изображения, на котором изображение обнаруженного предмета было усилено и отображено.

Фиг.23 представляет собой структурную схему, показывающую другой пример конфигурации цифровой фотокамеры.

Фиг.24 представляет собой блок-схему алгоритма, описывающую обработку данных при отображении изображения в цифровой фотокамере, показанной на Фиг.23.

Фиг.25 представляет собой схему, показывающую пример рекомендованной композиции.

Фиг.26 представляет собой схему, показывающую пример синтезированного изображения, отображающего рекомендованную композицию.

Фиг.27 представляет собой схему, описывающую форматное соотношение в приборе формирования изображения.

Фиг.28 представляет собой структурную схему, показывающую еще один другой пример конфигурации цифровой фотокамеры.

Фиг.29 представляет собой блок-схему алгоритма, описывающую обработку данных при отображении изображения в цифровой фотокамере, показанной на Фиг.28.

Фиг.30 представляет собой схему, описывающую "обрезанное" изображение.

Фиг.31 представляет собой схему, описывающую извлеченное изображение.

Фиг.32 представляет собой схему, описывающую пример синтезированного изображения, отображаемого на модуле отображения.

Фиг.33 представляет собой блок-схему алгоритма, описывающую обработку данных при записи изображения в цифровой фотокамере, показанной на Фиг.28.

Фиг.34 представляет собой схему, описывающую пример синтезированного изображения, записанного в записывающем модуле.

Фиг.35 представляет собой структурную схему, показывающую пример конфигурации аппаратного обеспечения компьютера.

Описание вариантов реализации изобретения

Ниже со ссылкой на эти схемы будут описаны варианты реализации настоящего изобретения. Отметим, что описание будет даваться в следующем порядке.

1. Первый вариант реализации изобретения

2. Второй вариант реализации изобретения

3. Третий вариант реализации изобретения

4. Четвертый вариант реализации изобретения

1. Первый вариант реализации изобретения

[Внешний вид устройства формирования изображения и формируемое изображение]

На Фиг.1 показан пример внешнего вида цифровой фотокамеры, служащей в качестве варианта реализации устройства формирования изображения, к которому применено настоящее изобретение.

Цифровая фотокамера (11) на Фиг.1 имеет две оптические системы основной линзы (31) и вспомогательной линзы (32). Основная линза (31) представляет собой так называемую стандартную линзу. Вспомогательная линза (32) представляет собой широкоугольную линзу (то есть линзу "рыбий глаз" или ей подобную), и ее угол обзора является достаточно широким по сравнению с основной линзой (31).

На Фиг.2 показан пример формируемого изображения, которое формирует цифровая фотокамера (11).

Как показано на Фиг.2, цифровая фотокамера (11) выполняет обработку данных при корректировании, таком как корректирование искажения, производимое в отношении изображения (вспомогательного изображения), которое формируется посредством вспомогательной линзы (32), и выполняет заранее заданную обработку изображения (такую как затуманивание изображения или уменьшение яркости и насыщенности цвета). Кроме того, цифровая фотокамера (11) выполняет заранее заданную обработку изображения (такую как увеличение яркости и насыщенности цвета) в отношении изображения (основного изображения), которое формируется посредством основной линзы (31). Цифровая фотокамера (11) настраивает положения и углы обзора основного изображения и вспомогательного изображения и отображает изображение (синтезированное изображение), на котором основное изображение и вспомогательное изображение синтезированы, на не показанном на фигурах модуле отображения, предусмотренном на задней поверхности цифровой фотокамеры (11), например, таким образом, как это показано на Фиг.2. Пользователь может утвердить угол обзора для формирования изображения, утверждая отображаемое содержимое на не показанном модуле отображения.

Синтезированное изображение, показанное на Фиг.2, синтезируется таким образом, чтобы совпадали положения объекта на каждом изображении из числа вспомогательного изображения (широкоугольного изображения), подвергнутого заданному корректированию и обработке изображения, и основного изображения (стандартного изображения).

[Пример функциональной конфигурации цифровой фотокамеры]

Далее со ссылкой на структурную схему, показанную на Фиг.3, будет описан пример функциональной конфигурации цифровой фотокамеры (11).

Цифровая фотокамера (11) на Фиг.3 составлена из основной линзы (31), вспомогательной линзы (32), модуля (51) формирования изображения, модуля (52) корректирования искажения, модуля (53) корректирования оптической оси, модуля (54) обработки изображения, модуля (55) формирования изображения, модуля (56) обработки изображения, синтезирующего модуля (57) и модуля (58) отображения.

Основная линза (31) и вспомогательная линза (32) являются такими же, как те, что описаны со ссылкой на Фиг.1, по этой причине их описание будет опущено.

Модуль (51) формирования изображения сконфигурирован таким образом, что включает в себя прибор формирования изображения и аналого-цифровой (A/D) преобразователь. Модуль (51) формирования изображения формирует изображение объекта, принимая свет из вспомогательной линзы (32) и выполняя фотоэлектрическое преобразование, и подвергает полученный аналоговый сигнал изображения аналого-цифровому преобразованию. Модуль (51) формирования изображения предоставляет данные цифрового изображения (широкоугольного изображения), полученного в результате аналого-цифрового преобразования, модулю (52) корректирования искажения.

Модуль (52) корректирования искажения корректирует искажение, вносимое вспомогательной линзой (32), широкоугольного изображения (вспомогательного изображения), поступающего из модуля (51) формирования изображения, и предоставляет скорректированное вспомогательное изображение модулю (53) корректирования оптической оси.

Модуль (53) корректирования оптической оси согласует оптическую ось вспомогательной линзы (32) с оптической осью основной линзы (31), определяет положение основного изображения, которое должно быть синтезировано со вспомогательным изображением, на вспомогательном изображении, поступающем из модуля (52) корректирования искажения, и предоставляет информацию о положении, указывающую положение этого основного изображения, наряду со вспомогательным изображением, модулю (54) обработки изображения.

Модуль (54) обработки изображения подвергает вспомогательное изображение, поступающее из модуля (53) корректирования оптической оси, заранее заданной обработке изображения (таким вариантам регулирования, как регулирование кадра, яркости, насыщенности цвета, оттенка цвета, резкости) таким образом, чтобы понижать качество изображения в большей степени, чем у основного изображения, и предоставляет это вспомогательное изображение, наряду с информацией о положении, синтезирующему модулю (57).

Пример конфигурации трех типов модулей (54) обработки изображений будет описан со ссылкой на структурные схемы, приведенные на фигурах с Фиг.4 по Фиг.6.

Фиг.4 представляет собой первый пример конфигурации и показывает пример конфигурации модуля (54) обработки изображения, при которой вспомогательное изображение подвергается затуманивающей обработке.

Модуль (54) обработки изображения, показанный на Фиг.4, имеет конфигурацию, содержащую преобразователь RGB/YUV (преобразователь сигнала формата RGB ("красный-зеленый-синий") в сигнал формата YUV ("яркость-цветность синего-цветность красного", где Y - яркость, U, V - цветоразностные сигналы)) (61), низкочастотный фильтр (LPF-фильтр) (62) и преобразователь YUV/RGB (преобразователь сигнала формата YUV ("яркость-цветность синего-цветность красного") в сигнал формата RGB ("красный-зеленый-синий") (63).

Преобразователь (61) RGB/YUV преобразует сигнал RGB (сигнал формата "красный-зеленый-синий"), служащий в качестве вспомогательного изображения, предоставляемого из модуля (53) корректирования оптической оси, в сигнал YUV (сигнала формата ("яркость-цветность синего-цветность красного")), основываясь при этом на Выражении (1), приведенном ниже.

[Математическое выражение 1]

Преобразователь (61) RGB/YUV предоставляет сигнал Y (сигнал яркости) из состава сигналов YUV, полученных в результате преобразования, низкочастотному фильтру (62) низких частот, предоставляя при этом сигналы U и V (цветоразностные сигналы) преобразователю (63) YUV/RGB.

Низкочастотный фильтр (62) подвергает сигнал Y, предоставляемый из преобразователя (61) RGB/YUV, сглаживающей обработке, посредством которой удаляются высокочастотные компоненты, и предоставляет его преобразователю (63) YUV/RGB.

Преобразователь (63) YUV/RGB преобразует сигнал Y, поступающий из низкочастотного фильтра (62), (сигнал Y') и сигналы U и V, поступающие из преобразователя (61) RGB/YUV, в сигнал RGB, основываясь при этом на Выражении (2), приведенном ниже.

[Математическое выражение 2]

Преобразователь (63) YUV/RGB предоставляет полученный в результате преобразования сигнал RGB (R', G', В') синтезирующему модулю (57), в качестве вспомогательного изображения.

Имея такую конфигурацию, как описана выше, модуль (54) обработки изображения может подвергать вспомогательное изображение затуманивающей обработке.

Фиг.5 представляет собой второй пример конфигурации и показывает пример конфигурации модуля (54) обработки изображения для уменьшения насыщенности цвета вспомогательного изображения.

Модуль (54) обработки изображения, показанный на Фиг.5, составлен из преобразователя RGB/HSV (преобразователя сигнала формата RGB ("красный-зеленый-синий") в сигнал формата HSV ("цветовой тон-насыщенность-значение")) (71), модуля (72) регулирования насыщенности цвета (модуля регулирования S) и преобразователя HSV/RGB (преобразователя сигнала формата HSV ("цветовой тон-насыщенность-значение") в сигнал формата RGB ("красный-зеленый-синий") (73).

Преобразователь (71) RGB/HSV преобразует сигнал RGB, служащий в качестве вспомогательного изображения, предоставляемый из модуля (53) корректирования оптической оси, в сигнал HSV (сигнал формата "цветовой тон-насыщенность-значение"), основываясь при этом на Выражении (3), приведенном ниже.

[Математическое выражение 3]

В Выражении (3) MAX представляет максимальное значение из числа R (значение "красного"), G (значение "зеленого"), В (значение "синего"), a MIN представляет, соответственно, минимальное значение из числа R, G, В. Преобразователь (71) RGB/HSV предоставляет сигнал S (сигнал насыщенности цвета) из состава сигнала HSV модулю (72) регулирования S, предоставляя при этом сигнал Н (сигнал цветового тона) и сигнал V (сигнал значения освещенности) преобразователю (73) HSV/RGB.

Модуль (72) регулирования S умножает сигнал S, предоставленный из преобразователя (71) RGB/HSV, на заранее заданный коэффициент α (0<α<1) и предоставляет это преобразователю (73) HSV/RGB.

Преобразователь (73) HSV/RGB преобразует сигнал S (S'=aS), поступающий из модуля (72) регулирования S, сигналы Н и V, поступающие из преобразователя (71) RGB/HSV, в сигнал RGB.

Иначе говоря, когда Hi=[H/60] mod 6 ([х]: максимальное целое число, равное или меньшее чем х, A mod В: остаток от А/В), f=(H/60)-Hi, p=V(1-S), q=V(1-fS), t=V(1-(1-f)S), тогда сигналы HSV преобразуются в сигналы RGB на основе Выражения (4), приведенного ниже.

[Математическое выражение 4]

Преобразователь (73) HSV/RGB предоставляет полученные в результате преобразования сигналы RGB (R', G', В') синтезирующему модулю (57), в качестве вспомогательного изображения.

Имея вышеописанную конфигурацию, модуль (54) обработки изображения может уменьшать насыщенность цвета вспомогательного изображения.

Фиг.6 представляет собой третий пример конфигурации и показывает пример конфигурации модуля (54) обработки изображения, который уменьшает значение освещенности вспомогательного изображения.

Модуль (54) обработки изображения, показанный на Фиг.6, составлен из преобразователя (81) RGB/HSV, модуля (82) регулирования значения освещенности (модуль регулирования V) и преобразователя (83) HSV/RGB.

Преобразователь (81) RGB/HSV преобразует сигналы RGB, служащие в качестве вспомогательного изображения, предоставляемого из модуля (53) корректирования оптической оси, в сигналы HSV, основываясь на вышеописанном Выражении (3), и предоставляет V - сигнал из состава сигналов HSV, полученных в результате преобразования, модулю (82) регулирования V, предоставляя при этом Н - сигнал и S - сигнал преобразователю (83) HSV/RGB.

Модуль (82) регулирования V умножает V-сигнал, предоставляемый из преобразователя (81) RGB/HSV, на заранее заданный коэффициент β (0<β<1) и предоставляет это преобразователю (83) HSV/RGB.

Преобразователь (83) HSV/RGB преобразует V-сигнал (V'=bV), поступающий из модуля (82) регулирования V и Н- и S-сигналы, поступающие из преобразователя (81) RGB/HSV, в сигналы RGB, основываясь на вышеописанном выражении (4), и предоставляет полученные в результате преобразования сигналы RGB (R', G', В') синтезирующему модулю (57), в качестве вспомогательного изображения.

Имея вышеописанную конфигурацию, модуль (54) обработки изображения может уменьшать значение освещенности вспомогательного изображения.

Таким образом, три типа модулей (54) обработки изображения, описанные со ссылкой на фигуры с Фиг.4 по Фиг.6, могут понижать качество изображения для вспомогательного изображения в большей степени, чем качество изображения основного изображения в любом из этих случаев.

Возвращаясь к описанию Фиг.3, отметим, что модуль (55) формирования изображения сконфигурирован таким образом, чтобы включать в себя прибор формирования изображения и аналого-цифровой преобразователь. Модуль (55) формирования изображения формирует изображение объекта, принимая свет из основной линзы (31) и выполняя фотоэлектрическое преобразование, и подвергает полученный аналоговый сигнал изображения аналого-цифровому преобразованию. Модуль (55) формирования изображения предоставляет данные цифрового изображения (стандартного изображения), полученные в результате аналого-цифрового преобразования, модулю (56) обработки изображения.

Модуль (54) обработки изображения подвергает основное изображение (стандартное изображение), поступающее из модуля (55) формирования изображения, заранее заданной обработке изображения (таким вариантам регулирования, как регулирование кадра, яркости, насыщенности цвета, оттенка цвета, резкости) таким образом, чтобы повысить качество изображения в большей степени, чем у вспомогательного изображения, и предоставляет это основное изображение синтезирующему модулю (57).

Теперь со ссылкой на структурные схемы, приведенные на фигурах с Фиг.7 по Фиг.9, будут описаны примеры конфигурации для трех типов модулей (56) обработки изображений.

Фиг.7 представляет собой первый пример конфигурации и показывает пример конфигурации модуля (56) обработки изображения, который выполняет усиливающую обработку для того, чтобы выделить форму и контуры основных изображений.

Модуль (56) обработки изображения, показанный на Фиг.7, составлен из преобразователя (91) RGB/YUV, высокочастотного фильтра (HPF-фильтра) (92), усилителя (93), модуля (94) суммирования и преобразователя (95) YUV/RGB.

Преобразователь (91) RGB/YUV преобразует сигнал RGB, служащий в качестве основного изображения, поступающего из модуля (55) формирования изображения, в сигналы YUV, основываясь при этом на вышеописанном Выражении (1), и предоставляет Y-сигнал из состава сигналов YUV, полученных в результате преобразования, высокочастотному фильтру (92) и модулю (94) суммирования, предоставляя при этом U- и V-сигналы преобразователю (95) YUV/RGB.

Высокочастотный фильтр (92) извлекает высокочастотные составляющие Y-сигнала, предоставляемого из преобразователя (91) RGB/YUV, и предоставляет их усилителю (93). Усилитель (93) усиливает высокочастотные составляющие Y-сигнала, поступающие из высокочастотного фильтра (92), в А (А>1) раз, и предоставляет их модулю (94) суммирования. Модуль (94) суммирования суммирует высокочастотные составляющие Y-сигнала, усиленные посредством усилителя (93), с Y-сигналом, поступающим из преобразователя (91) RGB/YUV, и предоставляет это преобразователю (95) YUV/RGB.

Преобразователь (95) YUV/RGB преобразует Y-сигнал (Y), поступающий из модуля (94) суммирования, и U- и V-сигналы, поступающие из преобразователя (91) RGB/YUV, в сигналы RGB, основываясь на вышеописанном Выражении (2), и предоставляет полученные в результате преобразования сигналы RGB (R', G', В') синтезирующему модулю (57), в качестве основного изображения.

Имея вышеописанную конфигурацию, модуль (56) обработки изображения может подвергнуть основное изображение усиливающей обработке.

Фиг.8 представляет собой второй пример конфигурации и показывает пример конфигурации модуля (56) обработки изображения для повышения насыщенности цвета основного изображения.

Модуль (56) обработки изображения, показанный на Фиг.8, составлен из преобразователя (101) RGB/HSV, модуля (102) регулирования насыщенности цвета (модуля регулирования S) и преобразователя (103) HSV/RGB. Отметим, что преобразователь (101) RGB/HSV и преобразователь (103) HSV/RGB имеют функции, аналогичные преобразователю (71) RGB/HSV и преобразователю (73) HSV/RGB, предусмотренным в модуле (54) обработки изображения, показанном на Фиг.5, так что их описание будет опущено.

Иначе говоря, модуль (102) регулирования S умножает заранее заданный коэффициент α (α≥1) на S-сигнал, предоставляемый из преобразователя (101) RGB/HSV, и предоставляет это преобразователю (103) HSV/RGB.

Имея вышеописанную конфигурацию, модуль (56) обработки изображения может увеличивать насыщенность цвета основного изображения.

Фиг.9 представляет собой третий пример конфигурации и показывает пример конфигурации модуля (56) обработки изображения, который увеличивает значение освещенности вспомогательного изображения.

Модуль (56) обработки изображения, показанный на Фиг.9, составлен из. преобразователя (111) RGB/HSV, модуля (112) регулирования значения освещенности (модуля регулирования V) и преобразователя (113) HSV/RGB. Отметим, что преобразователь (111) RGB/HSV и преобразователь (113) HSV/RGB имеют функции, аналогичные преобразователю (81) RGB/HSV и преобразователю (83) HSV/RGB, предусмотренным в модуле (54) обработки изображения, показанном на Фиг.6, так что их описание будет опущено.

Иначе говоря, модуль (112) регулирования V умножает заранее заданный коэффициент β (β≥1) на V-сигнал, предоставляемый из преобразователя (111) RGB/HSV, и предоставляет его преобразователю (113) HSV/RGB.

Имея вышеописанную конфигурацию, модуль (56) обработки изображения может увеличить значение освещенности основного изображения.

Таким образом, любой из трех типов модулей (56) обработки изображения, описанных со ссылкой на фигуры с Фиг.7 по Фиг.9, может иметь качество изображения для предоставляемого им основного изображения, повышенное в большей степени, чем качество изображения вспомогательного изображения.

Возвращаясь к описанию Фиг.3, отметим, что синтезирующий модуль (57) синтезирует основное изображение, поступающее из модуля (56) обработки изображения, и вспомогательное изображение, поступающее из модуля (54) обработки изображения, основываясь при этом на информации о положении, поступающей из модуля (54) обработки изображения, и предоставляет синтезируемое изображение, которое было синтезировано, модулю (58) отображения.

Модуль (58) отображения отображает синтезированное изображение, поступающее из синтезирующего модуля (57).

[Обработка данных при отображении изображения в цифровой фотокамере]

Далее со ссылкой на блок-схему алгоритма, показанную на Фиг.10, будет описана обработка данных при отображении изображения в цифровой фотокамере.

На этапе S11 модуль (52) корректирования искажения корректирует искажение, вносимое вспомогательной линзой (32) в широкоугольное изображение (вспомогательное изображение), поступающее из модуля (51) формирования изображения, и предоставляет скорректированное вспомогательное изображение модулю (53) корректирования оптической оси.

Обработка данных при корректировании искажения, проводимая в модуле (52) корректирования искажения, будет описана со ссылкой на Фиг.11 и Фиг.12.

Фиг.11 представляет собой схему, описывающую корреляцию положения (X, Y) пикселя на скорректированном изображении заданного размера, которое получено корректированием искажения, и положением (x, y) пикселя для пикселя на вспомогательном изображении (круговое изображение "рыбий глаз") перед корректированием искажения.

Как показано на Фиг.11, мы будем рассматривать верхнее полушарие, имеющее радиус R, по сечению, выполненному по диаметру кругового изображения "рыбий глаз", при этом центр кругового изображения "рыбий глаз" выступает в качестве точки начала координат xyz. Отметим, что скорректированное изображение контактирует с верхним полушарием в точке (0, 0, R).

В случае, при котором точкой пересечения прямой линии, связывающей точку начала координат xyz и точку (X, Y, R), с поверхностью сферы верхнего полушария является (x, y, z), и расстояние между точкой начала координат xyz и этой точкой пересечения (x, y, z) составляет R, соблюдается приведенное ниже Выражение (5).

[Математическое выражение 5]

Иначе говоря, модуль (52) корректирования искажения генерирует скорректированное изображение, делая так, чтобы пиксельным значением в точке (X, Y) на корректируемом изображении после коррекции являлось пиксельное значение в точке (x, y) на соответствующем круговом изображении "рыбий глаз" перед коррекцией.

Отметим, что как показано на Фиг.12, в случае, при котором точка (x, y) на круговом изображении "рыбий глаз" перед коррекцией, которая соответствует точке (X, Y) на корректируемом изображении после коррекции, не располагается в той точке координатной сетки, в которой расположен пиксель, периферийные пиксели (значения пикселей) от а до d могут быть интерполированы, чтобы быть пиксельным значением в точке (x, y). В качестве способа интерполяции используется билинейная интерполяция или бикубическая интерполяция или подобная им интерполяция. На Фиг.12, в случае использования билинейной интерполяции, пиксельное значение p в точке (x, y) найдено при помощи формулы p=(1-t){(1-s)+sb}+t{(1-s)с+sd}.

Возвращаясь к блок-схеме алгоритма, показанной на Фиг.10, отметим, что на этапе S 12 модуль (53) корректирования оптической оси согласует оптическую ось вспомогательной линзы (32) с оптической осью основной линзы (31) и определяет положение основного изображения, синтезируемого со вспомогательным изображением, на вспомогательном изображении, поступающем из модуля (52) корректировани