Система и способ для совмещения последовательности изображений

Иллюстрации

Показать все

Изобретение относится к области компьютерных технологий. Технический результат заключается в уменьшении искажений, возникающих в совмещенной последовательности изображений. Технический результат достигается за счет получения последовательности изображений, при этом последовательность изображений содержит множество изображений, расположенных последовательно в диапазоне изображений, установки преобразования между смежными парами последовательных изображений в последовательности изображений для получения множества преобразований в качестве матриц преобразования на основании множества преобразований выравнивания последовательности изображений по опорному изображению для получения совмещенной последовательности изображений, при этом дополнительно устанавливают опорное изображение из множества изображений на основании метрики преобразования, причем метрика преобразования количественно оценивает степень преобразования, требуемого для выравнивания последовательности изображений по опорному изображению, с возможностью количественной оценки степени преобразования на основании метрики преобразования, основанной на перемножении матриц преобразования смежных пар последовательных изображений. 4 н. и 10 з.п. ф-лы, 9 ил.

Реферат

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ

Изобретение относится к системе и способу для совмещения последовательности изображений. Изобретение также относится к рабочей станции и системе формирования изображения, содержащей систему, и компьютерному программному продукту для обеспечения выполнения способа.

В областях просмотра изображения и отображения изображения может оказаться желательным выравнивание двух изображений, которые содержат один и тот же или подобный объект. Такое геометрическое выравнивание обычно известно как совмещение изображений и рассматривается в качестве основной задачи в многочисленных приложениях обработки изображения. Совмещение изображений может быть использовано, например, когда медицинское изображение первичного обследования пациента должно быть сравнено с медицинским изображением катамнестического обследования. Поскольку пациент может располагаться по-разному на обоих медицинских изображениях, совмещение изображений может быть использовано для компенсации отличий в обоих медицинских изображениях из-за изменения положения пациента.

Совмещение изображений, как правило, включает в себя i) установление преобразования между двумя изображениями посредством максимизации меры сходства между двумя изображениями, ii) на основании преобразований выравнивание двух изображений. Максимизация может быть выполнена, используя численные способы оптимизации, например градиентный спуск, управляющие параметрами преобразования. Преобразования могут быть, например, жесткими, аффинными или гибкими.

УРОВЕНЬ ТЕХНИКИ

Совмещение изображений также может быть применено к последовательностям изображений, т.е. более чем к двум изображениям. Такое совмещение изображения часто используется для компенсации движения, возникающего в последовательности изображений. Например, в последовательностях исследования сердечного кровотока методом MRI дыхательное движение пациента может помешать клиницисту в исследование последовательности изображений. Совмещение изображений может быть использовано для компенсации дыхательного движения, т.е. для стабилизации последовательности изображений.

Например, публикация под названием «Registration of Ultrasound Image Sequences for Perfusion Analysis», под авторством Vratislav Harabis и др., EUSIPCO, август 2011г., стр. 1015-1019, описывает способ для совмещения изображений в ультразвуковых последовательностях, когда в поток крови вводится контрастное вещество. Упоминается, что выбор опорного изображения при совмещении контрастной последовательности является одной из ключевых задач. Упоминается, что первая возможность для выбора основана на плавающем опорном изображении, при этом второе изображение совмещается с первым изображением, третье изображение совмещается со вторым изображением и т.д. Вторая возможность состоит в задании только одного опорного изображения и в совмещении прочих изображений в последовательности по отношении к этому фиксированному изображению. Публикация предлагает другой способ, основанный на совмещении последовательностей. Исходная последовательность автоматически делится на подпоследовательности на основании значений контрастности. В каждой подпоследовательности одно изображение с наивысшим значением метрики CROI задается в качестве опорного для совмещения последовательности. Метрика CROI основана на разностях интенсивности пикселя в области интереса (ROI). В заключение, вычисляются средние изображения из каждой из совмещенных подпоследовательностей и используются для совмещения подпоследовательностей вместе.

Проблема вышеупомянутого способа состоит в том, что совмещение последовательности изображений может вызывать возникновение искажений в совмещенной последовательности изображений.

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

Было бы предпочтительно иметь систему или способ для совмещения последовательности изображений, которые уменьшают искажения, возникающие в совмещенной последовательности изображений.

Для более эффективного решения этой проблемы первый аспект изобретения предоставляет систему для совмещения последовательности изображений, содержащую:

- блок ввода для получения последовательности изображений, при этом последовательность изображений содержит множество изображений, расположенных последовательно в диапазоне изображений;

- процессор преобразования для установления преобразований между парами последовательных изображений в последовательности изображений для получения множества преобразований;

- процессор выравнивания на основании множества преобразований для выравнивания последовательности изображений по опорному изображению для получения совмещенной последовательности изображений;

- при этом процессор выравнивания выполнен с возможностью установления опорного изображения из множества изображений на основании метрики преобразования, причем метрика преобразования количественно оценивает степень преобразования, требуемого для выравнивания последовательности изображений по опорному изображению.

В дополнительном аспекте изобретения предоставляется рабочая станция и устройство формирования изображения, содержащее изложенную систему.

В дополнительном аспекте изобретения предоставляется способ для совмещения последовательности изображений, содержащий этапы, на которых:

- получают последовательность изображений, при этом последовательность изображений, содержащую множество изображений, расположенных последовательно в диапазоне изображений;

- устанавливают преобразования между парами последовательных изображений в последовательности изображений для получения множества преобразований;

- на основании множества преобразований выравнивают последовательность изображений по опорному изображению для получения совмещенной последовательности изображений;

- при этом упомянутый этап, на котором выравнивают последовательность изображения, содержит этап, на котором устанавливают опорное изображение из множества изображений на основании метрики преобразования, причем метрика преобразования количественно оценивает степень преобразования, требуемого для выравнивания последовательности изображений по опорному изображению. В дополнительном аспекте изобретения предоставляется компьютерный программный продукт, содержащий инструкции, предписывающие процессорной системе выполнить изложенный способ.

Настоящее изобретение включает в себя совмещение последовательности изображений. Последовательность изображений формируется рядом изображений, которые упорядочены, т.е. каждое изображение имеет конкретное положение по отношению к другим из ряда изображений. Порядок может быть, например, порядком, основанным на времени. Последовательность изображений имеет диапазон изображений, причем границы диапазона изображений определяются первым и последним изображением из ряда изображений. Получение последовательности изображений заключается в том, что она может быть принята от внутреннего или внешнего источника, например запоминающего носителя информации.

Преобразования устанавливаются между парами последовательных изображений из ряда изображений. Каждое из преобразований указывает преобразование между парой последовательных изображений. Здесь, понятие «последовательный» относится к изображениям пары изображений, следующим друг за другом в упорядочение изображений, т.е. являющимся соседними изображениями в рамках последовательности изображений. Преобразование является функцией или параметрами, которые указывают то, каким образом одно из пары изображений может быть преобразовано так, чтобы, по меньшей мере, частично совпадать с другим изображением.

Преобразования используются для выравнивания последовательности изображений по отношению к опорному изображению. Следовательно, другие изображения из последовательности изображений преобразуются так, чтобы, по меньшей мере, частично совпадать с опорным изображением, при этом опорное изображение служит в качестве стабильного, не преобразованного изображения из ряда изображений. По существу, опорное изображение составляет так называемое анкерное изображение, по отношению к которому выравнивается последовательность изображений.

Следует отметить, что совмещение изображений, таким образом, выполняется посредством i) установления преобразований и ii) на основании преобразования выравнивания последовательности изображений.

Опорное изображение устанавливается из множества изображений. Следовательно, множество изображений используется для либо непосредственного, либо опосредованного предоставления опорного изображения. Для установления того, какое изображение устанавливается в качестве опорного изображения, используется метрика преобразования. Метрика преобразования является функцией, например математической функцией, которая указывает, какое количество преобразования требуется, т.е. в какой степени ряд изображений требуется преобразовать, чтобы выровнять последовательность изображений по опорному изображению. Полученное вследствие этого значение преобразования зависит от того, какое изображение устанавливается в качестве опорного изображения.

Автор(ы) изобретения признает(ют), что выбор опорного изображения оказывает сильное влияние на качество совмещения изображений, как воспринимается пользователем. Причина этого состоит в том, что опорное изображение, выступая в качестве основы для совмещения изображений, вызывает преобразование ряда изображений так, чтобы они, по меньшей мере, частично походили на опорное изображение. В случае, когда опорное изображение является изображением, которое малоинтересно или не интересно пользователю, например, поскольку оно не показывает или не четко показывает область интереса, ряд изображений преобразуется так, что они, по меньшей мере, частично походят на изображение, которое малоинтересно или не интересно пользователю. Автор(ы) изобретения дополнительно признает(ют), что такие изображения часто составляют выбросы в последовательности изображений, которые по внешнему виду отличаются от других изображений в последовательности изображений.

Посредством предоставления метрики преобразования, которая количественно оценивает степень преобразования, требуемого для выравнивания последовательности изображений по опорному изображению, может быть определено, какое количество преобразования требуется для выравнивания последовательности изображений по конкретному опорному изображению. Степень преобразования указывает, насколько подобно опорное изображение другим изображениям из последовательности изображений, так как для изображения, которое подобно большей части изображений из последовательности изображений, потребуется меньшая степень преобразования, т.е. только для тех изображений, которые не подобные. Тем не менее, для изображения, которое отличается по внешнему виду от большей части изображений из последовательности изображений, потребуется высокая степень преобразования, т.е. потребуется преобразование для большей части изображений из последовательности изображений, чтобы они походили на опорное изображение. Следовательно, предоставляется метрика преобразования, которая указывает, составляет ли изображение, установленное в качестве опорного изображения, выброс в последовательности изображений.

Посредством установления опорного изображения из последовательности изображений на основании метрики преобразования опорное изображение устанавливается на основании того, в какой степени упомянутое изображение составляет выброс в последовательности изображений. Раз так, то можно избежать выбросов в последовательности изображений при установлении опорного изображения. Преимущественно может быть установлено опорное изображение, которое походит на другие изображения в последовательности изображений.

Преимущественно уменьшается вероятность того, что изображение, которое менее или не интересно пользователю, устанавливается в качестве опорного изображения. Преимущественно можно избежать искажений, которые в противном случае могут быть внесены посредством установления изображения в качестве опорного изображения, которое искажено и вследствие этого составляет выброс в последовательности изображений, так как предотвращается преобразование других изображений, чтобы они, по меньшей мере, частично походили на искаженное изображение.

Опционально процессор выравнивания выполнен с возможностью установления опорного изображения посредством выбора опорного изображения из множества изображений на основании минимизации метрики преобразования. В частности, опорное изображение выбирается для минимизации метрики преобразования. Следовательно, в качестве опорного изображения устанавливается изображение, которые вызывает наименьшую требуемую степень преобразования при выравнивании последовательности изображений по опорному изображению. Преимущественно, если одно или более преобразований установлены неправильно, например, из-за недостатка контрастности в изображениях, то искажения, которые в противном случае могут возникать из-за совмещения изображения, основанного на упомянутых преобразованиях, уменьшаются, так как опорное изображение требует наименьшую степень преобразований при совмещении изображений.

Опционально процессор выравнивания выполнен с возможностью установления опорного изображения посредством i) для, по меньшей мере, подмножества из множества изображений вычисления значения преобразования на основании метрики преобразования и ii) выбора одного из упомянутых изображений с наименьшим значением преобразования в качестве опорного изображения. Опорное изображение устанавливается посредством вычисления значения преобразования для некоторого количества изображений, т.е. потенциальных изображений, и выбора одного из упомянутых изображений, которое имеет наименьшее значение преобразования. Следовательно, опорное изображение является одним из множества изображений, т.е. существующим изображением, и выбор основан на сравнении значений преобразования. Это составляет механизм эффективного выбора.

Опционально процессор выравнивания выполнен с возможностью установления интерполированного изображения в качестве опорного изображения, при этом интерполированное изображением имеет положение в диапазоне изображений между парой последовательных изображений в последовательности изображений. Опорное изображение соответствует интерполированному изображению, а не существующему изображению из множества изображений. Интерполированное изображение может быть наиболее подходящим для использования в качестве опорного изображения. Например, если последовательность изображений изображает дыхательное движение, то наименьшее значение преобразования может быть получено для точки в дыхательном движении, которая лежит между парой последовательных изображений в последовательности изображений. Посредством выравнивания последовательности изображений по отношению к упомянутой точке может быть получено более качественное совмещение изображений.

Следует отметить, что интерполированное изображение не обязательно должно быть явным образом вычислено или доступно системе для выравнивания последовательности изображений по интерполированному изображению. Наоборот, интерполированное изображение может быть представлено посредством положения между парой последовательных изображений, и последовательность изображений может быть выровнена по виртуальному интерполированному изображению на основании преобразования между парой последовательных изображений и упомянутым положением.

Опционально процессор выравнивания выполнен с возможностью установления области интереса в последовательности изображений и метрика преобразования количественно оценивает степень преобразования, требуемого для выравнивания области интереса в последовательности изображений по области интереса в опорном изображении. Область интереса, показанная в последовательности изображений, т.е., по меньшей мере, в части из множества изображений, может представлять особый интерес для пользователя. Посредством количественной оценки степени преобразования, в частности, в отношении области интереса в последовательности изображений опорное изображение устанавливается на основании степени преобразования области интереса при выравнивании последовательности изображений по опорному изображению.

Опционально система дополнительно содержит обнаружитель области интереса для обнаружения области интереса в последовательности изображений. Таким образом, система автоматически обнаруживает область интереса и устанавливает опорное изображение на основании области интереса.

Опционально процессор преобразования выполнен с возможностью установления преобразований между парами последовательных изображений в качестве матриц преобразования. Матрицы преобразования хорошо подходят для описания преобразования между парами последовательных изображений и для использования в качестве базы для метрики преобразования.

Опционально процессор выравнивания выполнен с возможностью количественной оценки степени преобразования на основании перемножения матриц преобразования смежных пар последовательных изображений. Посредством перемножения матриц преобразования смежных пар последовательных изображений получается произведение матриц преобразования, которое предоставляет общую степень преобразования из-за упомянутых отдельных преобразований. На ее основании может быть эффективно вычислена степень преобразования, требуемая для выравнивания последовательности изображений.

Опционально процессор выравнивания выполнен с возможностью количественной оценки степени преобразования посредством i) для каждого из множества изображений установления произведения матриц преобразования, указывающего преобразование из соответствующего одного из множества изображений в опорное изображение, и ii) установления значения преобразования на основании суммы произведений матриц преобразования. Следовательно, для каждого из множества изображений вычисляется степень преобразования, которая требуется для преобразования упомянутого изображения в опорное изображение. Посредством суммирования упомянутых величин может быть эффективно вычислена общая степень преобразования, требуемая для выравнивания последовательности изображений, т.е. каждого из множества изображений.

Опционально матрица преобразования является 4×4 матрицей преобразования. 4×4 матрица преобразования хорошо подходит для описания жестких, аффинных или гибких преобразований.

Опционально процессор выравнивания выполнен с возможностью генерирования значения доверия на основании метрики преобразования, при этом значение доверия указывает качество выравнивания последовательности изображений по опорному изображению. Этот опциональный аспект настоящего изобретения основан на распознавании того, что степень преобразования, требуемая для выравнивания последовательности изображений по опорному изображению, указывает качество выравнивания последовательности изображений по опорному изображению. Посредством генерирования значения доверия, отражающего упомянутое качество, пользователю обеспечивается обратная связь по качеству совмещенной последовательности изображений.

Опционально процессор выравнивания выполнен с возможностью установления опорного изображения из множества изображений дополнительно на основании метрики подобия изображения, при этом метрика подобия изображения количественно оценивает степень соответствия, получаемого при выравнивании последовательности изображений по опорному изображению.

Опционально процессор выравнивания выполнен с возможностью установления опорного изображения из множества изображений дополнительно на основании положения опорного изображения в диапазоне изображений. Этот опциональный аспект настоящего изобретения основан на распознавании того, что положение изображения в диапазоне изображений указывает на его пригодность в качестве опорного изображения. Например, при сборе изображений могут возникать проблемы инициализации, которые могут оказывать влияние на первое изображение или изображения последовательности изображений. Следовательно, упомянутое первое изображение или изображения менее пригодны в качестве опорного изображения. В качестве другого примера, при формировании изображения кровотока поглощение контрастного вещества в области интереса может быть наивысшим близко к середине последовательности изображений, что приводит к тому, что область интереса наиболее хорошо видна близко к упомянутой середине.

Специалистам в соответствующей области будет понятно, что два или более вышеупомянутых вариантов осуществления, реализаций и/или аспектов изобретения могут быть объединены любым образом, который считается полезным.

Модификации и вариации рабочей станции, устройства формирования изображения, способа и/или компьютерного программного продукта, которые соответствуют описанным модификациям и вариациям системы, могут быть выполнены специалистом в соответствующей области на основании настоящего описания.

Специалисту в соответствующей области будет понятно, что способ может быть применен к данным многомерного изображения, собранным посредством различных модальностей сбора, таких как, но не ограничивающихся, стандартная Рентгенография, Компьютерная Томография (CT), Магнитно-Резонансное Формирование Изображения (MRI), Ультразвук (US), Позитронно-Эмиссионная Томография (PET), Однофотонная Эмиссионная Компьютерная Томография (SPECT) и Ядерная Медицина (NM). Измерение данных многомерного изображения может относиться ко времени. Например, трехмерное изображение может содержать ряд двумерных изображений во временной области.

Изобретение определяется в независимых пунктах формулы изобретения. Преимущественные варианты осуществления определяются в зависимых пунктах формулы изобретения.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

Эти и прочие аспекты изобретения очевидны из и будут объяснены со ссылкой на описываемые далее варианты осуществления. На чертежах

фиг. 1 показывает систему в соответствии с настоящим изобретением;

фиг. 2 показывает способ в соответствии с настоящим изобретением;

фиг. 3 показывает компьютерный программный продукт в соответствии с настоящим изобретением;

фиг. 4a показывает последовательность изображений, содержащую множество изображений, со схематически указанными преобразованиями между парами последовательных изображений;

фиг. 4b показывает результат выравнивания последовательности изображений с первым из множества изображений, установленным в качестве опорного изображения при совмещении изображений;

фиг. 4c показывает результат выравнивания последовательности изображений по опорному изображению, установленному на основании метрики преобразования;

фиг. 5а показывает другую последовательность изображений и соответствующие преобразования с одним из преобразований, установленным неправильно;

фиг. 5b показывает результат выравнивания последовательности изображений с первым из множества изображений, установленным в качестве опорного изображения; и

фиг. 5c показывает результат выравнивания последовательности изображений по опорному изображению, установленному на основании метрики преобразования.

ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯ

Фиг. 1 показывает систему 100 для совмещения последовательности 200 изображений. Система 100 содержит блок 120 ввода для получения последовательности 200 изображений. Система 100 дополнительно содержит процессор 140 преобразования для установления преобразования между парами последовательных изображений в последовательности 200 изображений для получения множества преобразований 210. Процессор 140 преобразования показан для приема последовательности 200 изображений от блока 120 ввода. Система 100 дополнительно содержит процессор 160 выравнивания на основании множества преобразований 210 для выравнивания последовательности 200 изображений по опорному изображению для получения совмещенной последовательности 230 изображений. Процессор 160 выравнивания показан для приема последовательности 200 изображений от блока 120 ввода и для приема множества преобразований 210 от процессора 140 преобразования. В примере на фиг. 1 процессор 160 выравнивания показан для предоставления совмещенной последовательности 230 изображений дисплею 190 для отображения пользователю. В качестве альтернативы или в дополнение, процессор 160 выравнивания может сохранять или передавать совмещенную последовательность 230 изображений, например, на запоминающий носитель информации или на сервер. Также показанный на фиг. 1 процессор 160 выравнивания опционально выполнен с возможностью генерирования значения 250 доверия на основании метрики преобразования, как будет дополнительно рассмотрено далее.

Работа системы 100 может быть кратко объяснена следующим образом. До, или как часть, совмещения последовательности изображений процессор 160 выравнивания устанавливает опорное изображение из множество изображений на основании метрики преобразования. Метрика преобразования количественно оценивает степень преобразования, требуемого для выравнивания последовательности 200 изображений по опорному изображению. Таким образом, процессор 160 выравнивания выполняет выравнивание изображения, используя опорное изображение как установленное на основании метрики преобразования.

Фиг. 2 показывает способ 300 для совмещения последовательности изображений. Способ 300 содержит на этапе, озаглавленном «ПОЛУЧЕНИЕ ПОСЛЕДОВАТЕЛЬНОСТИ ИЗОБРАЖЕНИЙ», получение 310 последовательности изображений, при этом последовательность изображений содержит множество изображений, расположенных последовательно в диапазоне изображений. Способ 300 дополнительно содержит на этапе, озаглавленном «УСТАНОВЛЕНИЕ ПРЕОБРАЗОВАНИЙ», установление 320 преобразований между парами последовательных изображений в последовательности изображений для получения множества преобразований. Способ 300 дополнительно содержит на этапе, озаглавленном «ВЫРАВНИВАНИЕ ПОСЛЕДОВАТЕЛЬНОСТИ ИЗОБРАЖЕНИЙ», на основании множества преобразований, выравнивание 340 последовательности изображений по опорному изображению для получения совмещенной последовательности изображений. Способ 300 дополнительно содержит на этапе, озаглавленном «УСТАНОВЛЕНИЕ ОПОРНОГО ИЗОБРАЖЕНИЯ», установление 330 опорного изображения из множества изображений на основании метрики преобразования, при этом метрика преобразования количественно оценивает степень преобразования, требуемого для выравнивания последовательности изображений по опорному изображению.

Способ 300 может соответствовать работе системы 100. Тем не менее, следует отметить, что способ 300 также может быть выполнен отдельно от системы 100. Фиг. 3 показывает компьютерный программный продукт 360, содержащий инструкции для предписания процессорной системе выполнить вышеупомянутый способ 300. Компьютерный программный продукт 360 может содержаться на машиночитаемом носители 350 информации, например, в виде ряда машиночитаемых физических меток и/или ряда элементов с разными электрическими, например магнитными или оптическими, свойствами или значениями.

Работа системы 100 может быть объяснена более подробно следующим образом. Фиг. 4a показывает последовательность 200 изображений, содержащую множество изображений 201-205. В этом конкретном примере последовательность 200 изображений выбрана в качестве временной последовательности изображений, при этом каждое из множества изображений 201-205 показывает область 240 интереса в разные точки во времени. Тем не менее, последовательность 200 изображений также может представлять собой другой тип последовательности, например, показывающей область интереса с разных пространственных точек обзора. Следует отметить, что по причинам читабельности область 240 интереса указывается лишь раз с помощью цифрового обозначения на фиг. 4a-4c. Из фиг. 4a может быть видно, что область 240 интереса меняется на всем протяжении последовательности 200 изображений. В частности, на первом изображении 201 последовательности 200 изображений область 240 интереса повернута против часовой стрелки по отношению ко второму, третьему и четвертому изображению 202-204 последовательности 200 изображений. Более того, на пятом изображении 205 последовательности 200 изображений область 240 интереса повернута по часовой стрелке по отношению к упомянутым изображениям.

Изменение ориентации может быть вызвано разными причинами. Например, область 240 интереса может быть органом пациента, и изменение ориентации может быть вызвано дыхательным движением, вызывающим изменение ориентации области 240 интереса в течение промежутка времени последовательности изображений. В качестве альтернативы или в дополнение, дыхательное движение может вызывать изменение положения области 240 интереса или вызывать изменение внешнего вида с течением времени. Тем не менее, для объяснения, фиг. 4a показывает лишь изменение ориентации.

Фиг. 4a дополнительно показывает результат процессора 140 преобразования, устанавливающего преобразования между парами последовательных изображений в последовательности 200 изображений. В результате получается множество преобразований 211-214, при этом преобразования схематически указываются на фиг. 4a в качестве пунктирных квадратов. Здесь ориентация пунктирного квадрата обозначает изменение ориентации области 240 интереса между парой последовательных изображений. Например, преобразование первого изображения 201 во второе изображение 202 так, чтобы показанная в них область 240 интереса совпадала по положению и ориентации, включает в себя поворот первого изображения 201 по часовой стрелке. Следовательно, первое преобразование 211, схематично указанное с помощью пунктирного квадрата, сориентировано в направлении вправо. Фиг. 4a дополнительно показывает второе преобразование 212, указывающее преобразование из второго изображения 202 в третье изображение 203, третье преобразование 214, указывающее преобразование из третьего изображения 203 в четвертое изображение 204, и четвертое преобразование 214, указывающее преобразование из четвертого изображения 204 в пятое изображение 205. Поскольку область 240 интереса имеет одинаковую ориентацию во втором, третьем и четвертом изображениях 202-204, второе и третье преобразования 212-213 являются нейтральными, т.е. указывающими на отсутствие изменения ориентации. Более того, пятое изображение 205, вновь повернутое по часовой стрелке, показывает область 240 интереса, при этом четвертое преобразование 214, отражающее упомянутый поворот, сориентировано в направлении вправо.

Процессор 140 преобразования может устанавливать множество преобразований, используя любую подходящую методику преобразования, как, например, методики, сами по себе известные из технических областей совмещения изображений и оценки движения. В частности, процессор 140 преобразования может устанавливать преобразования 211-214 между парами последовательных изображений в качестве матриц преобразования. Матрицы преобразования могут быть 4×4 матрицами. Преобразования могут быть жесткими, аффинными или гибкими. Процессор 140 преобразования может быть выполнен с возможностью установления каждого из преобразования, по существу, для полного изображения. В качестве альтернативы, процессор 140 преобразования может быть выполнен с возможностью установления преобразования для части изображения, например, в частности для области 240 интереса. Для последней цели, как также показано на фиг. 1, система может содержать обнаружитель 180 области интереса для обнаружения области 240 интереса во множестве изображений 201-205.

Фиг. 4b показывает результат процессора 160 выравнивания на основании множества преобразований 211-214, выравнивающего последовательность 200 изображений по опорному изображению 201 для получения совмещенной последовательности 220 изображений. Тем не менее, фиг. 4b показывает пример известного уровня техники, в котором, по умолчанию, первое изображение 201 устанавливается в качестве опорного изображения. Это указывается на фиг. 4a и 4b посредством показа опорного изображения с более широкой рамкой. В результате, получается совмещенная последовательность 220 изображений, в которой ориентация области 240 интереса отрегулирована таким образом, чтобы она совпадала с ориентацией области интереса в первом изображении 201.

Фиг. 4c показывает результат процессора 160 выравнивания, устанавливающего опорное изображение из множества изображений 201-205 на основании метрики преобразования. Метрика преобразования количественно оценивает степень преобразования, требуемого для выравнивания последовательности 200 изображений по опорному изображению 203. В результате, вместо первого изображения 201 третье изображение 203 устанавливается в качестве опорного изображения 203. Это указывается на фиг. 4a и 4c посредством показа опорного изображения 203 с рамкой в виде сдвоенной линии. В результате, получается совмещенная последовательность 230 изображений, в которой ориентация области 240 интереса отрегулирована таким образом, чтобы она совпадала с ориентацией области интереса в третьем изображении 203.

Вышеприведенное установление опорного изображения на основании метрики преобразования может быть объяснено более подробно следующим образом. Метрика преобразования количественно оценивает степень преобразования, требуемого для выравнивания последовательности 200 изображений по опорному изображению 203. Процессор 160 выравнивания может быть выполнен с возможностью установления опорного изображения 203 посредством выбора опорного изображения из множества изображений 201-205 на основании минимизации метрики преобразования. Например, процессор 160 выравнивания может быть выполнен с возможностью установления опорного изображения 203 посредством для каждого из множества изображений 201-205 вычисления значения преобразования на основании метрики преобразования и выбора одного из упомянутых изображений с наименьшим значением преобразования в качестве опорного изображения 203.

Например, когда преобразования 211-214 устанавливаются в качестве матриц преобразования, значение преобразования может быть вычислено для первого изображения 201 следующим образом. Преобразование, включенное в преобразование второго изображения 202 в первое изображение 201, может соответствовать обратной матрице первой матрицы 211 преобразования. Степень преобразования может соответствовать вычислению нормы L2 обратной матрицы первой матрицы 211 преобразования. Аналогичным образом, преобразование, включенное в преобразование третьего изображения 202 в первое изображение 201, может соответствовать обратной матрице произведения первой матрицы 211 преобразования и второй матрицы 212 преобразования. Степень преобразования может соответствовать вычислению нормы L2 обратной матрицы упомянутого произведения. Посредством применения вышеприведенного вычисления также к четвертому изображению 204 и пятому изображению 205 получается множество степеней преобразования, которые могут быть просуммированы вместе для получения значения преобразования, выражающего степень преобразования, требуемого для выравнивания последовательности 200 изображений по первому изображению 201, т.е. степень преобразования, требуемого для выравнивания второго, третьего, четвертого и пятого изображений 202-205 по первому изображению 201.

Посредством повторения вышеприведенного также для других изображений из множества изображений 201-205 может быть получено множество значений преобразования, при этом каждое из множества значений преобразования выражает степень преобразования, требуемого для выравнивания последовательности 200 изображений по соответствующему одному из множества изображений 201-205.

Значения пр