Устройство передачи, способ передачи, устройство приёма и способ приёма

Устройство передачи, способ передачи, устройство приёма и способ приёма

Иллюстрации

Показать все

Реферат

Область техники, к которой относится изобретение

Настоящая технология относится к устройству передачи, способу передачи, устройству приема и способу приема, в частности к устройству передачи и т.п., которое передает данные пространственного или временного изображения со сверхвысоким разрешением.

Уровень техники

Например, в дополнение к услуге для HD изображения, имеющего 1920×1080 действительных пикселей, была предложена услуга для пространственного изображения со сверхвысоким разрешением, таким как изображения 4 K и 8 K, соответственно имеющие в два раза и в четыре раза больше действительных пикселей в горизонтальном и вертикальном направлениях (см., например, Патентный документ 1). Кроме того, например, в дополнение к услуге для получения изображения, имеющего частоту кадров 30 Гц, была предложена услуга для изображения, имеющего временное сверхвысокое разрешение с частотой кадров 60 Гц и 120 Гц. Следует отметить, что эти услуги для получения изображений со сверхвысоким разрешением будут соответствующим образом называться услугой сверхвысокой четкости.

Список литературы

Патентный документ

Патентный документ 1: Выложенная заявка на японский патент №2011-057069

Раскрытие изобретения

Задачи, решаемые изобретением

В случае, когда масштабируемое кодирование применяют к данным изображения, описанной выше услуги сверхвысокой четкости, данные изображения, имеющие разрешение, соответствующее характеристикам собственного дисплея, могут быть легко получены даже в приемнике, который не поддерживает услугу сверхвысокой четкости. Однако, в случае, когда масштабируемое кодирование не применяется к данным изображения услуги сверхвысокой четкости, трудно получить данные изображения, имеющие разрешение, соответствующее характеристикам собственного дисплея, в приемнике, который не поддерживает услугу сверхвысокой четкости.

Цель настоящей технологии состоит в том, чтобы способствовать получению данных изображения, имеющих разрешение, соответствующее характеристикам собственного дисплея в приемнике, который не поддерживает услугу сверхвысокой четкости, в случае, когда данные изображения услуги сверхвысокой четкости передают без масштабируемого кодирования.

Решения задачи

В соответствии с аспектом настоящей технологии, устройство передачи включает в себя: модуль передачи, выполненный с возможностью передачи контейнера в заданном формате, имеющего видеопоток, включающий в себя данные кодированного изображения; и модуль вставки вспомогательной информации, выполненный с возможностью вставки в видеопоток вспомогательной информации для уменьшения пространственного и/или временного разрешения данных изображения.

В соответствии с настоящей технологией контейнер в заданном формате, имеющий видеопоток, включающий в себя данные кодированного изображения, передают с помощью модуля передачи. Кодированные данные изображения представляют собой, например, данные изображения, применяемые при кодировании, таком как MPEG4-AVC (MVC), MPEG2 video или HEVC. Контейнер может представлять собой, например, поток транспортирования (MPEG-2 TS), принятый в цифровом стандарте широковещательной передачи. Кроме того, контейнер может представлять собой, например, контейнер в формате МР4, используемом при доставке по Интернет, или в других форматах.

Вспомогательную информацию для уменьшения пространственного и/или временного разрешения данных изображения вставляют в видеопоток с помощью модуля вставки вспомогательной информации. Например, вспомогательная информация может обозначать предел точности для вектора движения, включенного в данные кодированного изображения. Кроме того, например, вспомогательная информация может идентифицировать изображение, выбираемое во время уменьшения временного разрешения в заданном соотношении.

Таким образом, в соответствии с настоящей технологией, вспомогательную информацию для уменьшения пространственного и/или временного разрешения данных изображения вставляют в видеопоток. Поэтому, в случае, когда данные изображения услуги сверхвысокой четкости передают без масштабируемого кодирования, данные изображения, имеющие разрешение, соответствующее возможностям собственного дисплея, могут быть легко получены в приемнике, который не поддерживает услугу сверхвысокой четкости.

В то же время, в соответствии с настоящей технологией, например, модуль вставки информации идентификации, выполненный с возможностью вставки, на уровне контейнера, информации идентификации, обозначающей, что вспомогательная информация вставлена в видеопоток, может быть дополнительно предусмотрен. В этом случае, приемник может быстро определять, что вспомогательная информация вставлена в видеопоток даже без декодирования видеопотока и вспомогательная информация может быть выделена соответственно.

Например, к информации идентификации может быть добавлена информация уменьшения разрешения, обозначающая допустимое отношение при уменьшении пространственного и/или временного разрешения. Кроме того, к информации идентификации может быть добавлена информация пространственного и/или временного разрешения для данных изображения, включенных в видеопоток. Кроме того, контейнер представляет собой, например, поток транспортирования, и модуль вставки информации идентификации может быть выполнен с возможностью вставки информации идентификации в дескриптор, в элементарный цикл обработки видеоданных таблицы карты программы, включенной в поток транспортирования.

Кроме того, в соответствии с настоящей технологией может быть дополнительно предусмотрен, например, модуль вставки информации разрешения, выполненный с возможностью вставки, на уровень контейнера, информации пространственного и/или временного разрешения данных изображения, включенных в видеопоток. В этом случае, содержание обработки по уменьшению разрешающей способности может быть определено на основе информации разрешения в приемнике, не поддерживающей услугу сверхвысокого разрешения в случае, когда данные изображения услуги сверхвысокого разрешения передают без масштабируемого кодирования.

Например, к информации разрешения может быть добавлена информация идентификации, идентифицирующая, предусмотрен ли видеопоток с поддержкой для декодера с низкими характеристиками, который не поддерживает пространственное и/или временное разрешение данных изображения. Кроме того, контейнер представляет собой, например, поток транспортирования, и модуль вставки информации разрешения может быть выполнен с возможностью вставки информации разрешения в дескриптор ниже таблицы информации события, включенной в поток транспортирования.

Кроме того, в соответствии с еще одним другим аспектом настоящей технологии, устройство передачи включает в себя: модуль передачи, выполненный с возможностью передавать контейнер в заданном формате, имеющем видеопоток, включающий в себя кодированные данные изображения; и модуль вставки информации идентификации, выполненный с возможностью вставки на уровне контейнера информации идентификации, такой, как услуга сверхвысокого разрешения, с использованием видеопотока, может быть идентифицирован, по меньшей мере, на основе каждой программы.

В соответствии с настоящей технологией, контейнер в заданном формате, имеющий видеопоток, включающий в себя данные изображения, передают с помощью модуля передачи. Контейнер может, например, представлять собой поток транспортирования (MPEG-2 TS), принятый в стандарте цифровой широковещательной передачи. Кроме того, контейнер может представлять собой, например, контейнер в формате МР4, используемом при доставке данных в Интернет или в других форматах.

Информацию идентификации вставляют на уровне контейнера с помощью модуля вставки информации идентификации таким образом, что услуга сверхвысокого разрешения, предоставляемая этим видеопотоком, может быть идентифицирована, по меньшей мере, для каждой программы. Например, к информации идентификации может быть добавлена информация пространственного и/или временного разрешения данных изображения. Контейнер представляет собой, например, транспортный поток, и модуль вставки информации идентификации может быть выполнен с возможностью вставки информации идентификации в дескриптор под таблицей информации события, включенной в поток транспортирования.

Таким образом, в соответствии с настоящей технологией, информацию идентификации вставляют на уровне контейнера таким образом, что услуга сверхвысокого разрешения по видеопотоку может быть идентифицирована, по меньшей мере, для каждой программы. Поэтому, приемник может легко идентифицировать услугу сверхвысокого разрешения и правильно и мгновенно определять, требуется ли выполнять обработку уменьшения пространственного и/или временного разрешения и также его отношение, путем выполнения сравнения с возможностями собственного дисплея.

В то же время, в соответствии с настоящей технологией, к информации идентификации может быть добавлена, например, информация поддержки, обозначающая, предусмотрена ли в видеопотоке поддержка декодера с низкими характеристиками, которая не поддерживает пространственное и/или временное разрешение данных изображения. В этом случае приемник может легко определять, предусмотрена ли в видеопотоке поддержка для декодера с низкими характеристиками, более конкретно, определять, была ли вставлена или нет вспомогательная информация для уменьшения пространственного и/или временного разрешения и т.п.

Кроме того, в соответствии с еще одним, другим аспектом настоящей технологии, устройство приема включает в себя: модуль приема, выполненный с возможностью приема видеопотока, включающего в себя данные кодированного изображения; и модуль обработки, выполненный с возможностью применять обработку уменьшения пространственного и/или временного разрешения для кодированных данных изображения на основе вспомогательной информации, для уменьшения пространственного и/или временного разрешения данных изображения, и получать данные отображаемого изображения, имеющего требуемое разрешение, в котором вспомогательную информацию вставляют в видеопоток.

В соответствии с настоящей технологией, видеопоток, включающий в себя кодированные данные изображения, принимают с помощью модуля приема. Вспомогательную информацию для уменьшения пространственного и/или временного разрешения данных изображения вставляют в видеопоток. Кроме того, применяют обработку уменьшения пространственного и/или временного разрешения для кодированных данных изображения с использованием модуля обработки на основе вспомогательной информации, и могут быть получены данные отображаемого изображения, имеющие требуемое разрешение.

Таким образом, в соответствии с настоящей технологией, применяют обработку уменьшения пространственного и/или временного разрешения для данных кодированного изображения на основе вспомогательной информации, вставленной в видеопоток, и могут быть получены данные изображения дисплея, имеющие требуемое разрешение. Поэтому, может быть уменьшена нагрузка, связанная с обработкой по уменьшению разрешения.

В то же время, в соответствии с настоящей технологией, например, модуль приема может принимать контейнер в заданном формате, включающем в себя видеопоток, информация уменьшения разрешения, обозначающая доступное отношение при уменьшении пространственного и/или временного разрешения может быть вставлена на уровне контейнера, и модуль обработки может управлять обработкой уменьшения разрешения, для получения данных изображения дисплея на основе информации уменьшения разрешения.

Кроме того, в соответствии с настоящей технологией, например, модуль приема может принимать контейнер в заданном формате, включающем в себя видеопоток, информация о пространственном и/или временном разрешении данных изображения, включенных в видеопоток, может быть вставлена на уровне контейнера, и модуль обработки может управлять обработкой по уменьшению разрешения для получения данных изображения дисплея на основе информации разрешения.

Результаты изобретения

В соответствии с настоящей технологией, в случае, когда данные изображения услуги сверхвысокой четкости передают без кодирования масштабирования, данные изображения, имеющие соответствующее разрешение для возможностей собственного дисплея, могут быть легко получены в приемнике, который не поддерживает услугу сверхвысокой четкости.

Краткое описание чертежей

На фиг. 1 показана блок-схема, иллюстрирующая примерную конфигурацию системы передачи и приема изображения, как вариант осуществления.

На фиг. 2(а)-2(с) показаны пояснительные схемы для обработки уменьшения пространственного разрешения.

На фиг. 3 показана блок-схема, иллюстрирующая примерную конфигурацию декодера приемника.

На фиг. 4(а)-4(d) показаны пояснительные схемы для обработки уменьшения пространственного разрешения.

На фиг. 5 показана пояснительная схема для случая, когда нет предела для точности вектора MV движения, например в случае, когда точность вектора MV1 движения составляет 1/4-пикселя (четверть пикселя).

На фиг. 6 показана пояснительная схема для случая, когда существует предел, предусмотренный для точности вектора MV движения, например в случае, когда точность вектора MV2 движения составляет 1/2-пикселя (половину пикселя).

На фиг. 7(а)-7(с) показаны пояснительные схемы для обработки уменьшения временного разрешения.

На фиг. 8 показана блок-схема, иллюстрирующая примерную конфигурацию модуля генерирования данных передачи, выполненного с возможностью генерировать транспортный поток TS.

На фиг. 9(a)-9(b) показаны схемы, иллюстрирующие головной модуль доступа GOP, в который вставлено сообщение SEI как вспомогательная информация, и другое устройство доступа, кроме головного модуля доступа.

На фиг. 10(а) и 10(b) показаны схемы, иллюстрирующие примерные структуры (синтаксис) сообщения SEI (сообщение SEI downscaling spatial), каждое включающее в себя информацию, обозначающую предел точности для вектора MV движения как вспомогательную информацию.

На фиг. 11 представлена схема, иллюстрирующая содержание основной информации в примерной структуре сообщения SEI (сообщение SEI downscaling_spatial).

На фиг. 12(а) и 12(b) показаны схемы, иллюстрирующие примерные структуры (синтаксис) сообщения SEI (picture temporal_pickup SEI), каждое включающее в себя информацию, обозначающую изображение, которое должно быть выбрано во время уменьшения временного разрешения в заданном отношении, как вспомогательную информацию.

На фиг. 13 представлена схема, иллюстрирующая содержание основной информации в примерной структуре сообщения SEI (сообщение SEI picture_temporal_pickup).

На фиг. 14 представлена схема, иллюстрирующая примерную структуру (синтаксис) дескриптора уменьшения (downscaling_descriptor).

На фиг. 15 представлена схема, иллюстрирующая модифицированный пример структуры (синтаксис) дескриптора уменьшения (downscaling_descriptor).

На фиг. 16 представлена схема, иллюстрирующая содержание основной информации в примерной структуре дескриптора уменьшения (downscaling_descriptor).

На фиг. 17 представлена схема, иллюстрирующая примерную структуру (синтаксис) дескриптора сверхвысокого разрешения.

На фиг. 18 представлена схема, иллюстрирующая содержание основной информации в примерной структуре дескриптора сверхвысокого разрешения.

На фиг. 19 представлена схема, иллюстрирующая примерную конфигурацию транспортного потока TS.

На фиг. 20 показана блок-схема, иллюстрирующая примерную конфигурацию приемника.

Осуществление изобретения

Далее будет описан режим выполнения изобретения (ниже называется "вариантом осуществления"). Следует отметить, что описание будет представлено в следующем порядке:

1. Вариант осуществления.

2. Модифицированный пример.

1. Вариант осуществления

Система передачи и приема изображения

На фиг. 1 показана схема, иллюстрирующая примерную конфигурацию системы 10 передачи и приема изображения, в соответствии с вариантом осуществления. Система 10 передачи и приема изображения включает в себя станцию 100 широковещательной передачи и приемник 200. Станция 100 широковещательной передачи передает поток TS транспортирования, как контейнер, через волну широковещательной передачи.

Поток TS транспортирования имеет видеопоток, включающий в себя кодированные данные изображения. Данные изображения передачи включают в себя данные, соответствующие разным видам услуг формирования изображения. Примеры услуг формирования изображений могут включать в себя, в дополнение к услуге для изображения высокой четкости (HD), имеющего 1920×1080 действительных пикселей, услуги для пространственного изображения сверхвысокой четкости, в виде изображений 4 K и 8 K, соответственно имеющих в два раза и в четыре раза больше действительных пикселей в горизонтальном и вертикальном направлениях (услуга сверхвысокой четкости). Кроме того, примеры, включающие в себя услуги формирования изображения, могут включать в себя, в дополнение к услуге формирования изображений для изображения, имеющего частоту кадров 30 Гц, услугу для изображения с временным сверхвысоким разрешением, имеющим частоту кадров, такую как 60 Гц и 120 Гц (услуга сверхвысокой четкости).

Что касается данных изображения услуги сверхвысокой четкости, возникают случаи, когда: применяют данные изображения, переданные после масштабируемого кодирования; и данные изображения передают без масштабируемого кодирования. Обратная совместимость гарантируется путем применения масштабируемого кодирования для данных изображения, и данных изображения, имеющих соответствующее разрешение, так, чтобы собственные возможности дисплея могли быть легко получены, даже если приемник не поддерживает услугу сверхвысокой четкости.

В случае передачи данных изображения услуги сверхвысокой четкости вспомогательную информацию для уменьшения пространственного и/или временного разрешения данных изображения вставляют в видеопоток. Вспомогательную информацию вставляют, например, в область данных пользователя для заголовка изображения или заголовка последовательности видеопотока.

Например, вспомогательная информация для уменьшения пространственного разрешения обозначает предел точности для вектора движения, включенного в кодированные данные изображения. Например, когда предел точности нормального вектора движения составляет 1/4 точности пикселей, предел точности для вектора движения меняется, например, на точность 1/2 пикселя или точность 1 пиксель для уменьшения нагрузки на обработку, для снижения пространственного разрешения на стороне приемника.

Кроме того, вспомогательная информация для уменьшения временного разрешения идентифицирует изображение, которое должно быть выбрано во время уменьшения временного разрешения при заданном отношении. Например, изображение, которое должно быть выбрано во время уменьшения разрешения с отношением ½, соответствует каждому второму изображению (кадру), обозначено этой информацией. Кроме того, например, изображение, которое должно быть выбрано во время уменьшения разрешения с отношением ¼, соответствует каждому четвертому изображению (кадру), обозначено этой информацией.

В результате вставки вспомогательной информации, как описано выше, данные изображения, имеющие разрешение, соответствующее способности собственного дисплея, могут быть легко получены в приемнике, который не поддерживает услугу сверхвысокой четкости, в случае, когда данные изображения услуги сверхвысокой четкости передают без масштабируемого кодирования. Детали вспомогательной информации будут описаны ниже.

Кроме того, идентифицирующую информацию, обозначающую, что вспомогательная информация вставлена в видеопоток, вставляют на уровне потока TS транспортирования. Например, идентифицирующую информацию вставляют ниже элементарного контура видеоизображения (контур Video ES) таблицы программной карты (РМТ: таблица программной карты), включенной в поток TS транспортирования. Такая идентифицирующая информация обеспечивает для стороны приема возможность определять, что вспомогательная информация была вставлена в видеопоток, хотя и без декодирования видеопотока, и вспомогательная информация может быть соответствующим образом выделена.

Возможен случай, когда к описанной выше информации уменьшения добавляют информацию пространственного и/или временного разрешения данных изображения, включенных в видеопоток. В этом случае сторона приема может определять пространственное и/или временное разрешение данных изображения, без декодирования видеопотока. Детали информации уменьшения разрешения будут описаны ниже.

Кроме того, информацию идентификации вставляют на уровне потока TS транспортирования таким образом, что услуга сверхвысокой четкости видеопотока может быть идентифицирована, по меньшей мере, на уровне программы. Например, в соответствии с настоящим вариантом осуществления, информацию пространственного и/или временного разрешения данных изображения, включенных в видеопоток, вставляют на уровне потока TS транспортирования. Например, информацию разрешения вставляют под таблицей информации события (EIT: Таблица информации события), включенной в поток TS транспортирования. Благодаря информации разрешения (идентифицирующей информации), можно определять данные изображения пространственного и/или временного разрешения, без декодирования видеопотока.

К информации разрешения добавляют идентифицирующую информацию, которая идентифицирует, предусмотрена ли в видеопотоке поддержка для декодера с низкими характеристиками, не поддерживающего пространственное и/или временное разрешение данных изображения. В этом случае сторона приема может легко определять, предусмотрена ли в видеопотоке поддержка декодера с низкими характеристиками, более конкретно, вставлена или нет вспомогательная информация для уменьшения пространственного и/или временного разрешения и т.п. Детали информации разрешающей способности будут описаны ниже.

Приемник 200 принимает поток TS транспортирования, переданный из станции 100 широковещательной передачи через волну широковещательной передачи. Поток TS транспортирования имеет поток видеоданных, включающий в себя данные кодированного изображения. Приемник 200 выполняет обработку декодирования для видеопотока и получает данные изображения дисплея.

В случае, когда данные изображения услуги сверхвысокой четкости передают без масштабируемого кодирования, и собственные возможности дисплея не поддерживает услугу сверхвысокой четкости, приемник 200 применяет обработку уменьшения пространственного и/или временного разрешения для кодированных данных изображения на основе вспомогательной информации, и получает данные изображения дисплея, имеющие требуемое разрешение. В этом случае обработкой уменьшения разрешения управляют по разрешению принятых данных изображения и доступному отношению для уменьшения разрешения.

Например, возможен случай, когда данные изображения дисплея, имеющие требуемое разрешение, не могут быть получены, в зависимости от разрешения принятых данных изображения и доступного отношения по уменьшению разрешения, но в таком случае, обработка по уменьшению разрешения не выполняется. Кроме того, в случае, когда существует множество доступных отношений для уменьшения разрешения, данные изображения дисплея, имеющие требуемое разрешение, получают путем выбора отношения уменьшения разрешения, в соответствии с разрешением принятых данных изображения.

Обработка уменьшения разрешения

Обработка уменьшения разрешения, выполняемая в приемнике 200, будет описана ниже. Вначале будет описана обработка уменьшения пространственного разрешения.

Например, представлен случай, в котором данные принятого изображения представляют собой данные изображения 8 K, как представлено на фиг. 2(а). Более конкретно, обработка по уменьшению разрешения, для уменьшения пространственного разрешения до 1/2 в горизонтальном и вертикальном направлениях применяется в приемнике 200, который обладает возможностями отображения 4 K изображения, и данные изображения для 4 K изображения могут быть получены, как представлено на фиг. 2(b). Кроме того, например, обработка по уменьшению разрешения для уменьшения пространственного разрешения до 1/4 в горизонтальном и вертикальном направлениях применяется в приемнике 200, который обладает возможностью отображения для HD изображения, и данные изображения для HD изображения могут быть получены, как представлено на фиг. 2(с).

На фиг. 3 представлена схема, иллюстрирующая примерную конфигурацию декодера приемника 200. Обработка энтропийного декодирования применяется для принятых данным Ve кодированного изображения в модуле 353а энтропийного декодирования, и обработка обратного квантования применяется в модуле 353b обратного квантования. Кроме того, применяется обработка обратного преобразования пространство - частота, в модуле 353 с обратного преобразования пространство - частота к данным, к которым применялась обработка обратного квантования, и получают данные D(n).

В этом случае обработку обратного преобразования пространство-частота применяют только для компонента частоты в области, соответствующей отношению уменьшения разрешения для кодированного блока N*N (см. заштрихованную область на фиг. 4(а), и данные изображения с уменьшенным разрешением получают, как данные D(n). Следует отметить, что пример, показанный на фиг. 4, представляет собой случай, когда отношение уменьшения разрешения составляет 1/2.

Данные пикселя в области, соответствующей вектору MV движения, считывают из данных изображения в предыдущем кадре, записанном в буфере 353d кадра для кодированного блока (см. фиг. 4(b), и подают в фильтр 353е интерполяции, и выполняют операцию арифметической интерполяции для генерирования прогнозируемого блока после интерполяции (см. фиг. 4(с)). Далее, в сумматоре 353f, прогнозируемый блок после интерполяции, генерируемый в фильтре 353е интерполяции, добавляют к данным D(n) (см. фиг. 4(d)), и могут быть получены данные Vd (n) изображения после уменьшения разрешения в текущем кадре.

Здесь точность пикселя для вектора MV движения, добавленного к кодированным данным Ve изображения, определяется, как Р. Например, в случае выполнения декодирования по уменьшению до 1/2 в модуле 353 с обратного преобразования пространство-частота, точность пикселя становится более грубой, а именно 1/2, по сравнению с оригинальной точностью Р. Для выполнения компенсации движения с точностью Р пикселя для оригинального вектора MV движения, данные изображения в буфере 353d фрейма должны быть интерполированы таким образом, чтобы они соответствовали точности Р пикселя.

Например, в случае, когда оригинальный вектор MV движения кодируют с точностью 1/4 пикселя, точность во время применения компенсации движения для данных изображения, которые применяли при декодировании уменьшения и сохранили в буфере 353d кадра, уменьшают до точности 1/2 пикселя данных изображения. Поэтому, данные изображения в буфере 353d кадра должны быть интерполированы до 1/(1/4*1/2), для того, чтобы выполнить компенсацию движения с точностью оригинального вектора MV движения.

Поэтому, в случае, когда отсутствует предел, предусмотренный для точности вектора MV движения, диапазон прогнозируемого пикселя, который представляет собой цель арифметической операции фильтра интерполяции, становится большим, и количество отводов фильтра интерполяции увеличивается. В результате, нагрузка арифметической операции увеличивается. В отличие от этого, в случае, когда существует предел, предусмотренный для точности вектора MV движения, диапазон прогнозируемого пикселя, который должен представлять собой цель арифметической операции фильтра интерполяции, становится малым, и количество отводов фильтра интерполяции уменьшается. В результате, нагрузка арифметической операции уменьшается.

На фиг. 5 представлена схема, иллюстрирующая случай, когда отсутствует предел, предусмотренный для точности вектора MV движения, более конкретно, случай, когда точность вектора MV1 движения представляет собой точность % пикселя (четверть пикселя). В этом случае должна быть выполнена арифметическая операция фильтра, соответствующая количеству фаз, достаточных для охвата точности MV1, для получения пикселя интерполяции среди соседних прогнозируемых пикселей. В случае выполнения арифметической операции интерполяции, используя фильтр низкой частоты, количество выводов фильтра для фильтра интерполяции увеличивается и, соответственно, количество прогнозируемых пикселей, которые должны представлять собой цели, увеличивается для обеспечения большей полосы пропускания, чем определенный уровень, и для того, чтобы сделать область непосредственной близости к частоте среза более крутой.

На фиг. 6 показана схема, иллюстрирующая случай, когда существует предел, предусмотренный для точности вектора MV движения, более конкретно, случай, когда точность вектора MV2 движения представляет собой точность ½ пикселя (половина пикселя). В этом случае арифметическая операция фильтра, соответствующая количеству фаз, достаточна для охвата точности MV2, требуется для исполнения, для получения пикселя интерполяции среди соседних прогнозируемых пикселей. Поскольку точность MV2 является более грубой, чем точность MV1, количество фаз становится меньшим. В этом случае, по сравнению с представленным выше случаем, когда предусмотрен не предел, меньшее количество отводов фильтра интерполяции и меньшее количество прогнозируемых пикселей, которые должны представлять собой цели, требуется для обеспечения эквивалентного пропускания.

Исходя из этого, в соответствии с настоящим вариантом осуществления, кодирование выполняют путем соответствующего предоставления предела точности для вектора MV движения на стороне передачи, так же, как и для описанного выше вектора MV2 движения. В этом случае, в соответствии с настоящим вариантом осуществления, информацию, относящуюся к пределу точности для вектора MV движения, вставляют в видеопоток, как вспомогательную информацию. Приемник 200 распознает предел точности вектора MV движения из вспомогательной информации во время выполнения обработки уменьшения пространственного разрешения, и может выполнять обработку интерполяции, соответствующую пределу точности. В результате, может быть уменьшена нагрузка на обработку.

Далее будет описана обработка уменьшения временного разрешения. Например, будет рассмотрен случай, в котором данные принятого изображения представляют собой данные изображения 120 кадров/с, как представлено на фиг. 7(а). Флаг половины частоты кадров и флаг четверти частоты кадров вставляют в видеопоток, как вспомогательную информацию.

Флаг половины частоты кадров равен "1" для каждого второго изображении (кадра). Другими словами, изображение, которое выбирают, может быть идентифицировано, как флаг половины частоты кадров во время уменьшения временного разрешения до 1/2. Кроме того, флаг четверти частоты кадров устанавливают в "1" для каждых трех изображений (кадров). Другими словами, изображение, которое должно быть выбрано, может быть идентифицировано по флагу четверти частоты изображения во время уменьшения временного разрешения до 1/4.

Например, в приемнике 200, имеющем способность отображения для изображения 60 кадров/с, только каждое второе изображение выбирают и декодируют для получения данных изображения для изображения с частотой 60 кадров/с на основе флага половины частоты изображения, как представлено на фиг. 7(b). Кроме того, например, в приемнике 200, имеющем возможности дисплея для изображения 30 кадров/с, каждые четыре изображения выбирают и декодируют для получения данных изображения для изображения 30 кадров/с на основе флага четверти частоты кадров, как представлено на фиг. 7(с).

Примерная конфигурация модуля генерирования данных передачи

На фиг. 8 показана примерная конфигурация модуля 110 генерирования данных передачи, выполненного с возможностью генерировать описанный выше поток TS транспортирования в станции 100 широковещательной передачи. Модуль 110 генерирования данных передачи включает в себя модуль 111 вывода данных изображения, видеокодер 112, модуль 115 вывода аудиоданных, аудиокодер 116 и мультиплексор 117.

Модуль 111 вывода данных изображения выводит данные изображения, соответствующие различным видам услуг формирования изображения. Примеры услуг формирования изображения могут включать в себя, в дополнение к услуге изображения высокой четкости (HD), имеющего 1920×1080 действительных пикселей, услугу для изображения со сверхвысоким пространственным разрешением, такого как изображения 4 K и 8 K, соответственно имеющие в два раза и в четыре раза больше действительных пикселей в горизонтальном и вертикальном направлениях (услуга сверхвысокой четкости). Кроме того, примеры услуг формирования изображения могут включать в себя, в дополнение к услуге формирования изображений для изображения, имеющего частоту кадров 30 Гц, услугу для изображения со сверхвысоким временным разрешением, имеющего частоту кадров, такую как 60 Гц и 120 Гц (услуга сверхвысокой четкости). Модуль 111 вывода данных изображения сформирован, например, из камеры, выполненной с возможностью съемки изображения объекта и вывода данных его изображения, или модуля считывания данных изображения, выполненного с возможностью считывания данных изображения из модуля сохранения и вывода его данных изображения.

Видеокодер 112 применяет кодирование, такое как MPEG4-AVC (MVC), MPEG2 video или HEVC к данным изображения, выводимым из модуля 111 вывода данных изображения, и получает кодированные данные изображения. Далее, видеокодер 112 генерирует видеопоток (элементарный видеопоток), включающий в себя данные кодированного изображения, используя форматировщик потока (не показан), расположенный в следующем каскаде.

В этом случае, например, возможен случай, когда к данным изображения услуги сверхвысокой четкости применяют масштабируемое кодирование для гарантирования обратной совместимости, в то время как также возможен случай, когда к данным изображения не применяют масштабируемое кодирование. В случае, когда к данным изображения не применяют масштабируемое кодирование, видеокодер 112 вставляет в видеопоток вспомогательную информацию для уменьшения пространственного и/или временного разрешения для удобства приемника, который не поддерживает услугу сверхвысокой четкости.

Модуль 115 вывода аудиоданных выводит аудиоданные, соответствующие данным изображения. Модуль 115 вывода аудиоданных сформирован, например, из микрофона или модуля считывания аудиоданных, выполненного с возможностью считывания аудиоданных с носителя информации, и выводит аудиоданные. Аудиокодер 116 применяет кодирование, такое как кодирование аудиоданных MPEG-2 и ААС, к аудиоданным, выводимым из модуля 115 вывода аудиоданных, и генерирует поток аудиоданных (элементарный поток аудиоданных).

Мультиплексор 117 пакетирует и мультиплексирует каждый из элементарных потоков, генерируемых в видеокодере 112, графическом кодере 114 и аудиокодере 116, и генерирует поток TS транспортирования. В этом случае PTS (временной штамп представления) вставляют в заголовок каждого PES (пакетированного элементарного потока) для синхронного воспроизведения на стороне приема.

Мультиплексор 117 вставляет, на уровень потока TS транспортирования, информацию уменьшения, обозначающую уменьшение пространственного и/или временного разрешения при доступном отношении в случае, когда данные изображения услуги сверхвысокой четкости передают без масштабируемого кодирования. Более конкретно, информацию уменьшения вставляют под элементарным видеоконтуром (контур Video ES) таблицы карты программы (РМТ: таблица карты программы), включенной в поток TS транспортирования.

Кроме того, мультиплексор 117 вставляет информацию идентификации на уровне потока TS транспортирования такую, что услуга сверхвысокой четкости видеопотока может быть идентифицирована, по меньшей мере, для каждой программы. Например, в со