Носитель записи информации и устройство воспроизведения для воспроизведения 3d изображений

Иллюстрации

Показать все

Изобретение относится к средствам воспроизведения потоковой видеоинформации. Техническим результатом является повышение точности отображения субтитров при смещении отображаемых данных видео в плоскости экрана. Устройство включает таблицу выбора потока, указывающую потоковую запись и атрибут потока субтитров, воспроизводимого в моноскопического режиме, и содержит регистр хранения информации о режиме сдвига видео, где режим сдвига видео включает сдвиг вверх и вниз. При сдвиге изображения вверх или вниз устройство сдвигает видео данные, сформированные из видеопотока, в плоскости видео вверх или вниз и размещает данные субтитров, сформированных из потока субтитров, соответственно в нижнем или в верхнем конце плоскости видео. 2 н.п. ф-лы, 110 ил.

Реферат

Область техники

Настоящее изобретение относится к технологии воспроизведение 3D и 2D изображений.

Уровень техники

2D изображения, также именуемые моноскопическими изображениями, представлены пикселями на плоскости X-Y, которая применяется к экрану дисплея устройства отображения. Напротив, 3D изображения имеют глубину в направлении оси Z помимо пикселей на плоскости X-Y, применяемой к экрану устройства отображения.

3D изображения представляются наблюдателям (пользователям) путем одновременного воспроизведения изображений левого вида и правого вида для наблюдения, соответственно, левым и правым глазами, что позволяет создавать стереоскопический эффект. Пользователи могут видеть, помимо пикселей, образующих 3D изображение, пиксели, имеющие положительные координаты по оси Z перед экраном дисплея, и пиксели, имеющие отрицательные координаты по оси Z за экраном дисплея.

Предпочтительно, чтобы оптический диск, где хранится 3D изображение, был совместимым с устройством воспроизведения, которое может воспроизводить только 2D изображения (далее такое устройство воспроизведения именуется "устройство 2D воспроизведения"). Причина в том, что, в противном случае, пришлось бы производить два типа дисков для 3D и 2D изображений, чтобы устройство 2D воспроизведения могло воспроизводить тот же контент, который хранится на диске для 3D изображения. Такая организация потребовала бы больших затрат. Соответственно, необходимо обеспечить оптический диск, где хранится 3D изображение, которое воспроизводится как 2D изображение устройством 2D воспроизведения и как 2D или 3D изображение устройством воспроизведения, поддерживающим 3D и 2D изображения (далее такое устройство воспроизведения именуется "устройство 2D/3D воспроизведения").

Японский патент № 3935507 является одним примером документов уровня техники, где описаны технологии, обеспечивающие совместимость воспроизведения между 2D и 3D изображениями, в отношении оптических дисков, где хранятся 3D изображения.

Библиография

[Патентная литература]

[Патентная литература 1] Японский патент № 3935507

Сущность изобретения

Техническая проблема

В частности, в случае кинофильма и пр., данные субтитра хранятся в субтитре оптического диска. В общем случае, при воспроизведении такого кинофильма, субтитры накладываются на видеоматериалы для отображения. При этом если в кинофильм включены длинные сценарии или дикторские тексты, большая часть экрана оказывается занятой областями отображения для символов субтитра. Если воспроизведение видео с высоким уровнем перехода наружу осуществляется в состоянии, когда большая часть экрана занята областями отображения для символов субтитра, субтитры перекрывают стереоскопическое отображение видео. Это приводит к воспроизведению стереоскопического изображения, которое чрезвычайно трудно наблюдать. Существует способ перемещения позиции размещения символов субтитра и конца экрана, при котором субтитры не перекрывают стереоскопическое отображение видео. Однако стереоскопический эффект видео значительно различается в зависимости от позиции воспроизведения в совокупности секций воспроизведения на временной оси видеопотока. Кроме того, символы субтитра часто различаются количеством символов в зависимости от типа языка. Соответственно, если любой из концов экрана однородно зафиксирован как область отображения субтитра, эффективность использования экрана снижается. В результате, даже если пользователь тратит деньги на приобретение дорогостоящего широкоэкранного 3D TV, может случиться так, что пользователь не сможет в полной мере наслаждаться стереоскопическим эффектом.

Настоящее изобретение предусматривает носитель записи, позволяющий избежать ухудшения стереоскопического эффекта вследствие снижения эффективности использования экрана.

Решение проблемы

Настоящее изобретение предусматривает носитель записи, на котором записаны видеопоток, составляющий стереоскопическое изображение, информация списка воспроизведения и совокупность потоков субтитров, причем информация списка воспроизведения включает в себя таблицу выбора потока и совокупность фрагментов дополнительной информации, в таблице выбора потока указаны номер потока, потоковая запись и атрибут потока для каждого потока субтитров, разрешенного к воспроизведению в режиме моноскопического воспроизведения, каждый из фрагментов дополнительной информации соответствуют номеру потока, и каждый из фрагментов дополнительной информации включает в себя флаг сохранения области, указывающий, в качестве области отображения субтитра в режиме стереоскопического воспроизведения устройства воспроизведения, верхний конец или нижний конец в плоскости видео, причем субтитр получается путем декодирования потока субтитров, соответствующего фрагменту дополнительной информации, при воспроизведении носителя записи на устройстве воспроизведения, если флаг сохранения области указывает верхний конец, устройство воспроизведения сдвигает видеопоток в плоскости видео вниз и рендеризует сдвинутый видеопоток, и, если флаг сохранения области указывает нижний конец, устройство воспроизведения сдвигает видеопоток в плоскости видео вверх и рендеризует сдвинутый видеопоток.

Преимущества изобретения

Дополнительная информация, включающая в себя флаг сохранения области, задающий область отображения субтитра, включена в таблицу выбора потока для каждой секции воспроизведения в соответствии с номером потока. При изменении секции воспроизведения или при приеме запроса на изменение потока, выполняется процедура выбора потока. Номер потока в соответствии с языковыми настройками устройства воспроизведения устанавливается в регистре номеров потока. В результате, устройство воспроизведения обеспечивает флаг сохранения области, указанный фрагментом дополнительной информации, соответствующий установленному номеру потока. Благодаря такой структуре, можно реализовать управление, при котором область отображения субтитра сохраняется в верхнем конце экрана в секции воспроизведения, и область отображения субтитра сохраняется в нижнем конце экрана в другой секции воспроизведения.

Размер киноэкрана (1:2.35), в общем случае используется для аспектного отношения видео в фильмах. В случае, когда видеоматериалы хранятся на оптическом диске, например, BD-ROM, видеоматериал главной особенности располагается в центре HD-видео, имеющего аспектное отношение 16:9, без изменения аспектного отношения, и черный кадр вставляется в верхнюю сторону и нижнюю сторону HD-видео. Соответственно, благодаря вышеописанной структуре, можно отображать субтитры в крупной области отображения субтитра, генерируемой путем сбора черных кадров, находящихся над и под видеоматериалом главной особенности, в верхнем конце и нижнем конце плоскости видео. Это может повышать эффективность использования экрана, тем самым улучшая стереоскопический эффект.

Дополнительная техническая проблема

Согласно воспроизведению 3D-видео, при котором стереоскопический эффект реализуется с использованием разности параллаксов между изображением главного вида и изображением вспомогательного вида, причем разность параллаксов отличается в зависимости от размера экрана устройства отображения. Это обуславливает различие в глубине изображений в зависимости от размера экрана. В результате, если 3D-видео, созданное для наблюдения на устройстве отображения с большим экраном, наблюдается на устройстве отображения с малым экраном, 3D-видео не является мощным, и на таком устройстве отображения отображается меньшая ширина, чем предполагал создатель 3D-видео. С другой стороны, 3D-видео, созданное для наблюдения на устройстве отображения с малым экраном, наблюдается на устройстве отображения с большим экраном, 3D-видео придается избыточное ощущение, в результате чего наблюдатель страдает от напряжения зрения.

Настоящее изобретение призвано обеспечить носитель записи, способный препятствовать возникновению негативного влияния на наблюдение 3D-видео в устройстве отображения с экраном, размер которого отличается от того, который предполагался при создании 3D-видео.

Носитель записи, позволяющий решить вышеозначенную проблему, представляет собой носитель записи, на котором записаны видеопоток главного вида, видеопоток вспомогательного вида и метаданные, причем видеопоток главного вида включает в себя данные изображения главного вида, составляющие главный вид стереоскопического видео, видеопоток вспомогательного вида включает в себя данные изображения вспомогательного вида, составляющие вспомогательный вид стереоскопическое видео, метаданные включают в себя корректирующие значения смещения, каждое из которых соответствует информации размера экрана каждого из совокупности устройств отображения, и корректирующее значение смещения задает смещение для сдвига, влево или вправо по горизонтальной координатной оси, по меньшей мере, одной из плоскости видео главного вида, в которой предусмотрен рендеринг данных изображения главного вида, и плоскости видео вспомогательного вида, в которой предусмотрен рендеринг данных изображения вспомогательного вида.

Придавая данным изображения смещение, заданное в информации размера экрана, для каждого размера экрана дисплея, с целью сдвига плоскости видео, можно придавать стереоскопическому изображению надлежащую разность параллаксов в зависимости от каждого размера экрана. В результате, благодаря вышеописанной структуре, можно препятствовать возникновению негативного влияния на наблюдение 3D-видео в устройстве отображения с экраном, размер которого отличается от того, который предполагался при создании 3D-видео.

Краткое описание чертежей

Фиг.1A-1C - система домашнего кинотеатра, которая состоит из носителя записи, являющегося носителем в комплекте, устройства воспроизведения, являющегося устройством проигрывателя, устройства отображения и очков.

Фиг.2 - голова пользователя в левой стороне чертежа и изображения скелета динозавра, видимые, соответственно, левым глазом и правым глазом пользователя в правой стороне чертежа.

Фиг.3 - один пример внутренних структур видеопотоков левого вида и правого вида для стереоскопического наблюдения.

Фиг.4 - иллюстрация концепции сбора черных кадров, которые не используются для видеоматериала главной особенности, и отображения данных субтитра на черных кадрах.

Фиг.5A-5C - внутренняя структура носителя записи согласно варианту осуществления 1.

Фиг.6A и 6B - внутренние структуры главного TS и вспомогательного TS.

Фиг.7A-7D - внутренние структуры информации списка воспроизведения.

Фиг.8A-8B - один пример базовой таблицы выбора потока.

Фиг.9 - внутренняя структура расширенной таблицы выбора потока.

Фиг.10A-10C - регистрационные последовательности потоков в расширенной таблице выбора потока.

Фиг.11 - наложение плоскостей в случае, когда video_shift_mode установлен как «оставить».

Фиг.12A - наложение плоскостей в случае, когда video_shift_mode установлен как «вверх», и Фиг.12B - наложение плоскостей в случае, когда video_shift_mode установлен как «вниз».

Фиг.13 - ограничение порядка регистрации графических потоков в таблице выбора потока в случае, когда режим сдвига видео добавляется к дополнительной информации потока информации выбора потока.

Фиг.14 - демультиплексирование элементарных потоков из главного TS и вспомогательных TS с использованием базовой таблицы выбора потока и расширенной таблицы выбора потока.

Фиг.15 - номера потоков, назначаемые в режиме 2D вывода и в режиме 3D вывода.

Фиг.16 - внутренняя структура устройства воспроизведения.

Фиг.17A и 17B - внутренняя структура декодера PG.

Фиг.18A и 18B - внутренняя структура декодера текстовых субтитров.

Фиг.19A и 19B - модели декодера для декодера IG.

Фиг.20 - структура схемы для перекрытия выходов моделей декодера и вывода результата в режиме 3D-LR.

Фиг.21 - структура схемы для перекрытия выходов моделей декодера и вывода результата в режиме «1 плоскость+смещение».

Фиг.22 - структура схемы для наложения данных, выводимых из модели декодера, и вывода наложенных данных в режиме воспроизведения 2D-субтитров верхнего конца и в режиме воспроизведения 2D-субтитров нижнего конца.

Фиг.23 - внутренние структуры набора 203 регистров и движка управления воспроизведением.

Фиг.24 - битовое назначение в PSR24.

Фиг.25A и 25B - битовое назначение в PSR32.

Фиг.26 - процедура воспроизведения списка воспроизведения.

Фиг.27 - логическая блок-схема, демонстрирующая процедуру для определения текущего потока PG/текстовых субтитров при изменении условия воспроизведения.

Фиг.28 - логическая блок-схема, демонстрирующая процедуру обработки определения типа воспроизведения верхнего или нижнего конца.

Фиг.29 - логическая блок-схема, демонстрирующая процедуру для выбора потока PG/текстовых субтитров, который оптимален для текущего элемента воспроизведения.

Фиг.30 - логическая блок-схема, демонстрирующая процедуру, подлежащую выполнению, когда изменение потока запрашивается командой установки стереоскопического потока (командой установки SS потока).

Фиг.31 - логическая блок-схема, демонстрирующая процедуру, подлежащую выполнению, когда изменение потока запрашивается командой установки потока или пользовательской операцией, запрашивающей изменение номера потока.

Фиг.32A и 32B - логические блок-схемы, демонстрирующие процедуры для определения текущего IG-потока и его типа воспроизведения.

Фиг.33A-33C - вывод идентификаторов пакетов на блок демультиплексирования посредством объединенной регистрационной последовательности потоков.

Фиг.34A-34C - вывод идентификаторов пакетов на блок демультиплексирования посредством объединенной регистрационной последовательности потоков.

Фиг.35A-35C - регистрационные последовательности потоков в расширенной таблице выбора потока согласно примеру модификации варианта осуществления 1.

Фиг.36 - структура схемы для наложения данных, выводимых из модели декодера, и вывода наложенных данных в режиме воспроизведения 2D-субтитров верхнего конца и в режиме воспроизведения 2D-субтитров нижнего конца.

Фиг.37 - системный параметр, указывающий величину сдвига каждой плоскости в направлении продольной оси.

Фиг.38 - способ сдвига и обрезки плоскости PG в соответствии с режимом сдвига видео.

Фиг.39 - условие ограничения для размещения данных субтитра в области, которая не обрезается при наложении плоскостей в режиме воспроизведения 2D-субтитров верхнего конца и в режиме воспроизведения 2D-субтитров нижнего конца.

Фиг.40 - функции корректирующего значения выходного смещения для восприятия глубины, на которое влияет каждый размер экрана TV.

Фиг.41 - таблица, в которой записаны дюймовые типы TV, сохраняемые в файле списка воспроизведения, и корректирующие значения выходного смещения.

Фиг.42 - пример, когда изображения отображаются на TV, размер которого превышает оптимальный размер в дюймах.

Фиг.43 - структура устройства 2D/3D воспроизведения для применения корректирующего значения выходного смещения.

Фиг.44 - структура, в которой применяются корректирующее значение выходного смещения и корректирующее значение выходного смещения α.

Фиг.45 - соответствие между файлом «2D»/файлом «базовый» и файлом «зависимый».

Фиг.46A-46C - соответствие между файлом перемеженного потока и файлом «2D»/файлом «базовый».

Фиг.47 - соответствие между файлом стереоскопического перемеженного потока, файлом «2D», файлом «базовый» и файлом «зависимый».

Фиг.48 - список воспроизведения 2D и список воспроизведения 3D.

Фиг.49A-49D - внутренняя структура информационного файла клипа.

Фиг.50 - соответствие между информационным файлом клипа, списком воспроизведения и файлом стереоскопического перемеженного потока.

Фиг.51A и 51B - внутренняя структура базовой информации клипа и зависимой информации клипа.

Фиг.52 - базовая карта записей и расширенная карта записей.

Фиг.53 - записи, не разрешенные в расширенной карте записей.

Фиг.54 - логическая блок-схема, демонстрирующая процедуру воспроизведения элементов воспроизведения.

Фиг.55 - восстановление последовательности ATC из блоков данных, образующих файл стереоскопического перемеженного потока.

Фиг.56A и 56B - иллюстрация восстановления последовательности ATC.

Фиг.57A-57D - один пример таблицы информации начальной точки экстента в информации клипа базового вида и один пример таблицы информации начальной точки экстента в информации клипа зависимого вида.

Фиг.58A-58C - номера пакетов источника произвольных блоков данных в последовательностях ATC 1 и 2.

Фиг.59 - процедура для восстановления последовательности ATC.

Фиг.60 - среда воспроизведения для устройства 2D/3D воспроизведения.

Фиг.61 - случай, когда выводится только один из видеосигнала правого глаза и видеосигнала левого глаза при переключении от воспроизведения 3D-видеосигналов к воспроизведению 2D видеосигналов без переключения частоты кадров.

Фиг.62 - корреляция между субтитрами и потоками для меню, которое используются в BD и пр.

Фиг.63 - обработка для реализации более гладкого отображения 2D/3D-видео.

Фиг.64A и 64B - способ изготовления оптического диска.

Фиг.65 - логическая блок-схема процедуры, осуществляемой на этапе авторинга.

Фиг.66 - логическая блок-схема процедуры для записи AV файла.

Фиг.67 - логическая блок-схема, демонстрирующая процедуру для генерации базовой карты записей и расширенной карты записей.

Фиг.68 - логическая блок-схема, демонстрирующая процедуру для генерации приложения BD-J, объекта BD-J, объекта фильма и индексной таблицы.

Фиг.69 - внутренняя структура многослойного оптического диска.

Фиг.70 - формат приложения оптического диска на основании файловой системы.

Фиг.71 - структура устройства 2D/3D воспроизведения.

Фиг.72A-72C - вариант осуществления действия по использованию носителя записи, отвечающего настоящему изобретению, структуры BD-ROM и структуры файла индекса.

Фиг.73A и 73B - иллюстрация структуры AV клипа и мультиплексирования каждого потока в AV клипе.

Фиг.74A и 74B - подробная иллюстрация сохранения видеопотока в последовательности пакетов PES и иллюстрация пакетов TS и пакетов источника в AV клипе.

Фиг.75A и 75B - структура данных PMT и внутренней структуры информационного файла клипа.

Фиг.76A и 76B - внутренняя структура информации атрибутов потока и внутренняя структура карты записей.

Фиг.77A-77C - внутренняя структура списка воспроизведения и внутренняя структура элемента воспроизведения.

Фиг.78A и 78B - структура устройства 2D воспроизведения и пояснение переменной проигрывателя.

Фиг.79 - внутренняя структура системного целевого декодера.

Фиг.80 - стереоскопическое наблюдение.

Фиг.81 - структура данных потока презентационной графики.

Фиг.82 - обработка декодирования потока презентационной графики.

Фиг.83 - способ сохранения списка воспроизведения значения сдвига при сдвиге видео вверх и значения сдвига при сдвиге видео вниз.

Фиг.84 - структура наложения плоскостей, осуществляемого устройством 2D/3D воспроизведения для осуществления сдвига видео сбора черных кадров на верхней стороне или на нижней стороне.

Фиг.85 - структура списка воспроизведения, в которой режим сдвига видео добавляется к дополнительной информации потока информации выбора потока.

Фиг.86 - способ наложения плоскостей в случае, когда режим сдвига видео добавлен к дополнительной информации потока информации выбора потока.

Фиг.87 - способ создания видеопотока, на более высоком уровне, путем размещения видеоматериала главной особенности не в центре, но чуть выше и способ создания черного кадра, на более низком уровне, путем динамического изменения прозрачного цвета PG-потока.

Фиг.88A и 88B - структура, в которой каждый экстент включает в себя, по меньшей мере, одну точку записи.

Фиг.89A и 89B - способ сохранения метаданных смещения в информационном файле AV-потока.

Фиг.90A и 90B - способ сохранения метаданных смещения для каждой точки записи.

Фиг.91A и 91B - способ сохранения метаданных смещения в списке воспроизведения.

Фиг.92A и 92B демонстрируют, в случае, когда метаданные смещения хранятся в списке воспроизведения, способ не сохранения метаданных смещения, когда текущий элемент воспроизведения совпадает с предыдущим элементом воспроизведения.

Фиг.93 демонстрирует, в случае, когда метаданные смещения хранятся в списке воспроизведения, способ сохранения только одного и того же фрагмента метаданных смещения в отношении совокупности элементов воспроизведения, имеющих один и тот же фрагмент метаданных смещения.

Фиг.94 - список воспроизведения, в котором заголовок в единицах элементов воспроизведения и метаданные смещения сохраняются по отдельности.

Фиг.95 - случай, когда субтитр графики левого глаза согласно 2-плоскостному методу L/R отображается как субтитр 2D-отображения.

Фиг.96 - субтитр 2D-отображения и субтитр метода «1 плоскость+смещение», и значение смещения PG для 2-плоскостного метода L/R для совместного пользования PG левого глаза согласно 2-плоскостному методу L/R.

Фиг.97 - структура разделения 2D/3D пути воспроизведения для увеличения скорости воспроизведения с переходом.

Фиг.98 - пример файла индекса (Index.bdmv), хранящегося на BD-ROM, для воспроизведения стереоскопических изображений.

Фиг.99 - логическая блок-схема, демонстрирующая переключение между воспроизведением списка воспроизведения 2D и списка воспроизведения 3D программы файла программы BD.

Фиг.100 - иллюстративная структура устройства 2D/3D воспроизведения, которое реализуется с использованием интегральной схемы.

Фиг.101 - функциональная блок-схема, демонстрирующая типичную структуру блока обработки потоков.

Фиг.102 - концептуальная схема, демонстрирующая блок переключения и периферию, когда блоком переключения является DMAC.

Фиг.103 - функциональная блок-схема, демонстрирующая типичную структуру блока вывода AV.

Фиг.104 - иллюстративная структура, более подробно демонстрирующая блок вывода AV, или часть вывода данных устройства воспроизведения.

Фиг.105 - конфигурация шин управления и шин данных в интегральной схеме.

Фиг.106 - конфигурация шин управления и шин данных в интегральной схеме.

Фиг.107 - иллюстративная структура устройства отображения, которое реализуется с использованием интегральной схемы.

Фиг.108 - функциональная блок-схема, демонстрирующая типичную структуру блока вывода AV устройства отображения.

Фиг.109 - логическая блок-схема, демонстрирующая операционную процедуру в устройстве воспроизведения.

Фиг.110 - логическая блок-схема, подробно демонстрирующая операционную процедуру в устройстве воспроизведения.

Описание вариантов осуществления

Носители записи, предусмотренные согласно решению вышеописанной проблемы, можно реализовать в виде носителей в комплекте, содержащих контент для продажи в магазине. Кроме того, устройства воспроизведения, поддерживающие носители записи, можно реализовать в виде устройств проигрывателя для воспроизведения носителей в комплекте, и интегральные схемы, поддерживающие носители записи, можно реализовать в виде системных БИС, встраиваемых в устройства проигрывателя.

На Фиг.1A-1C показана система домашнего кинотеатра, которая состоит из носителя записи, являющегося носителем в комплекте, устройства воспроизведения, являющегося устройством проигрывателя, устройства отображения и очков. Согласно Фиг.1A, носитель записи 100, являющийся вышеописанным носителем в комплекте, и устройство воспроизведения 200, являющееся устройством проигрывателя, образуют систему домашнего кинотеатра совместно с устройством отображения 300, 3D очками 400 и пультом дистанционного управления 500. Система домашнего кинотеатра, имеющая такую структуру, подлежит использованию пользователем.

Носитель записи 100 снабжает систему домашнего кинотеатра, например, кинофильмом. Кинофильм может обеспечивать стереоскопическое изображение. Здесь, стереоскопическое изображение состоит из, по меньшей мере, двух изображений точки зрения. Изображение точки зрения это изображение, до некоторой степени отклоненное, и, по меньшей мере, два изображения точки зрения включают в себя изображение главного вида и изображение вспомогательного вида. Согласно Фиг.1A, носитель записи 100 может представлять собой, например, диск или карту памяти из многих типов носителей записи. В дальнейшем, под “носителем записи” будем понимать диск, если не указано обратное.

Устройство воспроизведения 200 соединено с телевизором 300 и воспроизводит носитель записи 100. Устройство воспроизведения, описанное в настоящей заявке, представляет собой устройство 2D/3D воспроизведения (проигрыватель), которое, при наличии режима 2D вывода и режима 3D вывода, может переключаться между этими режимами воспроизведения для воспроизведения видеопотока главного вида и видеопотока вспомогательного вида, представляющего изображение вспомогательного вида.

Устройство отображения 300 представляет собой телевизор и обеспечивает пользователя интерактивной операционной средой путем отображения меню и т.п., а также изображений кинофильмов. В настоящем варианте осуществления, пользователю нужно носить 3D-очки 400 для устройства отображения 300, чтобы реализовать стереоскопическое наблюдение. При этом, 3D-очки 400 не требуются, когда устройство отображения 300 отображает изображения лентикулярным методом.

3D-очки 400 снабжены жидкокристаллическими затворами, которые позволяют пользователю наблюдать параллаксное изображение методом последовательной сегрегации или методом поляризационных очков. Здесь, параллаксное изображение это изображение, которое состоит из пары (i) изображения, которое поступает только в правый глаз и (ii) изображения, которое поступает только в левый глаз, благодаря чему изображения, соответственно, связанные с правым и левым глазом, соответственно поступают в глаза пользователя, что позволяет реализовать стереоскопическое наблюдение. На Фиг.1B показано состояние 3D-очков 400, когда отображается изображение левого вида. В момент, когда изображение левого вида отображается на экране, жидкокристаллический затвор для левого глаза находится в состоянии пропускания света, и жидкокристаллический затвор для правого глаза находится в состоянии блокирования света. На Фиг.1C показано состояние 3D-очков 400, когда отображается изображение правого вида. В момент, когда изображение правого вида отображается на экране, жидкокристаллический затвор для правого глаза находится в состоянии пропускания света, и жидкокристаллический затвор для левого глаза находится в состоянии блокирования света.

Пульт 500 дистанционного управления это устройство для приема от пользователя операций для воспроизведения AV. Пульт 500 дистанционного управления это устройство для приема от пользователя операций на многослойном GUI. Для приема операций, пульт 500 дистанционного управления снабжен кнопкой «меню», кнопками стрелок, кнопкой «ввод», кнопкой «возврат» и цифровыми кнопками, где кнопка «меню» используется для вызова меню, образующего GUI, кнопки стрелок используются для перемещения между и выделения компонентов GUI, образующих меню, кнопка «ввод» используется для осуществления операции ENTER (определения) на компоненте GUI, образующем меню, кнопка «возврат» используется для возврата к более высокому слою в многослойном меню.

В системе домашнего кинотеатра, показанной на Фиг.1A-1C, режим вывода устройства воспроизведения, предписывающий устройству отображения 300 отображать изображения в режиме 3D воспроизведения, называется "режим 3D вывода", и режим вывода устройства воспроизведения, предписывающий устройству отображения 300 отображать изображения в режиме 2D воспроизведения, называется "режим 2D вывода".

На этом завершается описание действия по использованию носителя записи и устройства воспроизведения.

(Вариант осуществления 1)

Вариант осуществления 1 отличается тем, что в регистре устройства воспроизведения хранится информация, указывающая, имеет ли устройство воспроизведения возможность реализовать стереоскопическое наблюдение с использованием графического потока правого глаза и графического потока левого глаза.

В нижеследующем описании, главный вид и вспомогательный вид используются для реализации метода параллаксного изображения. Метод параллаксного изображения (также именуемый режимом 3D-LR) это способ реализации стереоскопического наблюдения путем отдельной подготовки изображения для правого глаза и изображения для левого глаза, и направления изображения для правого глаза только в правый глаз и изображения для левого глаза только в левый глаз. На Фиг.2 показана голова пользователя в левой стороне чертежа и изображения скелета динозавра, видимые, соответственно, левым глазом и правым глазом пользователя в правой стороне чертежа. Когда пропускание и блокирование света повторяются попеременно для правого и левого глаза, левая и правая сцены совмещаются в мозгу пользователя за счет эффекта остаточных изображений в глазах, и совмещенное изображение воспринимается как стереоскопическое изображение, возникающее перед пользователем.

Метод MPEG4-MVC используется как способ кодирования видеопотоков для реализации такого стереоскопического наблюдения. В нижеследующем описании предполагается, что видеопоток главного вида является “видеопотоком базового вида” согласно методу MPEG4-MVC, и видеопоток вспомогательного вида является “видеопотоком зависимого вида” согласно методу MPEG4-MVC.

Видеопоток базового вида согласно MPEG4-MVC является вспомогательным битовым потоком, когда view_id задан равным “0”, и является последовательностью компонентов вида, когда view_id задан равным “0”. Видеопоток базового вида согласно MPEG4-MVC согласуется с ограничениями, налагаемыми на видеопоток MPEG4-AVC.

Видеопоток зависимого вида согласно MPEG4-MVC является вспомогательным битовым потоком, когда view_id задан равным “1”, и является последовательностью компонентов вида, когда view_id задан равным “1”.

Компонент вида является одним из совокупности фрагментов данных изображения, которые одновременно воспроизводятся для стереоскопического наблюдения в течение периода одного кадра. Кодирование со сжатием, которое использует корреляцию между точками вида, реализуется с использованием, в качестве данных изображения, компонентов вида видеопотоков базового вида и зависимого вида для реализации кодирования со сжатием, которое использует корреляцию между изображениями. Компоненты вида видеопотоков базового вида и зависимого вида, назначенные периоду одного кадра, образуют одну единицу доступа. Это позволяет осуществлять произвольный доступ единицами доступа.

Видеопоток базового вида и видеопоток зависимого вида имеют структуру GOP, в которой каждый компонент вида является “изображением”, и состоит из замкнутых GOP и открытых GOP. Замкнутая GOP состоит из IDR-изображения и B-изображений и P-изображений, которые следуют за IDR-изображением. Открытая GOP состоит из I-изображения не-IDR и B-изображений и P-изображений, которые следуют за I-изображением не-IDR.

I-изображения не-IDR, B-изображения и P-изображения кодируются со сжатием на основании кадровой корреляции с другими изображениями. B-изображение это изображение, состоящее из данных среза в двунаправленно-предсказательном (B) формате, и P-изображение это изображение, состоящее из данных среза в предсказательном (P) формате. B-изображение подразделяется на опорное B (Br) изображение и неопорное B (B) изображение.

В замкнутой GOP, IDR-изображение располагается сверху. В порядке отображения, IDR-изображение не располагается сверху, но изображения (B-изображения и P-изображения), отличные от IDR-изображения, не могут иметь отношения зависимости с изображениями, существующими в GOP, которая предшествует замкнутой GOP. Отсюда можно понять, что замкнутая GOP призвана завершать отношение зависимости.

На Фиг.3 показан один пример внутренних структур видеопотоков левого вида и правого вида для стереоскопического наблюдения.

Во второй строке Фиг.3 показана внутренняя структура видеопотока базового вида. Этот поток включает в себя компоненты вида с типами изображения I1, P2, Br3, Br4, P5, Br6, Br7 и P9. Эти компоненты вида декодируются согласно меткам времени декодирования (DTS). Первая строка демонстрирует изображение левого глаза. Изображение левого глаза воспроизводится путем воспроизведения декодированных компонентов вида I1, P2, Br3, Br4, P5, Br6, Br7 и P9 согласно PTS, в порядке I1, Br3, Br4, P2, Br6, Br7 и P5.

В четвертой строке Фиг.3 показана внутренняя структура видеопотока зависимого вида. Этот поток включает в себя компоненты вида с типами изображения P1, P2, B3, B4, P5, B6, B7 и P8. Эти компоненты вида декодируются согласно DTS. Третья строка демонстрирует изображение правого глаза. Изображение правого глаза воспроизводится путем воспроизведения декодированных компонентов вида P1, P2, B3, B4, P5, B6, B7 и P8 согласно PTS, в порядке P1, B3, B4, P2, B6, B7 и P5.

В пятой строке Фиг.3 показано, как изменяется состояние 3D-очков 400. Как показано в пятой строке, при наблюдении изображения левого глаза, закрыт затвор для правого глаза, и при наблюдении изображения правого глаза, закрыт затвор для левого глаза.

Здесь, режим, в котором видеокадры видеопотока базового вида (B) и видеокадры видеопотока зависимого вида (D) попеременно выводятся с циклом отображения 1/48 секунд наподобие "B"-"D"-"B"-"D", называется "режим презентации B-D".

Режим презентации B-D включает в себя режим 3D-глубины, в котором стереоскопическое наблюдение реализуется с использованием 2D изображений и информации глубина, а также режим 3D-LR, в котором стереоскопическое наблюдение реализуется с использованием L (левых) изображений и R (правых) изображений.

Кроме того, режим, в котором видеокадр одного и того же типа повторно выводится два или более раз в то время, как режим 3D поддерживается в качестве режима вывода, называется "режим презентации B-B". В "режиме презентации B-B", видеокадры независимо воспроизводимого видеопотока базового вида повторно выводятся наподобие "B"-"B"-"B"-"B".

Вышеописанные режим презентации B-D и режим презентации B-B являются основными режимами презентации в устройстве воспроизведения. В устройстве воспроизведения доступны режимы вывода, отличные от этих, например, режим «1 плоскость+смещение», режим воспроизведения 2D-субтитров верхнего конца и режим воспроизведения 2D-субтитров нижнего конца.

Режим «1 плоскость+смещение» (также именуемый “режимом 3D-смещения”) является режимом вывода, в котором стереоскопическое наблюдение реализуется путем включения блока сдвига в положении, следующем за блоком памяти плоскости, и применения блока сдвига. В каждом из периода левого вида и периода правого вида, блок смещения плоскости сдвигает координаты пикселей в блоке памяти плоскости в единицах линий влево или вправо для перемещения точки формирования изображения линий наблюдения правого глаза и левого глаза вперед или назад, чтобы наблюдатель мог почувствовать изменение восприятия глубины. В частности, когда координаты пикселей сдвигаются влево в течение периода левого вида, и вправо в течение периода правого вида, точка формирования изображения перемещается вперед; и когда координаты пикселей сдвигаются вправо в течение периода левого вида, и влево в течение периода правого вида, точка формирования изображения перемещается назад.

При таком сдвиге плоскости, блоку памяти плоскости для стереоскопического наблюдения нужно иметь только одну плоскость. Таким образом, это наилучший метод простой генерации стереоскопических изображений. Однако сдвиг плоскости всего лишь создает стереоскопические изображения, в которых моноскопические изображения приближаются или отдаляются. Таким образом, он пригоден для генерации стереоскопического эффекта для меню или субтитра, но оставляет желать лучшего при реализации стереоскопического эффекта для персонажей или физических объектов. Причина в том, что он не может воспроизводить ямочки или неровности на лицах персонажей.

Для поддержания режима «1 плоскость+смещение», устройство воспроизведения имее