Устройство воспроизведения, способ записи, система воспроизведения носителя записи

Устройство воспроизведения, способ записи, система воспроизведения носителя записи

Иллюстрации

Показать все

Реферат

Область техники

Настоящее изобретение относится к технологии воспроизведения 3D (трехмерных) и 2D (двумерных) изображений.

Уровень техники

2D изображения, также именуемые моноскопическими изображениями, представлены пикселями на плоскости X-Y, которая применяется к экрану дисплея устройства отображения.

Напротив, 3D изображения имеют глубину в направлении оси Z помимо пикселей на плоскости X-Y, применяемой к экрану устройства отображения. 3D изображения представляются наблюдателям (пользователям) путем одновременного воспроизведения изображений левого вида и правого вида для наблюдения, соответственно, левым и правым глазами, что позволяет создавать стереоскопический эффект. Пользователи могут видеть, помимо пикселей, образующих 3D изображение, пиксели, имеющие положительные координаты по оси Z перед экраном дисплея, и пиксели, имеющие отрицательные координаты по оси Z за экраном дисплея.

Предпочтительно, чтобы оптический диск, на котором хранится 3D изображение, был совместимым с устройством воспроизведения, которое может воспроизводить только 2D изображения (далее такое устройство воспроизведения именуется "устройство 2D воспроизведения"). Причина этого в том, что, в противном случае, пришлось бы производить два типа дисков для 3D и 2D изображений, чтобы устройство 2D воспроизведения могло воспроизводить тот же контент, который хранится на диске для 3D изображения. Такая организация потребовала бы больших затрат. Соответственно, необходимо обеспечить оптический диск, на котором хранится 3D изображение, которое воспроизводится как 2D изображение устройством 2D воспроизведения и как 2D или 3D изображение устройством воспроизведения, поддерживающим 3D и 2D изображения (далее такое устройство воспроизведения именуется "устройство 2D/3D воспроизведения").

Указанная ниже Патентная литература 1 является одним примером документов уровня техники, где описаны технологии, обеспечивающие совместимость воспроизведения между 2D и 3D изображениями, в отношении оптических дисков, на которых хранятся 3D изображения.

Библиография

[Патентная литература]

[Патентная литература 1]

Японский патент № 3935507

Сущность изобретения

Техническая задача

Изображения левого вида и правого вида, используемые при стереоскопическом воспроизведении, получаются путем съемки с использованием 3D камеры. 3D камера имеет два объектива, разделенные расстоянием, соответствующим параллаксу человеческих существ. Когда изображения левого вида и правого вида, сфотографированные через два объектива, воспроизводятся попеременно, создается параллакс человеческих существ.

Однако субтитр и меню получаются не путем съемки с использованием 3D камеры, но генерируются в процессе авторинга по завершении съемки, при просмотре воспроизводимого стереоскопического видео. Для создания субтитра и меню для каждого из левого и правого видов, представление, как субтитр и меню будут выглядеть при стереоскопическом воспроизведении, требует чрезмерных продолжительности времени и усилий со стороны персонала авторинга. Соответственно, желательно, чтобы процесс создания субтитра и меню при создании стереоскопического контента с субтитром и меню был как можно более эффективным. Кроме того, то, насколько далеко выступает из плоскости экрана движущийся объект в видео, изменяется от момента к моменту для каждого периода кадра. Таким образом, когда глубины субтитра и меню фиксированы, субтитр и меню часто перекрываются с изображением персонажа в видео, создавая странную сцену, вызывающую иронический смех, например, когда появляется прямоугольная рамка меню, пронзающая персонаж на экране. Для предотвращения возникновения таких странных сцен, нужно правильно производить авторинг, даже если это требует много времени и усилий.

Здесь, усилия, необходимые для авторинга, можно до некоторой степени сократить за счет сохранения информации управления для стереоскопического наблюдения субтитра и меню в графическом потоке, чтобы можно было автоматически регулировать глубину графики. Однако существует 32 графических потока, которые представляют субтитр и меню. Некоторые из них могут не декодироваться в зависимости от режима работы устройства, состояния устройства или пользовательского выбора. В связи с этим требуется неэкономичный процесс доступа к графическому потоку, в котором хранится информация управления, для получения информации управления для стереоскопического наблюдения.

Таким образом, задачей настоящего изобретения является обеспечение носителя записи, который позволяет воспроизводить высококачественное стереоскопическое видео без увеличения продолжительности времени и усилий, необходимых для авторинга.

Решение задачи

Для решения вышеописанной задачи предусмотрен носитель записи, на который записываются видеопоток главного вида, видеопоток вспомогательного вида и графический поток, причем видеопоток главного вида включает в себя данные изображения, составляющие главный вид стереоскопического изображения, видеопоток вспомогательного вида включает в себя метаданные и данные изображения, составляющие вспомогательный вид стереоскопического изображения, графический поток включает в себя графические данные, и плоскость графики, на которой визуализируются графические данные, перекрывается плоскостью видео главного вида и плоскостью видео вспомогательного вида, на которой визуализируются соответствующие данные изображения, причем метаданные - это информация управления, задающая управление смещением, которое применяет смещения левого и правого направлений к горизонтальным координатам в плоскости графики, когда плоскость графики перекрывается плоскостью видео главного вида и плоскостью видео вспомогательного вида, и информация управления включает в себя информацию, которая указывает, посредством количества пикселей, значения смещений, применяемых к плоскости графики.

Положительные эффекты изобретения

В вышеописанной структуре задано, что информация управления для управления смещением располагается в видеопотоке вспомогательного вида. Это позволяет легко генерировать информацию управления для управления смещением, когда устройство воспроизведения работает с одной плоскостью, путем генерации информации управления на основании информации глубины, полученной при съемке 3D камерой, или информации параллакса, полученной в процессе кодирования кодером, для генерации видеопотока, и включения генерируемой информации управления в видеопоток вспомогательного вида в качестве метаданных. Это значительно сокращает работу в процессе авторинга. Информация управления задает управление смещением для случая, когда устройство воспроизведения работает с одной плоскостью. Таким образом, даже в отсутствие субтитров или меню для левого и правого видов, стереоскопическое воспроизведение доступно, только если существует только один субтитр или меню. Таким образом, структура настоящего изобретения не только сокращает продолжительность времени и усилия, необходимые для создания субтитра или меню для главного и вспомогательного видов, но также может реализовать стереоскопическое воспроизведение, даже если память в устройстве воспроизведения имеет размер одной плоскости в качестве блока памяти плоскости. Таким образом, это позволяет реализовать эффективный авторинг и снижение стоимости в устройстве воспроизведения.

В вышеозначенном носителе записи, данные изображения в видеопотоке главного вида и данные изображения в видеопотоке вспомогательного вида могут представлять совокупность групп изображений, причем каждая из совокупности групп изображений может образовывать совокупность кадров и может иметь информацию управления, в виде последовательности параметров, в соответствии с каждым из совокупности кадров. Последовательность параметров может задавать глубину графики для каждого кадра, образованного из каждой группы изображений на временной оси видеопотока. Таким образом, в одной последовательности параметров можно задать функцию Z(t) для вычисления, из произвольного времени кадра "t", глубины "z", которая соответствует времени кадра "t".

Когда функция Z(t) является параболической функцией, имеющей время кадра в качестве переменной, устройство воспроизведения может использовать, для управления сдвигом, последовательность параметров, соответствующую функции Z(t), для создания реалистического воспроизведения видео, в котором, например, графика, представляющая бейсбольный мяч, приближается к наблюдателю или удаляется от него.

Благодаря вышеописанной структуре, можно изменять глубину в реальном времени по мере продвижения точки воспроизведения на временной оси видеопотока. Таким образом, можно реализовать переменное стереоскопическое воспроизведение графики, даже в отсутствие графических материалов, соответствующих левому и правому глазу.

Краткое описание чертежей

Фиг.1A-1C - вариант осуществления действия по использованию носителя записи, устройства воспроизведения, устройства отображения и очков.

Фиг.2 - голова пользователя в левой стороне чертежа и изображения скелета динозавра, видимые, соответственно, левым глазом и правым глазом пользователя в правой стороне чертежа.

Фиг.3 - один пример внутренних структур видеопотоков левого вида и правого вида для стереоскопического наблюдения.

Фиг.4A и 4B - осуществление управления смещением на многослойной модели блоков памяти плоскости в режиме «1 плоскость + смещение».

Фиг.5A-5C - воспроизведение стереоскопического изображения путем управления смещением, показанного на фиг.4.

Фиг.6A-6D - реализация стереоскопического наблюдения в режиме «1 плоскость + смещение».

Фиг.7 - внутренняя структура потока зависимого вида, который обеспечивается информацией управления для режима «1 плоскость + смещение».

Фиг.8A-8C - внутренняя структура контейнера пользовательских данных.

Фиг.9 - синтаксис для описания метаданных смещения.

Фиг.10A и 10B - пример различия между наблюдениями, обеспеченными положительным и отрицательным смещениями плоскости.

Фиг.11 - график, в котором горизонтальная ось представляет временную ось, и вертикальная ось представляет "Plane_offset_value[j]".

Фиг.12 - график, в котором горизонтальная ось представляет временную ось, и вертикальная ось представляет "Plane_offset_value[j]".

Фиг.13 - один пример глубин, заданных последовательностями смещения при offset_sequence_id = 1, 2, 3 и 4.

Фиг.14A-14C - внутренняя структура носителя записи согласно варианту осуществления 1.

Фиг.15A и 15B - сохранение видеопотока в последовательностях пакетов PES.

Фиг.16 - схема мультиплексирования главного TS.

Фиг.17A и 17B - внутренние структуры главного TS и вспомогательного TS.

Фиг.18A-18D - внутренняя структура информации списка воспроизведения.

Фиг.19A и 19B - один пример базовой таблицы выбора потока.

Фиг.20 - внутренняя структура расширенной таблицы выбора потока.

Фиг.21A-21C - регистрационные последовательности потоков в расширенной таблице выбора потока.

Фиг.22 - демультиплексирование элементарных потоков из главного TS и вспомогательных TS с использованием базовой таблицы выбора потока и расширенной таблицы выбора потока.

Фиг.23 - обеспечение регистрационных последовательностей потоков в базовой таблице выбора потока и обращение к расширенной таблице выбора потока при осуществлении демультиплексирования, показанного на фиг.22.

Фиг.24 - изменение назначения номеров потоков.

Фиг.25 - синтаксис для записи расширенной таблицы выбора потока на объектно-ориентированном языке компилятора.

Фиг.26 - внутренняя структура устройства воспроизведения.

Фиг.27A-27C - вывод идентификаторов пакетов на блок демультиплексирования посредством объединенной регистрационной последовательности потоков.

Фиг.28A-28C - вывод идентификаторов пакетов на блок демультиплексирования посредством объединенной регистрационной последовательности потоков.

Фиг.29 - обращение к идентификаторам пакетов и вывод пакетов, когда устройство воспроизведения переведено в режим презентации B-D, и устройство воспроизведения имеет возможность B-D.

Фиг.30 - обращение к идентификаторам пакетов и вывод пакетов, когда устройство воспроизведения переведено в режим «1 плоскость + смещение».

Фиг.31 - обращение к идентификаторам пакетов и вывод пакетов, когда устройство воспроизведения переведено в режим презентации 2D.

Фиг.32 - обращение к идентификаторам пакетов и вывод пакетов, когда устройство воспроизведения не имеет возможности работать в режиме презентации B-D.

Фиг.33 - процедура воспроизведения списка воспроизведения.

Фиг.34 - процедура выбора потока.

Фиг.35 - процедура вывода идентификатора пакета, соответствующего номеру потока.

Фиг.36 - логическая блок-схема процедуры сдвига плоскости PG.

Фиг.37 - логическая блок-схема процедуры сдвига плоскости PG, когда целью воспроизведения является поток текстовых субтитров.

Фиг.38 - логическая блок-схема процедуры сдвига плоскости IG.

Фиг.39 - логическая блок-схема процедуры сдвига плоскости IG, когда Fixed_offset_during_Popup для STN_table_SS находится в состоянии ON.

Фиг.40 - соответствие между файлом «2D»/файлом «базовый» и файлом «зависимый».

Фиг.41A - 41C - соответствие между файлом перемеженного потока и файлом «2D»/файлом «базовый».

Фиг.42 - соответствие между файлом стереоскопического перемеженного потока, файлом «2D», файлом «базовый» и файлом «зависимый».

Фиг.43 - список воспроизведения 2D и список воспроизведения 3D.

Фиг.44 - список воспроизведения, генерируемый путем добавления вспомогательного пути в список воспроизведения 3D.

Фиг.45A и 45B - список воспроизведения 3D, генерируемый путем добавления индикатора базового вида в список воспроизведения 3D.

Фиг.46 - логическая блок-схема, демонстрирующая процедуру воспроизведения элементов воспроизведения.

Фиг.47A-47B - внутренняя структура информационного файла клипа.

Фиг.48 - синтаксис информации начальной точки экстента.

Фиг.49A и 49B - таблица карты записей, включенная в информационный файл клипа.

Фиг.50 - атрибут потока, включенный в программную информацию.

Фиг.51 - регистрация точек записи в карте записей.

Фиг.52 - восстановление последовательности ATC из блоков данных, образующих файл стереоскопического перемеженного потока.

Фиг.53A и 53B - восстановление последовательности ATC.

Фиг.54 - процедура для восстановления последовательности ATC.

Фиг.55A и 55B - внутренние структуры блока демультиплексирования и видеодекодера.

Фиг.56A и 56B - внутренняя структура графического декодера для PG-потока.

Фиг.57A и 57B - внутренняя структура декодера текстовых субтитров.

Фиг.58A и 58B - модели декодера для декодера IG.

Фиг.59 - структура схемы для перекрытия выходов этих моделей декодера и вывода результата в режиме 3D-LR.

Фиг.60 - структура схемы для перекрытия выходов моделей декодера и вывода результата в режиме «1 плоскость + смещение».

Фиг.61 - внутренняя структура многослойного оптического диска.

Фиг.62 - формат приложения оптического диска на основании файловой системы.

Фиг.63A и 63B - способ изготовления оптического диска.

Фиг.64 - логическая блок-схема процедуры, осуществляемой на этапе авторинга.

Фиг.65 - логическая блок-схема процедуры для записи AV файла.

Фиг.66 - внутренняя структура устройства записи.

Фиг.67 - структура устройства 2D/3D воспроизведения.

Фиг.68 - внутренняя структура системного целевого декодера 4 и набора 5a блоков памяти плоскости.

Фиг.69 - внутренние структуры набора 10 регистров и движка 7b управления воспроизведением.

Фиг.70 - переход между состояниями модели выбора режима вывода.

Фиг.71 - логическая блок-схема процедуры для процесса инициализации.

Фиг.72 - "Процедура, когда условие воспроизведения изменяется".

Фиг.73A-73D - битовое назначение в регистре настроек проигрывателя для реализации режима 3D воспроизведения.

Фиг.74A-74E - соотношения между глубинами макроблоков и параметрами для управления сдвигом.

Фиг.75 - логическая блок-схема процедуры для задания последовательности смещения, которая выполняется одновременно с кодированием видеопотока.

Фиг.76A и 76B - сегмент задания окна и информация управления в потоке субтитров.

Фиг.77A-77C - примеры описаний в PCS для DS.

Фиг.78 - изменение смещения с течением времени в случае, когда интерполяция осуществляется с использованием "3d_graphics_offset" в "composition_object" и в случае, когда интерполяция не осуществляется.

Фиг.79 - последовательность смещений, состоящая из смещений, которые соответствуют соответствующим областям, полученным делением экрана.

Фиг.80 - соответствие между глубинами объектов на экране и смещениями.

Фиг.81 - видеодекодер, плоскость левого вида, плоскость правого вида и PG/плоскость IG в числе компонентов устройства воспроизведения.

Фиг.82 - соответствие между содержанием плоскости графики и смещениями.

Фиг.83A-83D - один пример метода 3D-глубины.

Фиг.84 - стереоскопическое изображение, генерируемое в режиме 3D-глубины.

Фиг.85A и 85B - один пример структуры носителя записи для реализации режима 3D-глубины.

Фиг.86 - механизм, позволяющий отличать файлы потока, воспроизводимые в 2D, от тех, которые воспроизводятся в 3D, с использованием имен директорий и файловых расширений, и механизм, позволяющий отличать файлы потока, воспроизводимые методом LR, от тех, которые воспроизводятся методом глубины.

Фиг.87 - информация элемента воспроизведения, которая включает в себя информацию размера элементарных буферов.

Фиг.88 - 3D метаданные, к которым добавлена информация глубины.

Фиг.89 - иллюстративная структура устройства 2D/3D воспроизведения, которое реализовано с использованием интегральной схемы.

Фиг.90 - функциональная блок-схема, демонстрирующая типичную структуру блока обработки потоков.

Фиг.91 - концептуальная схема, демонстрирующая блок переключения 653 и периферию, когда блоком переключения 653 является DMAC.

Фиг.92 - функциональная блок-схема, демонстрирующая типичную структуру блока вывода AV.

Фиг.93 - иллюстративная структура, более подробно демонстрирующая блок вывода AV или часть вывода данных устройства воспроизведения.

Фиг.94 - соотношения между областями в памяти и каждой плоскостью в процессе наложения изображения.

Фиг.95 - концептуальная схема процесса наложения изображения, осуществляемого блоком наложения изображения.

Фиг.96 - концептуальная схема процесса наложения изображения, осуществляемого блоком наложения изображения.

Фиг.97 - концептуальная схема процесса наложения изображения, осуществляемого блоком наложения изображения.

Фиг.98 - концептуальная схема процесса наложения изображения, осуществляемого блоком наложения изображения.

Фиг.99 - конфигурация шин управления и шин данных в интегральной схеме.

Фиг.100 - конфигурация шин управления и шин данных в интегральной схеме.

Фиг.101 - простая логическая блок-схема, демонстрирующая операционную процедуру в устройстве воспроизведения.

Фиг.102 - подробная логическая блок-схема, демонстрирующая операционную процедуру в устройстве воспроизведения.

Фиг.103A-103D - один пример информации начальной точки экстента информации клипа базового вида, и один пример информации начальной точки экстента информации клипа зависимого вида.

Фиг.104A-104C - пояснение номеров пакетов источника произвольных блоков данных в последовательностях ATC 1 и 2.

Описание вариантов осуществления

Далее описан вариант осуществления носителя записи и устройства воспроизведения, обеспеченного средством решения вышеописанных проблем, со ссылкой на прилагаемые чертежи. Прежде всего, приведем краткое описание принципа стереоскопического наблюдения.

В общем случае, вследствие различия в позиции между правым глазом и левым глазом, существует небольшое различие между изображением, наблюдаемым правым глазом, и изображением, наблюдаемым левым глазом. Именно это различие позволяет человеческим существам воспринимать изображение, которое они видят, в трех измерениях. Стереоскопическое отображение реализуется с использованием параллакса человеческих существ, благодаря чему моноскопическое изображение выглядит как трехмерное.

В частности, существует различие между изображением, наблюдаемым правым глазом, и изображением, наблюдаемым левым глазом, причем различие соответствует параллаксу человеческих существ. Стереоскопическое отображение реализуется путем попеременного отображения двух типов изображений с регулярными короткими интервалами времени.

"Короткий интервал времени" может представлять собой период времени, достаточно короткий для создания у человеческих существ, за счет попеременного отображения, иллюзии наблюдения трехмерного объекта. Способы реализации стереоскопического наблюдения включают в себя способ, использующий голографическую технологию, и способ, использующий параллаксное изображение.

Первый способ, голографическая технология, отличается тем, что позволяет воспроизводить объект в трех измерениях таким же образом, как человеческое существо обычно воспринимает объект, и тем, что в отношении генерации видео, хотя он установил технологическую теорию, для его осуществления требуется (i) компьютер, который может осуществлять большой объем вычислений для генерации видео для голографии в реальном времени, и (ii) устройство отображения, имеющее разрешение, при котором несколько тысяч линий можно визуализировать на протяжении длины 1 мм. Современная технология испытывает большие трудности в реализации такого продукта, и, таким образом, продукты для коммерческого использования весьма трудно разрабатывать.

С другой стороны, достоинство последнего способа, использующего параллаксное изображение, состоит в том, что стереоскопическое наблюдение можно реализовать только путем подготовки изображений для наблюдения правым глазом и левым глазом. Некоторые технологии, включающие в себя метод последовательной сегрегации, были разработаны для практического использования с той точки зрения, чтобы правый глаз и левый глаз наблюдал только связанные с ним изображения.

Метод последовательной сегрегации - это метод, согласно которому изображения для левого глаза и правого глаза попеременно отображаются в направлении временной оси, благодаря чему левая и правая сцены совмещаются в мозгу за счет эффекта остаточных изображений в глазах, и совмещенное изображение воспринимается как стереоскопическое изображение.

Согласно любому из вышеописанных способов, стереоскопическое изображение состоит из, по меньшей мере, двух изображений точки зрения. Изображение точки зрения - это изображение, до некоторой степени отклоненное, и, по меньшей мере, два изображения точки зрения включают в себя изображение главного вида и изображение вспомогательного вида. При обеспечении изображений главного вида и вспомогательного вида из носителя записи через видеопотоки, видеопоток главного вида и видеопоток вспомогательного вида записываются на носителе записи, где видеопоток главного вида является видеопотоком для обеспечения изображения главного вида, и видеопоток вспомогательного вида является видеопотоком для обеспечения изображения вспомогательного вида. Предусмотрен носитель записи, описанный ниже, что позволяет надлежащим образом записывать на нем видеопоток главного вида и видеопоток вспомогательного вида.

Устройство воспроизведения, описанное в настоящей заявке, представляет собой устройство 2D/3D воспроизведения (проигрыватель), которое, при наличии режима 2D воспроизведения и режима 3D воспроизведения, может переключаться между этими режимами воспроизведения для воспроизведения видеопотока главного вида и видеопотока вспомогательного вида.

На фиг.1A-1C показан вариант осуществления действия по использованию носителя записи, устройства воспроизведения, устройства отображения и очков. Согласно фиг.1A, носитель записи 100 и устройство воспроизведения 200, совместно с телевизором 300, 3D-очками 400 и пультом 500 дистанционного управления, образуют систему домашнего кинотеатра, которая используется пользователем.

Носитель записи 100 предоставляет системе домашнего кинотеатра, например, кинофильм.

Устройство воспроизведения 200 соединено с телевизором 300 и воспроизводит носитель записи 100.

Телевизор 300 обеспечивает пользователя интерактивной операционной средой путем отображения меню и т.п., а также кинофильмом. Пользователю нужно носить 3D-очки 400 для телевизора 300 согласно настоящему варианту осуществления, чтобы реализовать стереоскопическое наблюдение. Здесь, 3D-очки 400 не требуются, когда телевизор 300 отображает изображения лентикулярным методом. Телевизор 300, действующий согласно лентикулярному методу, одновременно выравнивает по вертикали на экране изображения для левого и правого глаза. И лентикулярная линза предусмотрена на поверхности экрана дисплея, благодаря чему пиксели, образующие изображение для левого глаза, формируют изображение только в левом глазу, и пиксели, образующие изображение для правого глаза, формируют изображение только в правом глазу. Это позволяет левому и правому глазам видеть, соответственно, изображения, которые имеют параллакс, и, таким образом, реализовать стереоскопическое наблюдение.

3D-очки 400 снабжены жидкокристаллическими затворами, которые позволяют пользователю наблюдать параллаксное изображение методом последовательной сегрегации или методом поляризационных очков. Здесь, параллаксное изображение - это изображение, которое состоит из пары (i) изображения, которое поступает только в правый глаз, и (ii) изображения, которое поступает только в левый глаз, благодаря чему изображения, соответственно, связанные с правым и левым глазом, соответственно поступают в глаза пользователя, что позволяет реализовать стереоскопическое наблюдение. На фиг.1B показано состояние 3D-очков 400, когда отображается изображение левого вида. В момент, когда изображение левого вида отображается на экране, жидкокристаллический затвор для левого глаза находится в состоянии пропускания света, и жидкокристаллический затвор для правого глаза находится в состоянии блокирования света. На фиг.1C показано состояние 3D-очков 400, когда отображается изображение правого вида. В момент, когда изображение правого вида отображается на экране, жидкокристаллический затвор для правого глаза находится в состоянии пропускания света, и жидкокристаллический затвор для левого глаза находится в состоянии блокирования света.

Пульт 500 дистанционного управления - это устройство для приема от пользователя операций для воспроизведения AV. Пульт 500 дистанционного управления - это устройство для приема от пользователя операций на многослойном GUI. Для приема операций, пульт 500 дистанционного управления снабжен кнопкой «меню», кнопками стрелок, кнопкой «ввод», кнопкой «возврат» и цифровыми кнопками, где кнопка «меню» используется для вызова меню, образующего GUI, кнопки стрелок используются для перемещения между и выделения компонентов GUI, образующих меню, кнопка «ввод» используется для осуществления операции ENTER (определения) на компоненте GUI, образующем меню, кнопка «возврат» используется для возврата к более высокому слою в многослойном меню.

В системе домашнего кинотеатра, показанной на фиг.1A-1C, режим вывода устройства воспроизведения, предписывающий устройству отображения 300 отображать изображения в режиме 3D воспроизведения, называется "режим 3D вывода", и режим вывода устройства воспроизведения, предписывающий устройству отображения 300 отображать изображения в режиме 2D воспроизведения, называется "режим 2D вывода".

На этом завершается описание действия по использованию носителя записи и устройства воспроизведения.

(Вариант осуществления 1)

Вариант осуществления 1 отличается тем, что, когда пара видеопотока главного вида и видеопотока вспомогательного вида для реализации стереоскопического воспроизведения поступает на устройство воспроизведения 200 путем записи этих потоков на носителе записи 100, информация управления, задающая управление смещением, внедряется в метаданные в видеопотоке вспомогательного вида.

Упомянутое здесь управление смещением - это управление для применения смещений левого и правого направлений к горизонтальным координатам в плоскости графики и перекрытия результирующих плоскостей графики с плоскостью видео главного вида и плоскостью видео вспомогательного вида, на которых визуализируются данные изображения, составляющие главный вид и вспомогательный вид, соответственно.

Кроме того, информация управления, используемая при управлении сдвигом, функционирует как последовательности параметров, которые задают (i) информацию, указывающую значение смещения, и (ii) информацию, указывающую направление смещения, в соответствии с каждым из совокупности кадров.

В нижеследующем описании, главный вид и вспомогательный вид используются для реализации метода параллаксного изображения. Метод параллаксного изображения (также именуемый режимом 3D-LR) - это способ реализации стереоскопического наблюдения путем отдельной подготовки изображения для правого глаза и изображения для левого глаза, и направления изображения для правого глаза только в правый глаз и изображения для левого глаза только в левый глаз. На фиг.2 показана голова пользователя в левой стороне чертежа и изображения скелета динозавра, видимые, соответственно, левым глазом и правым глазом пользователя в правой стороне чертежа. Когда пропускание и блокирование света повторяются попеременно для правого и левого глаза, левая и правая сцены совмещаются в мозгу пользователя за счет эффекта остаточных изображений в глазах, и совмещенное изображение воспринимается как стереоскопическое изображение, возникающее перед пользователем.

Среди параллаксных изображений, изображение, поступающее в левый глаз, называется изображением левого глаза (L-изображением), и изображение, поступающее в правый глаз, называется изображением правого глаза (R-изображением). Видео, состоящее только из L-изображений, называется видео левого вида, и видео, состоящее только из R-изображений, называется видео правого вида. Кроме того, видеопотоки, полученные оцифровкой и кодированием со сжатием видео левого вида и видео правого вида, называются видеопотоком левого вида и видеопотоком правого вида, соответственно.

Эти видеопотоки левого вида и правого вида сжимаются путем кодирования с прогнозированием между изображениями с использованием скоррелированного свойства между точками вида, а также путем кодирования с прогнозированием между изображениями с использованием скоррелированного свойства на временной оси. Изображения, образующие видеопоток правого вида, сжимаются путем обращения к изображениям, образующим видеопоток левого вида, имеющим одинаковые времена отображения. Один из методов сжатия видео, использующих такое скоррелированное свойство между точками вида, представляет собой исправленный стандарт MPEG-4 AVC/H.264, который называется Multi-view Video Coding (MVC). Joint Video Team (JVT), совместный проект ISO/IEC MPEG и ITU-T VCEG, завершенный в июле 2008 формулировка исправленного стандарта MPEG-4 AVC/H.264, именуемого Multi-view Video Coding (MVC). MVC - это стандарт кодирования, в большом объеме, изображений для совокупности точек наблюдения. Благодаря использованию, в предсказательном кодировании, сходства изображений между точками вида, а также сходства изображений на временной оси, MVC имеет повышенную эффективность сжатия по сравнению с методами кодирования независимых изображений для совокупности точек наблюдения.

Видеопоток, среди видеопотока левого вида и видеопотока правого вида, кодированный со сжатием посредством MVC, который можно декодировать независимо, называется "видеопоток базового вида". Индикатор базового вида, который будет описан позже, указывает, какой из видеопотока левого вида и видеопотока правого вида указан как видеопоток базового вида. Кроме того, видеопоток, среди видеопотока левого вида и видеопотока правого вида, кодированный со сжатием на основании свойства межкадровой корреляции с каждыми данными изображения, составляющими видеопоток базового вида, и который можно декодировать только после декодирования видеопотока базового вида, называется "поток зависимого вида".

Видеопоток, среди видеопотока левого вида и видеопотока правого вида, кодированный со сжатием с использованием скоррелированного свойства между точками вида, который можно декодировать независимо, называется "видеопоток базового вида". Индикатор базового вида в информации элемента воспроизведения указывает, какой из видеопотока левого вида и видеопотока правого вида указан как видеопоток базового вида.

В настоящее время MVC считается наилучшим методом кодирования стереоскопических изображений. Соответственно, в дальнейшем описании предполагается, что "видеопоток главного вида" является "видеопотоком базового вида", и "видеопоток вспомогательного вида" является "видеопотоком зависимого вида".

Ниже описан видеопоток в формате MPEG4-AVC, который составляет основу видеопотока MVC.

Видеопоток MVC имеет структуру GOP и состоит из замкнутых GOP и открытых GOP. Замкнутая GOP состоит из IDR-изображение, и B-изображения и P-изображения, которые следуют за IDR-изображением. Открытая GOP состоит из I-изображения не-IDR и B-изображений и P-изображений, которые следуют за I-изображением не-IDR.

I-изображения не-IDR, B-изображения и P-изображения кодируются со сжатием на основании кадровой корреляции с другими изображениями. B-изображение - это изображение, состоящее из данных среза в двунаправленно-предсказательном (B) формате, и P-изображение - это изображение, состоящее из данных среза в предсказательном (P) формате. B-изображение подразделяется на опорное B (Br) изображение и неопорное B (B) изображение.

В замкнутой GOP, IDR-изображение располагается сверху. В порядке отображения, IDR-изображение не располагается сверху, но изображения (B-изображения и P-изображения), отличные от IDR-изображения, не могут иметь отношения зависимости с изображениями, существующими в GOP, которая предшествует замкнутой GOP. Отсюда можно понять, что замкнутая GOP призвана завершать отношение зависимости.

Теперь будет описана внутренняя структура GOP. Каждый фрагмент данных изображения в открытых и замкнутых GOP имеет единицу доступа к видео структуре метода кодирования H.264.

Соотношение между единицей доступа к видео и изображением - это "1 единица доступа к видео = 1 изображение". В BD-ROM, отношение ограничивается "1 пакет PES = 1 кадр". Таким образом, когда видео имеет кадровую структуру, "1 пакет PES = 1 изображение", и когда видео имеет полевую структуру, "1 пакет PES = 2 изображения". С учетом этого, в пакете PES хранится изображение в отношении один к одному.

На фиг.3 показан один пример внутренних структур видеопотоков левого вида и правого вида для стереоскопического наблюдения.

Во второй строке фиг.3 показаны внутренние структуры видеопотока левого вида. Этот поток включает в себя данные изображения I1, P2, Br3, Br4, P5, Br6, Br7 и P9. Эти данные изображения декодируются согласно Decode Time Stamps (DTS). Первая строка демонстрирует изображение левого глаза. Изображение левого глаза воспроизводится путем воспроизведения декодированных данных изображения I1, P2, Br3, Br4, P5, Br6, Br7 и P9 согласно PTS, в порядке I1, Br3, Br4, P2, Br6, Br7 и P5.

В четвертой строке фиг.3 показаны внутренние структуры видеопотока правого вида. Этот поток включает в себя данные изображения P1, P2, B3, B4, P5, B6, B7 и P8. Эти данные изображения декодируются согласно DTS. Третья строка демонстрирует изображение правого глаза. Изображение правого глаза воспроизводится путем воспроизведения декодированных данных изображения P1, P2, B3, B4, P5, B6, B7 и P8 согласно PTS, в порядке P1, B3, B4, P2, B6, B7 и P5.

Пятая строка показывает, как изменяется состояние 3D-очков 400. Как показано в пятой строке, при наблюдении изображения левого глаза, закрыт затвор для правого глаза, и при наблюдении изображения правого глаза, закрыт затвор для левого глаза.

Согласно фиг.3, например, начальное P-изображение видеопотока правого вида ссылается на I-изображение видеопот