Система широковещания, устройство передачи и способ передачи, устройство приема и способ приема и программа

Система широковещания, устройство передачи и способ передачи, устройство приема и способ приема и программа

Иллюстрации

Показать все

Реферат

Область техники, к которой относится изобретение

Настоящее изобретение относится к системе широковещания, устройству передачи и способу передачи, устройству приема и способу приема, и программе, и, более конкретно, оно относится, например, к системе широковещания, устройству передачи и способу передачи, устройству приема и способу приема, и программе, которые позволяют выполнять соответствующую обработку на стороне приема системы широковещания.

Уровень техники

Например, в современной системе широковещания для аналоговой широковещательной передачи или цифровой широковещательной передачи изображения и звуки редактируют как данные материала в станции широковещания на стороне передачи. Отредактированные изображения и звуки передают как программы широковещания.

С другой стороны, например, в каждом доме на стороне приема, вывод программ, передаваемых в режиме широковещания из станции широковещания, то есть отображение изображений и вывод звуков в качестве программы выполняют с помощью ТВ (телевизионный приемник) или тому подобное.

Следует отметить, что, когда внимание фокусируют на одной программе, один тип изображения и звука, получаемый в результате редактирования, выполняемого в станции широковещания, передают в режиме широковещательной передачи как одну программу в современной системе широковещания. В соответствии с этим пользователи, находящиеся на стороне приема, могут наслаждаться только одним типом изображения и звука.

Однако потенциально могут возникать запросы на участие пользователя, например, в отношении одной программы, такой как драматическая программа, и эти запросы состоят в том, что пользователь желает посмотреть развитие драматической программы с точки зрения любимого персонажа пользователя, и запросы могут быть направлены на то, что пользователь желает изменить развитие истории в зависимости от точки зрения.

Следовательно, таким образом, автор настоящей заявки ранее предложил устройство приема цифровой широковещательной передачи, позволяющее пользователю произвольно выбирать и отслеживать множество материалов, заранее подготовленных с разных точек зрения (например, см. Патентный документ 1).

[Патентный документ 1] Публикация №2006-217662 находящейся на экспертизе заявки на японский патент

Сущность изобретения

Техническая задача

В то же время, в станции широковещания, например, изображения и звуки редактируют, как описано выше. Однако, на экране отображения телевизора, предусмотренном на стороне приема, на котором должны быть отображены изображения, не выполняют редактирование.

В соответствии с этим, когда экран отображения телевизора, предусмотренного на стороне приема, большой, лицо человека отображают в ТВ, с размером, который больше, чем размер лица в реальном мире, вследствие чего может быть ухудшено ощущение реальности.

Кроме того, на экране ТВ, который предусмотрен на стороне приема, например, как описано выше, отображают редактируемые изображения и звуки, которые были отредактированы в станции широковещания.

В соответствии с этим, например, когда в станции широковещания выполняют редактирование, при котором большое количество telop (применяемая в Японии система передачи текста с телевизионным сигналом, текст, наложенный на изображение) скомбинированы с изображением, даже пользователь (зрители), которые ощущают, что эффекты, выделенные с использованием telop, являются ненужными, должен смотреть на изображение, с которым скомбинировано большое количество telop.

Настоящее изобретение было разработано с учетом таких обстоятельств и позволяет выполнять соответствующую обработку на стороне приема системы широковещательной передачи, позволяя, таким образом, например, обеспечивать для пользователя ощущение реальности или отображения изображения, соответствующего предпочтениям пользователя.

Техническое решение

Система широковещания в соответствии с первым аспектом настоящего изобретения представляет собой систему широковещания, включающую в себя устройство передачи, которое передает данные, и устройство приема, которое принимает эти данные. Устройство передачи включает в себя средство передачи, предназначенное для передачи данных материала, которые получают с помощью датчика, и дополнительной информации, которую используют для обработки данных материала в устройстве приема. Устройство приема включает в себя средство приема, предназначенное для приема данных материала и дополнительной информации; средство генерирования, предназначенное для генерирования выходных данных на основе данных материала и дополнительной информации; и средство вывода, предназначенное для формирования выхода на основе выходных данных.

В первом аспекте, как описано выше, устройство передачи передает данные материала, которые получают с помощью датчика, и дополнительную информацию, которую используют для обработки данных материала в устройстве приема. Устройство приема принимает данные материала и дополнительную информацию и генерирует выходные данные на основе данных материала и дополнительной информации. Затем формируют выход на основе выходных данных.

Устройство передачи или программа в соответствии со вторым аспектом настоящего изобретения представляет собой устройство передачи, которое, вместе с устройством приема, которое принимает данные, образует систему широковещания и затем передает данные или программу для обеспечения выполнения компьютером функции устройства передачи. Устройство передачи включает в себя средство передачи, предназначенное для передачи данных материала, который был получен с помощью датчика, и дополнительной информации, которую используют для обработки данных материала с устройством приема.

Способ передачи в соответствии со вторым аспектом настоящего изобретения представляет собой способ передачи для устройства передачи, которое, вместе с устройством приема, которое принимает данные, образует систему радиовещания, и которая передает данные. Способ передачи включает в себя этап передачи устройством передачи данных материала, получаемых с помощью датчика, и дополнительной информации, которую используют для обработки данных материала, в устройство приема.

Во втором аспекте, как описано выше, передают данные материала, полученные датчиком, и дополнительную информацию, которую используют для обработки данных материала в устройстве приема.

Устройство приема или программа в соответствии с третьим аспектом настоящего изобретения представляет собой устройство приема, которое, вместе с устройством передачи, которое передает данные, образует систему широковещания, и которая принимает данные или программу для обеспечения выполнения компьютером функции устройства приема. Устройство приема включает в себя, в случае, когда устройство передачи передает данные материала, которые получают с помощью датчика, и дополнительную информацию, которую используют для обработки данных материала в устройстве приема, средство приема, предназначенное для приема данных материала и дополнительной информации; средство генерирования, предназначенное для генерирования данных выхода на основе данных материала и дополнительной информации; и средство вывода, предназначенное для формирования выхода на данных выхода.

Способ приема в соответствии с третьим аспектом настоящего изобретения представляет собой способ приема для устройства приема, которое, вместе с устройством передачи, которое передает данные, образует систему широковещания, и которое принимает данные. Способ приема включает в себя следующие этапы: в случае, когда устройство передачи передает данные материала, которые получают с помощью датчика, и дополнительную информацию, используемую для обработки данных материала, в устройство приема, с помощью устройства приема принимают данные материала и дополнительную информацию; генерируют данные выхода на основе данных материала и дополнительной информации и формируют выход на основе данных выхода со средством выхода, для формирования выхода.

В третьем аспекте, как описано выше, принимают данные материала и дополнительную информацию и выходные данные генерируют на основе данных материала и дополнительной информации. Затем формируют выход на основе выходных данных с помощью средства выхода для формирования выхода.

Следует отметить, что программы могут быть предоставлены путем их передачи через среду передачи или путем их записи на носителе записи.

Кроме того, устройство передачи или устройство приема могут представлять собой независимые устройства, или могут составлять внутренний блок, составляющий одно устройство.

Кроме того, передача (широковещательная) (передача) данных также может быть выполнена через кабельную или беспроводную среду передачи и также может быть выполнена через смешанную кабельную и беспроводную среду передачи.

Предпочтительные эффекты

В соответствии с первым-третьим аспектами настоящего изобретения соответствующий процесс может быть выполнен на стороне приема системы широковещания.

Краткое описание чертежей

На фиг.1 показана блок-схема, иллюстрирующая пример конфигурации варианта выполнения системы широковещания, в которой используется настоящее изобретение.

На фиг.2 показана блок-схема, иллюстрирующая пример конфигурации устройства 11 передачи.

На фиг.3 показаны схемы для пояснения частей данных материала и информации эффекта.

На фиг.4 показана схема для пояснения информации переключения.

На фиг.5 показана схема, предназначенная для пояснения информации угла просмотра отображения.

На фиг.6 показана схема, предназначенная для пояснения данных, используемых для комбинирования.

На фиг.7 показана схема, предназначенная для пояснения информации реального мира.

На фиг.8 показана блок-схема последовательности операций для пояснения процесса передачи.

На фиг.9 показана блок-схема, иллюстрирующая пример конфигурации устройства 12 приема.

На фиг.10 показана блок-схема последовательности операций, предназначенная для пояснения устройства приема.

На фиг.11 показана схема, предназначенная для пояснения данных, которые подают в блок 54 генерирования при обработке в реальном режиме.

На фиг.12 показана блок-схема, иллюстрирующая пример конфигурации блока 54 генерирования, который выполняет обработку в реальном режиме.

На фиг.13 показаны схемы, схематично иллюстрирующие состояние, в котором изображение объекта съемки изображения снимают с помощью камеры, и состояние отображения в выходном блоке 55, который представляет собой устройство дисплея.

На фиг.14 представлены схемы, схематично иллюстрирующие состояние, в котором изображение объекта съемки изображения снимают с помощью камеры, используя оптическое изменение масштаба изображения, и состояние отображения в выходном блоке 55, который представляет собой устройство дисплея.

На фиг.15 представлены схемы, схематично иллюстрирующие состояние, в котором изображение объекта съемки изображения снимают с помощью камеры, используя цифровое изменение масштаба изображения, и состояние отображения в выходном блоке 55, который представляет собой устройство дисплея.

На фиг.16 представлены схемы, иллюстрирующие изображения, отображаемые в выходном блоке 55, который представляет собой устройство дисплея.

На фиг.17 показана блок-схема последовательности операций, предназначенная для пояснения процесса реального режима.

На фиг.18 показана схема, поясняющая данные, которые подают в блок 54 генерирования в процессе режима развлечений.

На фиг.19 показана блок-схема, иллюстрирующая пример конфигурации блока 54 генерирования, который выполняет процесс в режиме развлечений.

На фиг.20 показана блок-схема, иллюстрирующая пример конфигурации модуля 84 обработки изображения.

На фиг.21 показана блок-схема, иллюстрирующая пример другой конфигурации устройства 12 приема.

На фиг.22 показана блок-схема, иллюстрирующая пример конфигурации варианта выполнения компьютерной системы, в которой применяют настоящее изобретение.

Пояснение номеров ссылочных позиций

11 устройство передачи, 12 устройство приема, 13 среда передачи, 31 блок датчика, 32 устройство редактирования, 33 блок кодирования, 34 блок передачи, 51 блок приема, 52 блок декодирования, 53 блок разделения, 54 блок генерирования, 55 выходной блок, 56 входной блок, 71 буфер, 72 модуль анализа дополнительной информации, 73 модуль обработки изображения, 81 буфер данных изображения, 82 модуль анализа дополнительной информации, 83 буфер данных, предназначенных для комбинирования, 84 блок обработки изображения, 91 часть выбора изображения, 92 часть выбора инструкции, 93 часть установки области отображения, 94 часть логического вентиля, 95 часть обработки наложения, 101 блок генерирования, 102 выходной блок, 103 входной блок, 111 блок генерирования, 112 выходной блок, 113 входной блок, 201 шина, 202 ЦПУ, 203 ПЗУ, 204 ОЗУ, 205 жесткий диск, 206 выходной модуль, 207 входной модуль, 208 модуль передачи данных, 209 привод, 210 интерфейс входа/выхода, 211 съемный носитель записи

Подробное описание изобретения

На фиг.1 иллюстрируется пример конфигурации варианта выполнения системы широковещания (термин "система" относится к логическому набору множества устройств, независимо от того, находятся ли эти устройства, имеющие индивидуальные конфигурации, в одном и том же корпусе), к которой относится настоящее изобретение.

На фиг.1 система широковещания включает в себя устройство 11 передачи и устройство 12 приема.

Устройство 11 передачи размещено, например, в станции широковещания и передает различные типы данных как программы через носитель 13 передачи, такой как наземная волна, спутниковая схема, Интернет или CATV (кабельное телевидение).

Устройство 12 приема помещают, например, дома, и оно принимает данные, переданные из устройства 11 передачи через среду 13 передачи.

Следует отметить, что устройство 12 приема выполнено с возможностью функционирования, например, в качестве ТВ.

Кроме того, в системе широковещания количество устройств 11 передачи не ограничено одним и может быть предусмотрено множество устройств 11 передачи. Аналогичную конфигурацию также применяют для устройства 12 приема.

На фиг.2 показан пример конфигурации устройства 11 передачи, показанного на фиг.1.

На фиг.2 устройство передачи 11 включает в себя блок 31 датчика, устройство 32 редактирования, блок 33 кодирования и блок 34 передачи.

Следует отметить, что блок 11 датчика и устройство 32 редактирования могут быть предусмотрены как устройства, отличающиеся от устройства 11 передачи.

Блок 31 датчика получает данные материала, используемые как материал при редактировании в устройстве 32 редактирования, и передает эти данные материала в устройство 32 редактирования и в блок 33 кодирования.

Здесь один тип датчика, один тип датчиков или множество типов датчиков можно использовать как блок 31 датчика.

Кроме того, примеры типов датчиков включают в себя камеру, которая чувствительна к свету и которая выводит изображение (захватывает изображение), микрофон, который чувствителен к звуку и который выводит звук (собирает звук), и датчики, которые индивидуально определяют температуру, влажность, направление потока воздуха, скорость потока воздуха, вибрацию, яркость и т.д.

С помощью камеры выполняют захват изображения, и изображение (данные) выводят как данные материала. Кроме того, с помощью микрофона выполняют сбор звука и звук (данные) выводят как материальные данные. Кроме того, с помощью каждого из датчиков, которые определяют соответствующую одну из температуры, влажности, направления потока воздуха, скорости потока воздуха, вибрации и яркости, данные, обозначающие соответствующую одну из температуры, влажности, направления потока воздуха, скорости потока воздуха, вибрации и яркости, выводят как данные материала.

Устройство 32 редактирования генерирует на основе данных материала, передаваемых из блока 31 датчика, дополнительную информацию, которую следует использовать для обработки данных материала в устройстве 12 приема, и передает дополнительную информацию в блок 33 кодирования.

Здесь дополнительная информация включает в себя информацию реального мира, обозначающую физическое количество в реальном мире, цель, определенную блоком 31 датчика, и информацию эффекта, которая представляет собой информацию, используемую для обработки данных материала.

Информацию эффекта генерируют, например, в соответствии с операцией, выполняемой в результате выполнения операции с устройством 32 редактирования продюсером программы, который формирует программу в станции широковещания.

Информацию реального мира генерируют независимо от операции, выполняемой продюсером программы.

Следует отметить, что в устройстве 32 редактирования дополнительную информацию генерируют для каждого типа данных материала. В соответствии с этим, когда множество типов датчиков используют в блоке 31 датчика и множество типов данных материала подают из блока 31 датчика в блок 33 кодирования, дополнительную информацию, соответствующую каждому из множества типов данных материала, подают из устройства 32 редактирования в блок 33 кодирования.

Блок 33 кодирования кодирует данные материала, переданные из блока 31 датчика, и дополнительную информацию, передаваемую из устройства 32 редактирования. Следует отметить, что блок 33 кодирования выполняет мультиплексирование данных материала и кодированных данных в соответствии с необходимостью. Затем блок 33 кодирования подает кодированные данные, которые получают в результате кодирования, в блок 34 передачи.

Блок 34 передачи передает кодированные данные, переданные из блока 33 кодирования, то есть данные материала, полученные с помощью блока 31 датчика, и дополнительную информацию, сгенерированную устройством 32 редактирования, через среду 13 передачи (фиг.1).

Далее будет описана информация эффекта, включаемая в дополнительную информацию, сгенерированную с помощью устройства 32 редактирования.

На фиг.3 показаны части данных материала и информация эффекта, соответствующая частям данных материала.

Другими словами, в части А на фиг.3 иллюстрируется множество потоков изображений (движущихся изображения), которые предусмотрены как части данных материала.

Например, когда изображение для определенной программы выполнено путем редактирования N, которое представляет собой множество потоков изображений S №1, S №2, … и S № N, N потоков изображений S №1 - S № N используют как части данных материала для изображения программы.

Здесь N потоков изображений S №1 - S № N могут представлять собой изображения, индивидуально получаемые с помощью N камер, которые предусмотрены как N датчиков, или могут представлять собой изображения, получаемые М (<N) камерами, которые предусмотрены как М датчиков, где М меньше N (и равно и больше единицы).

Другими словами, например, N потоков изображений, которые получают путем съемки изображений ландшафтов с разных мест с помощью одной камеры в разное время, можно использовать как N потоков изображений S №1 - S № N.

Кроме того, N потоков изображений, которые используются как N потоков изображений, S №1 - S № N, представляют собой следующие: N потоков изображений, полученных в результате индивидуальной съемки изображений всего оркестра, дирижера, музыканта, играющего на определенном музыкальном инструменте, зала, зрителей и т.д., например, с помощью N камер; N потоков изображений, получаемых путем индивидуальной съемки изображений всего стадиона, табло, представляющего счет, конкретного игрока, зрителей и т.д. при выполнении репортажа спортивных событий, таких как репортаж игры в футбол; и N потоков изображений, получаемых в результате индивидуальной съемки изображений всей студии, каждого актерского состава и т.д. в музыкальной программе или тому подобное.

В части В на фиг.3 иллюстрируется информация эффекта, соответствующая N потокам изображений S №1 - S № N, которые представляют собой части данных материала, иллюстрируемого в части А на фиг.3.

Информация эффекта включает в себя, например, информацию переключения, информацию отображения кадра изображения, данные, используемые для комбинирования, и т.д.

Информация переключения представляет собой, например, информацию, предназначенную для переключения между изображениями, отображаемыми в устройстве дисплея, которое описано ниже, устройства 12 приема, путем выбора одного потока изображений среди N потоков изображений S №1 - S № N, которые представляют собой части данных материала.

Информация кадра отображаемого изображения обозначает, например, область, соответствующую участку, который будет отображаться в устройстве дисплея устройства 12 приема, изображения (на фиг.3 один поток изображений среди изображений S №1 - S № N), которое представляет данные материала.

Данные, используемые для комбинирования, представляют собой, например, данные, которые требуется использовать в комбинации с изображением (на фиг.3 один поток изображений среди изображений S №1 - S № N), которое представляет собой данные материала, и включает в себя данные, предназначенные для комбинирования, которые должны быть скомбинированы с изображением.

Здесь примеры данных для комбинирования включают в себя данные (данные для изображения внутри изображения), относящиеся к изображению, отображаемому на малом экране, используя режим отображения изображения внутри изображения (ниже называется изображением PinP), данные, относящиеся к telop (данные, относящиеся к субтитрам), и т.д.

Далее информация переключения, относящаяся к информации эффекта, показанной на фиг.3, будет описана со ссылкой на фиг.4.

Например, как описано выше, когда изображение для определенной программы А конфигурируют путем редактирования N потоков изображений S №1 - S № N, информация переключения представляет собой информацию для переключения среди изображений, отображаемых в устройстве дисплея устройства 12 приема, путем выбора одного потока изображений среди N потоков изображений S №1 - S № N.

Например, в устройстве 32 редактирования, показанном на фиг.2, операцию выреза и редактирование выполняют путем последовательного соединения изображения S №1, которое представляет собой части данных материала в диапазоне от кода t_s1 времени до кода t_e1 времени изображения S №2, которое представляет собой часть данных материала, в диапазоне от кода t_s2 времени до кода t_e2 времени изображения S №3, которое представляет собой часть данных материала в диапазоне от кода t_s3 времени до кода t_e3 времени изображения S №1, которое представляет собой часть данных материала в диапазоне от кода t_s4 времени до кода t_e4 времени … друг с другом в соответствии с операцией, выполняемой продюсером программы, как показано на фиг.4, формируя, таким образом, (изображение для) определенную программу А. В этом случае, например, информацию, с которой части данных материала, которые составляют изображение для программы А, и коды времени частей данных материала, определенные в отдельные моменты времени в программе А, используют как информацию переключения.

Следует отметить, что в устройстве 32 редактирования, когда специальный эффект, такой как удаление изображения, предусмотрен для соединения (так называемая, точка редактирования) между определенным потоком изображений S №i и другим потоком изображений №i', информация переключения включает в себя информацию, относящуюся к специальному эффекту.

Далее информация кадра отображаемого изображения, включенная в информацию эффекта, показанная на фиг.3, будет описана со ссылкой на фиг.5.

Информация кадра отображаемого изображения обозначает, например, как описано выше, область, соответствующую участку, предназначенному для отображения в устройстве дисплея устройства 12 приема, для изображения, которое представляет собой данные материала.

Другими словами, например, когда данные материала представляют собой изображение, в устройстве 32 редактирования может быть выполнено редактирование, в котором учет прямоугольной области, соответствующей участку изображения, которое представляет собой данные материала, как области (ниже, называется областью отображения), соответствующей участку изображения, который будет отображен в устройстве дисплея устройства 12 приема, участок изображения определяют как изображение для программы в соответствии с операцией, выполняемой продюсером программы, как представлено на фиг.5.

В этом случае, в устройстве 32 редактирования продюсер программы может использовать как максимальную область область изображения, которая представляет данные материала, и может производить программу, как если бы продюсер программы захватывал изображение, используя операции с камерой, используя операцию панорамной съемки, операцию наклона или операцию изменения размеров изображения в области.

Здесь область максимального отображения представляет собой область изображения, которое представляет собой данные материала. В соответствии с этим, угол обзора камеры, которая предусмотрена как блок 31 датчика (фиг.2), устанавливают как максимальный угол обзора (который расположен на стороне самого широкого угла) и захватывают изображение, в результате чего размер области отображения может быть максимальным.

Следует отметить, что любая информация, с помощью которой может быть установлена область отображения, может использоваться как информация угла обзора отображения.

Другими словами, например, система координат определена в отношении области изображения, которая представляет собой данные материала, и в системе координат, причем координаты находятся между одной вершиной области отображения и вершиной, которая диагонально противоположна этой вершине, причем координаты на одной вершине области отображения и длину по горизонтали и вертикали области отображения, или подобное, можно использовать как информацию угла обзора отображения.

Кроме того, например, область отображения, которая расположена в заданном положении и которая имеет определенный размер, может быть определена как принятая по умолчанию область отображения, и предыстория использования операции панорамной съемки, операции наклона и операций изменения масштаба изображения, которые выполняют для принятой по умолчанию области отображения во время редактировании продюсером программы, можно использовать как информацию угла обзора отображения.

Далее, данные, используемые для комбинирования, включенные в информацию эффекта, показанную на фиг.3, будут описаны со ссылкой на фиг.6.

Как описано выше, данные, используемые для комбинирования, представляют собой данные, которые используются для комбинирования с данными материала. Данные, используемые для комбинирования, включают в себя данные, предназначенные для комбинирования, которые должны быть скомбинированы с данными материала и информацией о времени, обозначающей моменты времени, в которые выполняют комбинирование, с использованием данных, предназначенных для комбинирования.

Другими словами, например, данные материала представляют собой изображение, и, в устройстве редактирования 32, показанном на фиг.2, во время редактирования выполняют наложение изображения PinP или telop на (комбинируют с) изображение, которое представляет собой данные материала, в соответствии с операцией, выполняемой продюсером программы, формируя, таким образом, программу. В этом случае, изображение PinP или telop используется как данные, предназначенные для комбинирования.

Кроме того, информация, обозначающая время, в течение которого изображение PinP или telop, которое используется как данные, предназначенные для комбинирования, накладывают (например, в момент времени, в который начинается наложение, и момент времени, в который наложение заканчивается), например коды времени для программы, используются как информацию о временных характеристиках.

Следует отметить, что данные, используемые для комбинирования, включают в себя, кроме того, например, информацию, относящуюся к положению на изображении, на которое наложено изображение PinP или telop, используемое как данные для комбинирования.

Кроме того, например, когда данные материала представляют собой звук, BGM (музыкальный фон) или тому подобное, используются как данные, предназначенные для комбинирования.

Когда определенный тип данных материала представляет собой звук, и звук представляет собой звук, сопровождаемый изображением (движущееся изображение), которое представляет собой другой тип данных материала, информацию, обозначающую время относительно звука, также можно использовать как информацию временных характеристик для BGM, которая должна быть скомбинирована со звуком, и также можно использовать коды времени изображения, сопровождаемого звуком.

Далее будет описана информация реального мира, включенная в дополнительную информацию, которую генерируют с помощью устройства 32 редактирования (фиг.2).

Как описано выше, информация реального мира представляет собой информацию, обозначающую физическую величину в реальном мире цели, которая была определена с помощью блока 31 датчика (фиг.2). Например, когда блок 31 датчика представляет собой камеру, информация о протяженности съемки изображения, обозначающая протяженность съемки изображения в положении цели съемки изображения (ниже также называется объектом съемки изображения), чье изображение снимают с помощью камеры и т.д., включена в информацию реального мира.

Здесь протяженность съемки изображения с помощью камеры будет описана со ссылкой на фиг.7.

На фиг.7 показан вид сверху, схематично иллюстрирующий состояние, в котором изображение снимают с помощью камеры.

Теперь, для простоты описания, предположим, что оптическая система (группа линз) камеры не обладает искажениями. Предположим, что угол обзора (ниже также называется "углом обзоры камеры") для камеры в горизонтальном направлении равен 6. Кроме того, предположим, что расстояние (ниже также называется "расстоянием до объекта") от камеры до объекта съемки изображения составляет X.

Следует отметить, что предполагается, что угол 9 обзора камеры известен.

Кроме того, расстояние Х до объекта можно измерить, используя, например, так называемую, технологию автофокусирования.

Другими словами, расстояние Х до объекта может быть измерено, используя, например, датчик на инфракрасных лучах или сонар. Кроме того, расстояние Х до объекта можно измерить, используя схему детектирования контраста, в которой фокус регулируют таким образом, чтобы контраст изображения, снимаемого камерой, был максимальным, схему детектирования разности фаз, в которой фокус регулируют так, чтобы удалить разность между фазами изображений, снимаемых с помощью камеры, или тому подобное.

Следует отметить, что, в случае, когда расстояние Х объекта известно заранее, когда выполняют захват изображения с помощью камеры, измерение расстояния Х до объекта не требуется проводить.

Теперь, для простоты описания, между горизонтальной и вертикальной длинами реального мира, изображение которого снимают в положении объекта съемки изображения, внимание фокусируют, например, только на горизонтальной длине. Предполагается, что горизонтальная длина представляет собой протяженность D съемки изображения в положении объекта съемки изображения.

Протяженность D съемки изображения может быть определена в соответствии с уравнением D=2×Х×tan(θ//2), используя угол зрения θ камеры и расстояние Х до объекта.

Следовательно, в дополнение к изображению, которое представляет собой данные материала, устройство 32, представленное на фиг.2, также получает угол зрения θ камеры и расстояние Х объекта от камеры, которое предоставлено блоком 31 датчика. Устройство 32 редактирования определяет протяженность D съемки изображения по углу зрения 9 камеры и расстоянию Х до объекта. Затем устройство 32 редактирования обеспечивает включение протяженности D съемки изображения как информации о протяженности съемки изображения, в информацию реального мира, и передает эту информацию реального мира в блок 33 кодирования.

Далее, со ссылкой на фиг.8, будет описана обработка (обработка передачи), выполняемая устройством 11 передачи, показанным на фиг.2.

В устройстве 11 передачи данные материала, которые получают с помощью блока 31 датчика, передают в устройство 32 редактирования и в блок 33 кодирования.

В устройстве 32 редактирования дополнительную информацию, которая включает в себя одну из или обе информации эффекта и информации реального мира, генерируют на основе данных материала, передаваемых из блока 31 датчика и т.п., и дополнительную информацию подают в блок 33 кодирования.

Когда данные материала подают из блока 31 датчика в блок 33 кодирования и дополнительную информацию передают из устройства 32 редактирования в блок 33 кодирования, как описано выше, на этапе S11, блок 33 кодирования кодирует данные материала, передаваемые из блока 31 датчика, и дополнительную информацию, предоставляемую из устройства 32 редактирования. Блок 33 кодирования передает кодированные данные, полученные в результате кодирования, в блок 34 передачи, и обработка переходит на этап S12.

На этапе S12 блок 34 передачи передает кодированные данные, которые были поданы из блока 33 кодирования, через среду 13 передачи (фиг.1).

Затем, на фиг.9 иллюстрируется пример конфигурации устройства 12 приема, показанного на фиг.1.

На фиг.9 устройство приема 12 включает в себя блок 51 приема, блок 52 декодирования, блок 53 разделения, блок 54 генерирования, выходной блок 55 и входной блок 56.

Следует отметить, что выходной блок 55 и входной блок 56 могут быть предусмотрены как устройства, отличающиеся от устройства 12 приема.

Блок 51 приема принимает кодированные данные, передаваемые из устройства 11 передачи через среду 13 передачи, то есть данные материала и дополнительную информацию, и подает эти кодированные данные в блок 52 декодирования.

Блок 52 декодирования декодирует кодированные данные, переданные из блока 51 приема, для получения данных и передает эти данные в блок 53 разделения.

Блок 53 разделения разделяет данные, поданные из блока 52 декодирования, на данные материала и дополнительную информацию и подает эти данные материала и дополнительную информацию в блок 54 генерирования.

Блок 54 генерирования генерирует выходные данные на основе данных материала и дополнительной информации, подаваемой из блока 53 разделения, и подает эти выходные данные в выходной блок 55.

Выходной блок 55 формирует заданный выходной сигнал на основе выходных данных, подаваемых из блока 54 генерирования.

Здесь, в качестве выходного блока 55, можно использовать устройство, которое стимулирует пять чувств человека.

Другими словами, устройство, которое стимулирует чувство зрения, такое как устройство дисплея, которое отображает изображение, или устройство освещения, которое излучает свет, можно использовать как выходной блок 55. Кроме того, устройство, которое стимулирует чувство слуха, такое как громкоговоритель, который излучает звук, можно использовать как выходной блок 55.

Кроме того, устройство, которое стимулирует чувство осязания, такое как кондиционер воздуха, который может выполнять, так называемое, кондиционирование воздуха (регулирование характеристик воздуха) (баланс воздуха) по температуре, влажности и потоку воздуха, или встряхивающее устройство, которое генерирует вибрации, можно использовать в качестве выходного блока 55.

Пользователь выполняет операции с входным блоком 56, используя устройство 12 приема. Когда пользователь выполняет операции с входным блоком 56 для предоставления инструкции, входной блок 56 принимает инструкцию, предоставляемую пользователем, и передает информацию об инструкции, обозначающую эту инструкцию, в блок 54 генерирования.

Здесь, когда информацию инструкции подают из входного блока 56 в блок 54 генерирования, блок 54 генерирования генерирует выходные данные на основе информации инструкции.

Далее, со ссылкой на фиг.10, будет описа