Устройство обработки информации и способ обработки информации

Иллюстрации

Показать все

Изобретение относится к устройствам обработки информации. Технический результат заключается в обеспечении возможности распознавания пользователя, выполнившего действие из множества пользователей на полученном изображении. Устройство включает блок распознавания пользователя для распознавания пользователя в полученном изображении и блок распознавания действия для распознавания действия пользователя, блок генерирования для генерирования информации о действии пользователя, включающей в себя информацию о распознанном пользователе и информацию о распознанном действии распознанного пользователя, устройство связи для передачи информации о действии пользователя на внешнее устройство. 4 н. и 14 з.п. ф-лы, 43 ил.

Реферат

Область техники, к которой относится изобретение

Настоящее изобретение относится к устройству обработки информации и способу обработки информации.

Уровень техники

Телефоны, так называемые видеотелефоны, системы видеоконференций и т.п. используются как устройства, предназначенные для обмена информацией между пользователями, находящимися на удалении друг от друга. Дополнительно, также используется способ осуществления текстового чата или видеочата с видеоизображением и звуковым сопровождением через Интернет-соединение, используя персональные компьютеры и т.п.

На таком фоне, устройства, как электронное оборудование, становятся более сложными и многофункциональными и, например, телевизионный приемник имеет функцию осуществления сетевой коммуникации, таким образом, он может не только принимать и отображать видеоинформацию и звуковой контент программы, переданной вещательной станцией, но также осуществляет обмен различными видами информации с другим приемником.

Например, JP 2006-50370A раскрывает технологию, с помощью которой, пользователь просматривает контент программы телевизионного широковещания на телевизионном приемнике, и одновременно с контентом программы, отображается информация, относящаяся к другим зарегистрированным пользователям (например, видеоинформация других пользователей, пиктограммы других пользователей, названия, каналы или видео контент, просматриваемый другими пользователями и т.д.).

Список упоминаемых документов

Патентная литература

PTL 1: JP 2006-50370A

Раскрытие изобретения

Техническая задача

В технологии, раскрытой в JP 2006-50370A, описанной ранее, телевизионный приемник принимает видеосигнал или звуковой сигнал из другого приемника(ов), расположенного в одном месте или расположенных в различных местах, и отображает принятую видеоинформацию или воспроизводит звуковую информацию одновременно с отображением контента программы, например, посредством этого, пользователь может совместно просматривать тот же контент программы и обмениваться информацией тет-а-тет с пользователем, находящимся на удалении от него.

Однако, в случае, когда существует множество пользователей другого приемника, расположенного в одном месте, когда любое одно множество пользователей другого приемника выполняют некоторые действия, например, разговаривают, то это создает трудности для пользователя телевизионного приемника быть уверенным в том, какой пользователь из множества пользователей другого приемника выполнил определенные действия из воспроизведения видеоинформации или звука, принятого от другого приемника.

В свете вышеизложенного, желательно предложить инновационное и усовершенствованное устройство обработки информации и способ обработки информации, позволяющий пользователю, знать какой из пользователей другого устройства обработки информации осуществил действия.

Решение задачи

В соответствии с первым вариантом осуществления, устройство обработки информации может включать в себя блок распознавания пользователя для распознавания пользователя в захваченном изображении, и блок распознавания действия для распознавания действия пользователя. Дополнительно, устройство может включать в себя блок генерирования для генерирования информации о действии пользователя, включающую в себя информацию о распознанном пользователе и распознанном действии распознанного пользователя, и блок связи для передачи информации о действии пользователя на внешнее устройство.

Согласно другому варианту осуществления, устройство обработки информации может включать в себя блок связи для приема от внешнего устройства информации о действии пользователя, включающую в себя информацию о распознанном пользователе и распознанном действии распознанного пользователя, и блок генерирования для управления отображением на экране отображения изображения, включающего в себя, изображение пользователя, соответствующее информации о распознанном пользователе, и визуальное представление, соответствующее информации распознанного действия.

Согласно другому варианту осуществления, способ обработки информации может включать в себя распознавание пользователя в захваченном изображении и распознавание действия пользователя. Дополнительно, способ может включать в себя генерирование процессором информации о действии пользователя, включающую в себя информацию о распознанном пользователе и распознанном действии распознанного пользователя, и передачу информации о действии пользователя на внешнее устройство.

Согласно другому варианту осуществления, способ обработки информации может включать в себя прием от внешнего устройства информации о действии пользователя, включающей в себя информацию о распознанном пользователе и распознанном действии распознанного пользователя, и управление процессором отображения на экране отображения изображения, включающего в себя изображение пользователя, соответствующее информации о распознанном пользователе, и визуальное представление, соответствующей информации о распознанном действии.

Согласно другому варианту осуществления, машиночитаемая программа, выполняемая компьютером, может быть записана на энергонезависимом носителе информации. Программа может включать в себя распознавание пользователя в захваченном изображении и распознавание действия пользователя. Программа может дополнительно включать в себя генерирование информации о действии пользователя, включающей в себя информацию о распознанном пользователе и распознанном действии распознанного пользователя, и передачу информации о действии пользователя на внешнее устройство.

Согласно другому варианту осуществления, машиночитаемая программа, выполняемая компьютером, может быть записана на энергонезависимом носителе информации. Программа может включать в себя прием от внешнего устройства информации о действии пользователя, включающей в себя информацию о распознанном пользователе и распознанном действии распознанного пользователя, и управление отображением на экране отображения изображения, включающее в себя изображение пользователя, соответствующее информации о распознанном пользователе, и визуальное представление, соответствующее информации распознанного действия.

Полезные эффекты изобретения

Как описано ранее, настоящее изобретение предоставляет возможность пользователю, знать который пользователь другого устройства обработки информации осуществил действие.

Краткое описание чертежей

Фиг.1 является пояснительным видом, иллюстрирующий пример системы отображения информации согласно варианту осуществления изобретения.

Фиг.2 является пояснительным видом, иллюстрирующий пример функциональной схемы устройства обработки информации согласно первому варианту осуществления изобретения.

Фиг.3 является пояснительным видом, иллюстрирующий пример конфигурации аппаратных средств устройства обработки информации, показанного на фиг.2.

Фиг.4 является блок-схемой алгоритма процесса воспроизведения, осуществляемого устройством обработки информации, показанного на фиг.2.

Фиг.5 является блок-схемой алгоритма обработки отображения пользователя, осуществляемого на этапе S114 процесса отображения, показанного на фиг.4.

Фиг.6A-6D являются пояснительными видами, иллюстрирующими пример 1 изобретения.

Фиг.7A-7D являются пояснительными видами, иллюстрирующими пример 1 изобретения.

Фиг.8A-8D являются пояснительными видами, иллюстрирующими пример 2 изобретения.

Фиг.9A-9D являются пояснительными видами, иллюстрирующими пример 3 изобретения.

Фиг.10А-10В являются пояснительными видами, иллюстрирующими пример 4 изобретения.

Фиг.11А-11Е являются пояснительными видами, иллюстрирующими пример 5 изобретения.

Фиг.12А-12В являются пояснительными видами, иллюстрирующими пример 6 изобретения.

Фиг.13A-13L являются пояснительными видами, иллюстрирующими пример 7 изобретения.

Фиг.14 является пояснительным видом, иллюстрирующий пример функциональной схемы устройства обработки информации согласно второму варианту осуществления изобретения.

Осуществление изобретения

Здесь и далее, предпочтительные варианты осуществления будут подробно описаны, ссылаясь на прилагаемые чертежи. Необходимо отметить, что в данном описании изобретения и прилагаемых чертежах структурные элементы, которые имеют, по существу, ту же функцию и структуру, обозначены одинаковыми номерами позиций, и повторение описания данных структурных элементов опущено.

Необходимо иметь в виду, что описание будет предоставлено в следующем порядке.

1. Система отображения

2. Функциональная схема устройства обработки информации (первый вариант осуществления)

3. Конфигурации аппаратных средств устройства обработки информации

4. Процесс отображения

5. Примеры

6. Функциональная схема устройства обработки информации (второй вариант осуществления)

1. Система отображения

Во-первых, описывается система отображения согласно варианту осуществления изобретения. Фиг.1 является пояснительным видом, иллюстрирующий пример системы отображения информации согласно варианту осуществления. Фиг.1 представляет собой вид спереди, где система отображения информации просматривается с лицевой стороны.

Как показано на фиг.1, система 100 отображения информации включает в себя устройство 102 отображения и устройство 104 формирования изображения, например.

Устройство 102 отображения может отображать статические изображения или динамические изображения на основании сигналов управления. Например, устройство 102 отображения отображает статические изображения или динамические изображения с использованием жидких кристаллов. Необходимо отметить, что устройство 102 отображения может отображать статические изображения или динамические изображения с использованием самосветящегося дисплея, такого как органический электролюминесцентный дисплей (EL).

Устройство 104 формирования изображения размещается в центре верхней области устройства 102 отображения и может захватывать изображение объекта в направлении отображения устройства 102 отображения. Устройство 104 формирования изображения может захватывать статическое изображение или динамическое изображение с использованием датчика изображения на CCD (прибор с зарядовой связью) или датчика изображения на CMOS (комплементарный металлооксидный полупроводник).

Необходимо отметить, что, хотя устройство 104 формирования изображения установлено в центре верхней области устройства 102 отображения в данной варианте осуществления, месторасположение устройства 104 формирования изображения не ограничивается центром верхней области устройства 102 отображения. Например, устройство 104 формирования изображения может быть установлено в центре нижней области устройства 102 отображения. Дополнительно, хотя в данном варианте осуществления установлено одно устройство 104 формирования изображения, количество устройств 104 формирования изображения не ограничивается одним. Например, могут быть установлены два или более устройств 104 формирования изображения. Более того, хотя в данном варианте осуществления устройство 102 отображения и устройство 104 формирования изображения интегрированы в едином корпусе, устройство 102 отображения и устройство 104 формирования изображения могут быть установлены на различных элементах.

Необходимо отметить, что в системе 100 отображения информации может быть установлен сенсор (не показан), который распознает присутствие или отсутствие пользователя перед устройством 102 отображения, а также блок приема сигнала (не показан), который способен принимать сигнал управления инфракрасного излучения или радиоволны, излученной пультом дистанционного управления (не показан). Сигнал управления представляет собой пример оперирующего сигнала. Дополнительно, сенсор может определять расстояние между устройством 102 отображения и пользователем, находящимся перед устройством 102 отображения. Более того, в систему 100 отображения информации может быть установлено средство приема звука, которое способно принимать звук окружающей среды, такое как, например, микрофон.

Устройство 102 отображения, согласно варианту осуществления, может отображать контент статических изображений или динамических изображений и отображать изображения, генерированные устройством 200 обработки информации в процессе отображения, как показано на фиг.4 и будет описано позже.

Дополнительно, устройство 104 формирования изображения согласно варианту осуществления может захватывать статические изображения или динамические изображения пользователей А и В, которые смотрят на экран отображения устройства 102 отображения, как показано на фиг.2.

2. Функциональная схема устройства обработки информации (первый вариант осуществления)

Далее приведено описание функциональной схемы устройства обработки информации согласно первому варианту осуществления изобретения. Фиг.2 является пояснительным видом, иллюстрирующий пример функциональной схемы устройства обработки информации согласно первому варианту осуществления. Необходимо отметить, что фиг.2 показывает систему 100 отображения информации, которая передает захваченное изображение на устройство 200 обработки информации, представляющее собой устройство обработки информации согласно варианту осуществления, и принимает сигнал управления устройством 102 отображения из устройства 200 обработки информации, и пользователей А и В, которые являются пользователями системы 100 отображения информации и устройства 200 обработки информации. Фиг.2 дополнительно показывает коммуникационную сеть 800, к которой устройство 200 обработки информации может быть подключено, коммуникационный сервер 300 и другие устройства 500 и 700 обработки информации, которые могут быть подключены к коммуникационной сети 800, другую систему 400 отображения информации, которая передает захваченное изображение на устройство 500 обработки информации и принимает сигнал от устройства 500 обработки информации, пользователей С и D, которые являются пользователями системы 400 отображения информации и устройства 500 обработки информации, другую систему 600 отображения информации, которая передает захваченное изображение на устройство 700 обработки информации и принимает сигнал от устройства 700 обработки информации, пользователей Е и F, которые являются пользователями системы 600 отображения информации и устройства 700 обработки информации. Другие системы 400 и 600 отображения информации имеют аналогичную с системой 100 отображения информации конфигурацию и их подробное описание опускается. Дополнительно, другие устройства 500 и 700 обработки информации имеют аналогичную конфигурацию, как и устройство 200 обработки информации и их подробное описание опускается. Другие устройства 500 и 700 обработки информации являются примерами конечных коммуникационных устройств в изобретении.

Как показано на фиг.2, устройство 200 обработки информации включает в себя, например, блок 202 ввода изображения, блок 204 распознавания лиц, блок 206 генерирования отображаемого изображения, блок 208 вывода, блок 210 управления отображением, блок 212 связи, блок 214 ввода речи, блок 216 распознавания речи, блок 218 ввода сигнала управления, блок 220 распознавания действия и блок 222 хранения.

Блок 202 ввода изображения, который является примером входного блока в данном изобретении, принимает захваченное изображение, сгенерированное устройством 104 формирования изображения. Затем, блок 202 ввода изображения передает принятое (введенное) захваченное изображение на блок 212 связи. Необходимо отметить, что блок 202 ввода изображения может передавать принятое захваченное изображение на блок 204 распознавания лиц или блок 206 генерирования отображаемого изображения.

Блок 204 распознавания лиц, который является примером блока распознавания в данном изобретении, принимает захваченное изображение из другого устройства 500, 700 обработки изображения, которое принимается устройством 212 связи, распознает лица пользователей устройства 500, 700 обработки информации из принятого захваченного изображения и распознает пользователей другого устройства 500, 700 обработки информации, т.е. пользователей С и D или пользователей Е и F, на основании результата распознавания лиц. Захваченное изображение от другого устройства 500, 700 обработки информации является примером заранее заданного сигнала, связанного с действиями пользователей конечного коммуникационного устройства, согласно изобретению. Например, блок 204 распознавания лиц распознает пользователей, появившихся в захваченном изображении посредством распознавания деталей лица каждого пользователя из принятого захваченного изображения, информация о деталях лица пользователя хранится в компьютере (здесь и далее называемая как «информация о деталях лица пользователя») и осуществляется сравнение информации о деталях лица пользователя, хранящейся в компьютере, с информацией 223 о деталях лица пользователя для каждого пользователя, которая заранее введена в память компьютера и хранится на блоке 222 хранения. Действие, которые появляются в захваченном изображении, является примером действия в данном изобретении. Необходимо отметить, что блок 204 распознавания лиц может дополнительно распознавать половую идентичность, возраст или иные данные пользователей, появившихся в захваченном изображении. Затем, блок 204 распознавания лиц передает результат распознавания пользователей устройства 500, 700 обработки информации на блок 206 генерирования отображаемого изображения. Дополнительно, блок 204 распознавания лиц может распознавать пользователей устройства 200 обработки информации, которые являются пользователями А и В, посредством приема захваченного изображения от блока 202 ввода изображения и распознавания лиц пользователей устройства 200 обработки информации из принятого захваченного изображения. Захваченное изображение от блока 202 ввода изображения является примером заранее заданного сигнала, связанного с действием пользователей устройства обработки информации согласно изобретению. Блок 204 распознавания лиц может затем передавать результат распознавания пользователей устройства 200 обработки информации на блок 206 генерирования отображаемого изображения или блок 212 связи.

Дополнительно, блок 204 распознавания лиц может распознавать выражения лиц пользователей другого устройства 500, 700 обработки информации из захваченного изображения от другого устройства 500, 700 обработки информации. Изменение выражений лиц является примером действия в изобретении. Затем, блок 204 распознавания лиц может передавать результат распознавания выражений лиц пользователей другого устройства 500, 700 обработки информации на блок 206 генерирования отображаемого изображения. Необходимо отметить, что блок 204 распознавания лиц может распознавать выражения лиц пользователей устройства 200 обработки информации из захваченного изображения от блока 202 ввода изображения. Затем, блок 204 распознавания лиц может передавать результат распознавания выражений лиц пользователей устройства 200 обработки информации на блок 206 генерирования отображаемого изображения или блок 212 связи.

Блок 206 генерирования отображаемого изображения, который является примером блока управления в изобретении, принимает результат распознавания пользователей другого устройства 500, 700 обработки информации от блока 204 распознавания лиц и дополнительно принимает захваченное изображение, захваченное в другой системе 400 отображения информации, или захваченное изображение, захваченное в другой системе 600 отображения информации, которое принимается устройством 212 связи.

Затем, на основании принятого результата распознавания пользователей другого устройства 500, 700 обработки информации, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображения пользователя, представляющие пользователей другого устройства 500, 700 обработки информации, отображаются для каждого пользователя. Подробное описание отображаемого изображения описывается позже. Необходимо отметить, что блок 206 генерирования отображаемого изображения может генерировать изображения пользователя в отображаемом изображении путем извлечения информации о деталях лиц пользователей из принятого захваченного изображения, захваченного в другой системе 400 отображения информации или принятого захваченного изображения, захваченного в другой системе 600 отображения информации. Дополнительно, блок 206 генерирования отображаемого изображения может использовать видеообраз пользователя, представляющий каждого пользователя, например, как изображения пользователя в отображаемом изображении. Затем, блок 206 генерирования отображаемого изображения передает сгенерированное отображаемое изображение на блок 210 управления отображением.

Дополнительно, когда блок 206 генерирования отображаемого изображения принимает захваченное изображение, захваченное в системе 100 отображения информации, от блока 202 ввода изображения, принимает результат распознавания пользователей устройства 200 обработки информации и результат распознавания пользователей другого устройства 500, 700 обработки информации от блока 204 распознавания лиц и принимает захваченное изображение, захваченное в другой системе 400 отображения информации или захваченное изображение, захваченное в другой системе 600 отображения информации, которое принимается устройством 212 связи, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображения пользователя представляют пользователей устройства 200 обработки информации и другого устройства 500, 700 обработки информации, отображаемые для каждого пользователя на основании принятого результата распознавания пользователей устройства 200 обработки информации и другого устройства 500, 700 обработки информации.

Дополнительно, когда блок 212 связи принимает результат распознавания пользователей из захваченного изображения, захваченного в другой системе 400 отображения информации или результат распознавания пользователей из захваченного изображения, захваченного в другой системе 600 отображения информации, блок 206 генерирования отображаемого изображения может принимать результат распознавания и генерировать отображаемое изображение на основании результата распознавания, принятого от блока 212 связи вместо результата распознавания, осуществленного блоком 204 распознавания лиц. В данном случае, вышеописанный блок 204 распознавания лиц может игнорировать результат распознавания пользователей из захваченного изображения из другого устройства 500, 700 обработки информации.

Дополнительно, когда блок 206 генерирования отображаемого изображения дополнительно принимает результат распознавания выражений лиц пользователей другого устройства 500, 700 обработки информации от блока 204 распознавания лиц, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя представляет пользователя, чье выражение лица изменилось, и выражение лица отображается совместно друг с другом в вышеописанном отображаемом изображении на основании дополнительно принятого результата распознавания выражений лиц пользователей другого устройства 500, 700 обработки информации. Например, когда блок 206 генерирования отображаемого изображения распознает, что выражение лица определенного пользователя изменилось, и он улыбается, то блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя, представляющее пользователя, отображается как прыгающее.

Дополнительно, когда блок 206 генерирования отображаемого изображения дополнительно принимает результат распознавания выражений лиц пользователей устройства 200 обработки информации от блока 204 распознавания лиц, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя, представляющее пользователя чье выражение лица изменилось, и выражение лица отображаются совместно друг с другом в описанном выше отображаемом изображении на основании дополнительно принятого результата распознавания выражений лиц пользователей устройства 200 обработки информации.

Дополнительно, когда блок 212 связи принимает результат распознавания выражений лиц пользователей из захваченного изображения, захваченного в системе 400 отображения информации или результат распознавания выражений лиц пользователей из захваченного изображения, захваченного в системе 600 отображения информации, блок 206 генерирования отображаемого изображения может принимать результат распознавания и генерировать отображаемое изображение на основании результата распознавания, принятого от блока 212 связи вместо результата распознавания, осуществленного блоком 204 распознавания лиц.

Дополнительно, когда блок 206 генерирования отображаемого изображения принимает результат распознавания говорящего пользователя среди пользователей другого устройства 500, 700 обработки информации от блока 216 распознавания речи, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя представляет говорящего пользователя и наличие речи отображаются совместно с друг другом в вышеописанном отображаемом изображении на основании дополнительно принятого результата распознавания говорящего пользователя среди пользователей другого устройства 500, 700 обработки информации. Например, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя, представляющее говорящего пользователя, отображается в увеличенном виде.

Дополнительно, когда блок 206 генерирования отображаемого изображения дополнительно принимает результат распознавания говорящего пользователя среди пользователей устройства 200 обработки информации от блока 216 распознавания речи, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя представляет говорящего пользователя и наличие речи отображаются совместно с друг другом на основании дополнительно принятого результата распознавания говорящего пользователя среди пользователей устройства 200 обработки информации.

Дополнительно, когда блок 212 связи принимает результат распознавания говорящего пользователя из устройства ввода речи другого устройства 500 обработки информации или результат распознавания говорящего пользователя из устройства ввода речи в другое устройство 700 обработки информации, блок 206 генерирования отображаемого изображения может принимать результат распознавания и генерировать отображаемое изображение на основании результата распознавания, принятого от устройства 212 связи вместо результата распознавания, осуществленного блоком 216 распознавания речи.

Дополнительно, когда блок 206 генерирования отображаемого изображения дополнительно принимает результат распознавания контента речи говорящего пользователя среди пользователей другого устройства 500, 700 обработки информации от блока 216 распознавания речи, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя представляет говорящего пользователя, наличие речи и контент речи отображаются совместно с друг другом на основании дополнительно принятого результата распознавания контента речи говорящего пользователя из пользователей другого устройства 500, 700 обработки информации. Например, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором текстовое изображение, соответствующее контенту речи, отображается в пределах облачка текста на изображении пользователя, представляющее говорящего пользователя.

Дополнительно, когда блок 206 генерирования отображаемого изображения дополнительно принимает результат распознавания контента речи говорящего пользователя среди пользователей устройства 200 обработки информации от блока 216 распознавания речи, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя представляет говорящего пользователя, наличие речи и контент речи отображаются совместно с друг другом на основании дополнительно принятого результата распознавания контента речи говорящего пользователя среди пользователей устройства 200 обработки информации.

Дополнительно, когда блок 212 связи принимает результат распознавания контента речи говорящего пользователя из устройства речевого ввода в другое устройство 500 обработки информации или результат распознавания контента речи говорящего пользователя из устройства речевого ввода в другое устройство 700 обработки информации, блок 206 генерирования отображаемого изображения может принимать результат распознавания и генерировать отображаемое изображение на основании результата распознавания, принятого от устройства 212 связи вместо результата распознавания, осуществленного блоком 216 распознавания речи.

Дополнительно, когда блок 206 генерирования отображаемого изображения принимает результат распознавания действий пользователей другого устройства 500, 700 обработки информации от блока 220 распознавания действия, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя представляет действующего пользователя и специфические действия отображаются совместно с друг другом на основании дополнительно принятого результата распознавания действий пользователей среди пользователей другого устройства 500, 700 обработки информации. Например, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором контент изображения, которое действующий пользователь намеревается продемонстрировать, отображается в пределах облачка текста из изображения пользователя, представляющее действующего пользователя.

Дополнительно, когда блок 206 генерирования отображаемого изображения принимает результат распознавания действий пользователей устройства 200 обработки информации от блока 220 распознавания действия, блок 206 генерирования отображаемого изображения генерирует отображаемое изображение, в котором изображение пользователя представляет действующего пользователя и специфические действия отображаются совместно с друг другом на основании дополнительно принятого результата распознавания действий пользователей среди пользователей устройства 200 обработки информации.

Дополнительно, когда блок 212 связи принимает результат распознавания действий пользователей из входного блока сигнала управления в другое устройство 500 обработки информации или результат распознавания действий пользователей из входного блока сигнала управления в другое устройство 700 обработки информации, блок 206 генерирования отображаемого изображения может принимать результат распознавания и генерировать отображаемое изображение на основании результата распознавания, принятого из устройства 212 связи вместо результата распознавания, осуществленного блоком 220 распознавания действия.

Выходной блок 208 принимает сигнал управления устройством 102 отображения от блока 210 управления отображением и передает принятый сигнал на устройство 102 отображения. Дополнительно, когда выходной блок 208 принимает речевой ввод в другое устройство 500, 700 обработки информации, принимается блоком 212 связи, выходной блок 208 может передавать принятую речь в громкоговоритель (не показан) или подобное устройство системы 100 отображения информации.

Блок 210 управления отображением, который является примером устройства управления в изобретении, принимает отображаемое изображение от блока 206 генерирования отображаемого изображения. Дополнительно, контент статического изображения или динамического изображения поставляется на блок 210 управления отображением. Затем, блок 210 управления отображением передает сигнал для отображения отображаемого изображения, сгенерированный блоком 206 генерирования отображаемого изображения на экране устройства 102 отображения, на блок 208 вывода. Дополнительно, блок 210 управления отображением может передавать сигнал для отображения контента на экране устройства 102 отображения на блок 208 вывода.

Блок 212 связи принимает захваченное изображение, захваченное в другой системе 400 отображения информации, входной речевой сигнал и входной сигнал управления в другом устройстве 500 обработки информации от коммуникационного сервера 300 связи через сеть 800 связи. Дополнительно, блок 212 связи принимает захваченное изображение, захваченное в другой системе 600 отображения информации, входной речевой сигнал и входной сигнал управления в другом устройстве 700 обработки информации от сервера 300 связи через сеть 800 связи. Необходимо отметить, что блок 212 связи может принимать захваченное изображение, захваченное в другой системе 400 отображения информации, входной речевой сигнал и входной сигнал управления в другом устройстве 500 обработки информации непосредственно от другого устройства 500 обработки информации через сеть 800 связи. По аналогии, блок 212 связи может принимать захваченное изображение, захваченное в другой системе 600 отображения информации, входной речевой сигнал и входной сигнал управления в другом устройстве 700 обработки информации непосредственно от другого устройства 700 обработки информации через сеть 800 связи.

Дополнительно, блок 212 связи может принимать результат распознавания пользователей из захваченного изображения, захваченного в другой системе 400 отображения информации, результат распознавания из входного речевого сигнала или результат распознавания из входного сигнала управления на другое устройство 500 обработки информации, результат распознавания пользователей из захваченного изображения, захваченного в другой системе 600 отображения информации или результат распознавания от входного речевого сигнала или результат распознавания из входного сигнала управления на другое устройство 700 обработки информации, от сервера 300 связи через сеть 800 связи. Необходимо отметить, что блок 212 связи может принимать результат распознавания пользователей из захваченного изображения, захваченного в другой системе 400 отображения информации, и результат распознавания из входного речевого сигнала или входного сигнала управления в другое устройство 500 обработки информации непосредственно из другого устройства 500 обработки информации через сеть 800 связи. По аналогии, блок 212 связи может принимать результат распознавания пользователей из захваченного изображения, захваченного в другой системе 600 отображения информации, и результат распознавания из входного речевого сигнала или результат распознавания из входного сигнала управления на другое устройство 700 обработки информации непосредственно от другого устройства 700 обработки информации через сеть 800 связи.

Дополнительно, блок 212 связи может принимать захваченное изображение от блока 202 ввода изображения, речь от устройства 214 ввода речи и сигнал управления от блока 218 ввода сигнала управления и передавать принятое захваченное изображение, речевой сигнал и сигнал управления на сервер 300 связи через сеть 800 связи. Дополнительно, блок 212 связи может принимать результат распознавания пользователей из захваченного изображения, захваченного в системе 100 отображения информации от блока 204 распознавания лиц, результат распознавания от речевого ввода на устройство 200 обработки информации от блока 216 распознавания речи, и результат распознавания входного сигнала управления на устройство 200 обработки информации от блока 220 распознавания действия, и передает принятые результаты распознавания на сервер 300 связи через сеть 800 связи. Необходимо отметить, что блок 212 связи может передавать принятое захваченное изображение, речевой сигнал и сигнал управления, принятый резуль